基于网络爬虫技术的数字资源检测软件的设计与实现 被引量：13

1

作者 王思敏 尹伊秋 +1 位作者 宣静雯 马冲 《现代电子技术》 北大核心 2019年第10期132-135,共4页

数字资源受网络状态的影响故障频发,图书馆作为高校信息文化的传播中心,做好资源的保障工作意义重大。文中设计实现一种基于爬虫技术的数字资源自动监测系统。该系统利用日志文件替代数据库软件,降低软件复杂度;利用爬虫技术及正则解析... 数字资源受网络状态的影响故障频发,图书馆作为高校信息文化的传播中心,做好资源的保障工作意义重大。文中设计实现一种基于爬虫技术的数字资源自动监测系统。该系统利用日志文件替代数据库软件,降低软件复杂度;利用爬虫技术及正则解析,获取监测URL的状态值和数据库定制名称,监测结果通过邮件自动发送给所有管理员。实验结果表明,该系统具有较好的扩展性能,在任何网络坏境和IP地址下,均能准确进行检测,对运行环境要求低,稳定性好,无需人工操作。 展开更多

关键词 数字资源 自动监测 网络爬虫 日志文件 正则解析 检测软件

下载PDF 职称材料

基于反过滤规则集和自动爬虫的XSS漏洞深度挖掘技术 被引量：12

2

作者 吴子敬 张宪忠 +1 位作者 管磊 胡光俊 《北京理工大学学报》 EI CAS CSCD 北大核心 2012年第4期395-401,共7页

为解决Web网站跨站脚本攻击(XSS)问题,通过对XSS漏洞特征及过滤方式的分析,提出了通过反过滤规则集转换XSS代码并用自动爬虫程序实现漏洞代码的自动注入和可用性检验的XSS漏洞挖掘技术,依此方法可以获取XSS漏洞代码的转换形式及漏洞的... 为解决Web网站跨站脚本攻击(XSS)问题,通过对XSS漏洞特征及过滤方式的分析,提出了通过反过滤规则集转换XSS代码并用自动爬虫程序实现漏洞代码的自动注入和可用性检验的XSS漏洞挖掘技术,依此方法可以获取XSS漏洞代码的转换形式及漏洞的注入入口,以实现对Web跨站漏洞深度挖掘.提出的XSS漏洞挖掘技术在邮箱XSS漏洞挖掘及Web网站XSS漏洞检测方面的实际应用验证了该技术的有效性. 展开更多

关键词 跨站 XSS反过滤 XSS漏洞挖掘 自动爬虫

下载PDF 职称材料

履带式自动跟随小车设计

3

作者 尉祎璠 玄一彤 孟睿 《智能计算机与应用》 2024年第6期193-196,共4页

针对目前智能行李箱环境适应性的不足,设计了履带式智能行李箱运载小车。小车基于UWB超宽带定位技术实时定位主人位置,抗干扰能力高;采用履带式底盘提升小车在复杂路况中通过障碍及爬坡驱动作业性能。本文讨论了电机使能控制信号对履带... 针对目前智能行李箱环境适应性的不足,设计了履带式智能行李箱运载小车。小车基于UWB超宽带定位技术实时定位主人位置,抗干扰能力高;采用履带式底盘提升小车在复杂路况中通过障碍及爬坡驱动作业性能。本文讨论了电机使能控制信号对履带式小车差速转向灵敏度的影响,用实验法确定了小车最佳转向跟随判定阈值角度,并测试了其爬坡能力。结果表明:履带驱动PWM使能信号周期200 ms时转向效果最好,最佳转向跟随判定角度为65°,小车最大爬坡角度为30°。 展开更多

关键词 自动跟随 UWB定位 差速转向 履带式爬坡

下载PDF 职称材料

基于自动导航技术的小型履带拖拉机虚拟转角研究 被引量：5

4

作者 李军辉 刁维芹 《安徽电子信息职业技术学院学报》 2020年第1期1-7,共7页

自动导航系统主要以四轮拖拉机前轮转角和速度为控制和反馈变量,不能直接在小型履带拖拉机上进行改装。以小型履带拖拉机为研究对象,分析履带拖拉机的转向原理和控制机制,分析虚拟前轮转角和拖拉机的前进速度、转弯半径的关系,设计在履... 自动导航系统主要以四轮拖拉机前轮转角和速度为控制和反馈变量,不能直接在小型履带拖拉机上进行改装。以小型履带拖拉机为研究对象,分析履带拖拉机的转向原理和控制机制,分析虚拟前轮转角和拖拉机的前进速度、转弯半径的关系,设计在履带驱动轮安装转速传感器,提出用平均单侧速度平均速度差表示两侧速度差的方法,将履带拖拉机的曲线转向过程分解为直线行驶和转向两个过程,通过对圆形目标路径进行转弯仿真,该方法效果有效。 展开更多

关键词 自动导航 履带拖拉机 前轮转角 仿真

下载PDF 职称材料

信息管理系统自动巡检平台设计与实现 被引量：5

5

作者 承春明 赵欣慧 +3 位作者 王建军 孟世斌 赵东坡 韩源 《电力信息与通信技术》 2020年第9期105-110,共6页

随着电力企业信息化的发展,业务与信息系统融合日益紧密,对这些系统及服务器的监测巡检与管理变得至关重要,采用传统的人工巡检并记录的方式已经不能满足时间效率的需求。为了解决信息系统人工巡检存在的费时、重复性操作问题,文章利用... 随着电力企业信息化的发展,业务与信息系统融合日益紧密,对这些系统及服务器的监测巡检与管理变得至关重要,采用传统的人工巡检并记录的方式已经不能满足时间效率的需求。为了解决信息系统人工巡检存在的费时、重复性操作问题,文章利用爬虫、自动化办公和IT运维自动化技术建立一套信息管理系统自动巡检平台,可自动实现各巡检指标的抓取、判别、显示、存储、统计、预警与巡检报告的制作,使信息系统巡检工作由被动式转向主动式运维、由人工操作转向自动操作,进而大幅提升信息运维工作效率。 展开更多

关键词 信息管理系统 巡检指标 自动巡检 IT运维自动化 网络爬虫 办公自动化

下载PDF 职称材料

基于网络信息与遥感影像的水库自动提取方法研究

6

作者 杨智文 陈金云 张志远 《水利信息化》 2022年第3期34-39,共6页

针对传统建立水库相关数据库的方法多为线下人工统计,受到诸多因素制约的缺陷,将网络信息、电子地图及遥感影像等数据综合利用起来,实现水库自动提取。利用网络爬虫从官方水利政务网站抓取相关信息,筛选出最新的水库名称及所属地等数据... 针对传统建立水库相关数据库的方法多为线下人工统计,受到诸多因素制约的缺陷,将网络信息、电子地图及遥感影像等数据综合利用起来,实现水库自动提取。利用网络爬虫从官方水利政务网站抓取相关信息,筛选出最新的水库名称及所属地等数据,再根据水库名称及所属地,调用百度、高德等地图网站提供的应用接口,获取水库的空间坐标信息,并利用水库坐标对遥感影像做缓冲区分析,提取出水库水体范围,得到1个含有水库名称、坐标、面矢量图的水库基础数据库。经过验证,提取结果的查准率为0.9735,查全率为0.6113,作为二者的调和平均值达到0.751,能够完整监测并提取出大中型水库,但对小型水库的监测提取效果一般,可解决传统水库提取方法需要先验知识的问题,提高对水库的区域性动态监测能力。 展开更多

关键词 水库 自动提取 网络信息 爬虫 遥感影像 水体提取 地图API

下载PDF 职称材料

一种小型履带拖拉机自动导航系统的研究设计

7

作者 李军辉 张武斌 高昌 《农业技术与装备》 2022年第3期27-29,共3页

文章研究了设计了一种小型履带拖拉机自动导航系统,该系统上位机采用基于PixHawk控制软件开源平台,作执行规划路径和行驶决策的主控制器,车辆路径规划和定位采用基于QGroundContro(l QGC)的app,用于设置车辆行驶任务,车辆的定位采用GPS... 文章研究了设计了一种小型履带拖拉机自动导航系统,该系统上位机采用基于PixHawk控制软件开源平台,作执行规划路径和行驶决策的主控制器,车辆路径规划和定位采用基于QGroundContro(l QGC)的app,用于设置车辆行驶任务,车辆的定位采用GPS双天线+实施载波相位差分技术(Real-time kinematic,RTK)定位;下位机采用基于STM32的清华智科控制模块QVC01作为导航车辆的控制单元。研制样车定位精度能够达到厘米级,控制策略采用了PID控制策略,控制精度能够满足果园生产的需要,车辆能够按照预定轨迹行驶。 展开更多

关键词 自动导航 履带拖拉机 RTK

下载PDF 职称材料

双电机履带式水稻收获机底盘自动导航系统设计与试验 被引量：6

8

作者 王伟康 罗承铭 +4 位作者 张国忠 付建伟 董昭 季超 赵状状 《华中农业大学学报》 CAS CSCD 北大核心 2022年第2期199-207,共9页

针对人工操作履带式收获机进行再生稻头季收获碾压率高、对行稳定性差,以及现有电动履带式机械大田作业精度低等问题,设计一套双电机履带式底盘自动导航系统并进行了试验验证。以自主设计的用于水稻收获的双电机履带式底盘为基础,基于... 针对人工操作履带式收获机进行再生稻头季收获碾压率高、对行稳定性差,以及现有电动履带式机械大田作业精度低等问题,设计一套双电机履带式底盘自动导航系统并进行了试验验证。以自主设计的用于水稻收获的双电机履带式底盘为基础,基于田间滑移模型推导了底盘转向半径与两侧驱动电机转速关系,并设计了自动导航模糊控制器。采用双天线RTK-GNSS获取双电机履带式底盘的实时位置和航向角信息,由自动导航系统的横向模糊纠偏控制器和两侧电机转速PID控制器实时控制两侧电机转速,实现作业路径自动跟踪。路面试验结果显示:双电机履带式底盘水稻收获机行驶速度为0.6、1.0 m/s时,自动导航系统的平均横向偏差分别为0.015、0.021 m。田间试验显示:双电机履带式底盘水稻收获机行驶速度为0.6 m/s时,自动导航系统的平均横向偏差为0.050 m。研究结果表明,相较于使用电控液压转向改装的导航系统,本导航系统控制量精准、响应速度快,跟踪误差小,可用于再生稻头季机收对行作业以降低碾压率。 展开更多

关键词 再生稻 收获机械 自动导航 双电机履带式底盘 模糊控制 精准作业 田间路径追踪

下载PDF 职称材料

ZDY4500LFK全自动钻机应用研究 被引量：2

9

作者 孟增 王赫乾 +2 位作者 李坤 庞国强 彭光宇 《煤矿机械》 2023年第8期165-167,共3页

为提高煤矿井下钻探设备自动化程度、减少井下施工人数、降低工人劳动强度、改善工作条件,设计了ZDY4500LFK全自动钻机,并在某矿进行工业性试验,对钻机全自动施工的可靠性进行验证。试验结果表明,该钻机全自动钻孔作业稳定可靠,各项功... 为提高煤矿井下钻探设备自动化程度、减少井下施工人数、降低工人劳动强度、改善工作条件,设计了ZDY4500LFK全自动钻机,并在某矿进行工业性试验,对钻机全自动施工的可靠性进行验证。试验结果表明,该钻机全自动钻孔作业稳定可靠,各项功能均满足要求,明显减少施工人数,有效降低工作强度,为煤矿安全高效生产提供了可靠的装备支持。 展开更多

关键词 全自动 履带钻机 现场应用

下载PDF 职称材料

基于多语料库关键词搜索的英汉自动翻译方法 被引量：1

10

作者 贺婧 《自动化与仪器仪表》 2023年第2期170-175,180,共7页

针对当前英汉自动翻译搜索引擎存在关键词提取准确率低,导致英汉翻译效果不佳的问题,设计一个基于多语料库关键词搜索的英汉自动在线翻译系统。通过网络爬虫采集中英文数据并建立一个数据库;然后采用基于词共现+位置信息+相似度的文本... 针对当前英汉自动翻译搜索引擎存在关键词提取准确率低,导致英汉翻译效果不佳的问题,设计一个基于多语料库关键词搜索的英汉自动在线翻译系统。通过网络爬虫采集中英文数据并建立一个数据库;然后采用基于词共现+位置信息+相似度的文本关键词提取算法进行关键词提取,并通过特征词加权计算关键词相似度阀值方法进行英文检索和文本分类;由此实现英汉在线自动翻译。结果表明,对比于传统的TF-IDF算法和基于共现词的关键提取算法,提出的关键词提取算法的查准率、查全率和综合指标均为最高,关键词提取效果更好。提出的改进相似度阀值计算方法的查全率和查准率分别为91.5%和98.2%,相较于现有的编辑距离相似度算法、余弦相似度算法明显更高。且本算法的时间损耗仅为60 s,比另外两种算法分别低了180 s和390 s。由此可知,提出的算法可实现关键词特征准确检索和文本分类,英汉在线翻译效果显著提升,设计的系统具备可行性。 展开更多

关键词 关键词搜索 英汉自动翻译 网络爬虫 词共现 相似度阀值

原文传递

煤矿换杆液压钻车的设计及应用

11

作者 周晓芬 《机械管理开发》 2023年第7期120-121,124,共3页

传统的矿用钻车在工作时需要通过人工换杆,这种方式不但降低了钻车的钻孔效率,而且增加了工人的劳动强度。基于此,设计出了一种新型的煤矿换杆液压钻车。其采用的是全液压驱动模式,行走方式采用履带式,并搭配自动换杆装置。为了进一步... 传统的矿用钻车在工作时需要通过人工换杆,这种方式不但降低了钻车的钻孔效率,而且增加了工人的劳动强度。基于此,设计出了一种新型的煤矿换杆液压钻车。其采用的是全液压驱动模式,行走方式采用履带式,并搭配自动换杆装置。为了进一步验证其可靠性,将其进行了工业性试验。结果表明,该钻车能够很好地完成自动换杆的过程,同时具有结构紧凑的特点,能够实现井下的自由运行。 展开更多

关键词 液压钻车 自动换杆 履带式

下载PDF 职称材料

基于STM32的智能火灾监测及灭火系统设计 被引量：2

12

作者 徐崇奇 解建国 +1 位作者 毕佳琦 潘广禄 《河南科技》 2022年第8期29-33,共5页

近年来火灾频发,尤其是森林、丘陵等地区成为火灾的高发地区,其不仅会造成大量的财产损失,还会对人群造成严重的伤害,甚至引发一系列生态问题,破坏大自然生态平衡。传统的火情监控方式耗时耗力,且一般不能及时处理险情,极易造成不可挽... 近年来火灾频发,尤其是森林、丘陵等地区成为火灾的高发地区,其不仅会造成大量的财产损失,还会对人群造成严重的伤害,甚至引发一系列生态问题,破坏大自然生态平衡。传统的火情监控方式耗时耗力,且一般不能及时处理险情,极易造成不可挽回的损失。基于此,本研究设计并制作了以STM32为核心板的智能火灾监测及灭火小车系统。其采用履带式底盘,可在丘陵等地形复杂的环境中前行,在合理有效避障的过程中检测火源并进行初步灭火,利用透射模块将北斗定位发送至阿里云平台,实现火情信息的实时监测传输,经试验测试,该系统稳定高效,对当今火灾防护研究与探索具有一定的现实价值和意义。 展开更多

关键词 火源搜索 自动避障 履带底盘 超声波避障 无线通信

下载PDF 职称材料

基于百度网页的中文自动问答应用研究 被引量：2

13

作者 石凤贵 《现代计算机》 2020年第8期104-108,共5页

互联网给人类生活和学习带来了便利,在浩瀚的知识海洋里如何快速、准确获取所需知识?我们需要去寻求一种高效的解决办法.充分利用搜索引擎和自然语言处理技术的各自优点,采用jieba中文分词和Word2Vec词向量构建基于百度网页的中文问答系... 互联网给人类生活和学习带来了便利,在浩瀚的知识海洋里如何快速、准确获取所需知识?我们需要去寻求一种高效的解决办法.充分利用搜索引擎和自然语言处理技术的各自优点,采用jieba中文分词和Word2Vec词向量构建基于百度网页的中文问答系统,系统的实现引入深度学习思想. 展开更多

关键词 自然语言处理 自动问答 网络爬虫 jieba中文分词 Word2Vec词向量

下载PDF 职称材料

多变焊缝自适应路径追踪检测自动化系统 被引量：1

14

作者 梁龙双 李晓红 贺凌昊 《仪表技术与传感器》 CSCD 北大核心 2015年第5期96-98,110,共4页

针对目前还没有适用于多变焊缝的自动检测装置,研制了针对多变焊缝的自适应路径追踪检测自动化系统。设计由MC9S12XS128MAL作为主控芯片的控制模块,利用Lab Windows CVI编写上位机软件。设计开发的自适应爬行器能适应多变焊缝结构参数变... 针对目前还没有适用于多变焊缝的自动检测装置,研制了针对多变焊缝的自适应路径追踪检测自动化系统。设计由MC9S12XS128MAL作为主控芯片的控制模块,利用Lab Windows CVI编写上位机软件。设计开发的自适应爬行器能适应多变焊缝结构参数变化,控制模块控制爬行器搭载超声检测探头以焊缝为路径进行自动反馈调节追踪爬行,并将监测到的爬行器运行状态参数和多变焊缝结构测量参数传输到上位机软件进行实时监测、显示记录和分析。系统实现了多变焊缝自适应爬行并沿着焊缝特定轨迹追踪自动检测。 展开更多

关键词 检测自动化系统 多变焊缝 自适应爬行器 路径追踪

下载PDF 职称材料

自动结构化数据的电商网站主题爬虫研究

15

作者 张倩 林安成 廖秀秀 《计算机系统应用》 2018年第7期90-95,共6页

当前对于拥有海量数据的互联网,经常需要采集多个源站的结构化数据以用于数据分析、挖掘,而为不同网站定制数据采集程序的人工成本很高,本文提出了一种自动结构化网站数据的主题爬虫方案.以电商类网站为例,基于其具有统一层次结构、垂... 当前对于拥有海量数据的互联网,经常需要采集多个源站的结构化数据以用于数据分析、挖掘,而为不同网站定制数据采集程序的人工成本很高,本文提出了一种自动结构化网站数据的主题爬虫方案.以电商类网站为例,基于其具有统一层次结构、垂直领域拥有行业语料和规范的特点,从理论角度确定了结构化提取方案的可行性.提出相似重复检测和基于属性语义的标签匹配等算法,实现结构的分析和目标字段的匹配,并出于系统管理和调优的考虑,设计了预设匹配模板和结构分析结果复用机制.实际应用和错误率测试表明,本方案具有很强的可行性,能够大大减少人工编写的代码,错误率较低.设计思路可应用于其他领域的主题爬虫系统,快速获得多个站点的大量数据,将焦点更多地放在结构化数据的处理和信息挖掘. 展开更多

关键词 自动结构化 爬虫 标签匹配 多源站 电商网站

下载PDF 职称材料