基于网络提取技术的GPS/MET水汽站自动监测报警系统 被引量：3

1

作者 李建勇 刘艳中 周钦强 《气象水文海洋仪器》 2013年第2期14-17,21,共5页

文章介绍了基于网络提取技术的GPS/MET水汽站自动监测报警系统,利用系统主机可以通过IE浏览器访问配置的特点,通过网页抓取程序实现对GPSMET水汽站设备进行实时监控。文章详细阐述了利用Inet的OpenURL方法抓取网页内容的方法,针对水汽... 文章介绍了基于网络提取技术的GPS/MET水汽站自动监测报警系统,利用系统主机可以通过IE浏览器访问配置的特点,通过网页抓取程序实现对GPSMET水汽站设备进行实时监控。文章详细阐述了利用Inet的OpenURL方法抓取网页内容的方法,针对水汽站设备的监控给出了数据库的设计和部分入库源程序;并对短信报警模块的设计做了相应介绍,并给出了短信发送程序中编码转换部分的实例。 展开更多

关键词 网络抓取 GPS MET 实时监控 自动报警

下载PDF 职称材料

针对大数据量的高校师生网络文档查找系统设计与实现 被引量：2

2

作者 廖彬 《电子技术与软件工程》 2020年第9期188-189,共2页

本文运用HTML Parser和Lucene设计了一个针对高校师生的网络文档查找系统,解决了师生在大数据时代下运用单一搜索引擎检索信息的不完整性和缺乏针对性问题。实验测试证明,该系统具有较高的针对性、准确性和检索效率,使得用户可以更快地... 本文运用HTML Parser和Lucene设计了一个针对高校师生的网络文档查找系统,解决了师生在大数据时代下运用单一搜索引擎检索信息的不完整性和缺乏针对性问题。实验测试证明,该系统具有较高的针对性、准确性和检索效率,使得用户可以更快地对文档资源进行检索。 展开更多

关键词 大数据 高校师生网络文档 网络抓取 高效索引

下载PDF 职称材料

科技政策宣讲信息服务平台设计与实现

3

作者 徐兵 项顺伯 《软件导刊》 2017年第1期67-68,共2页

为进一步提高科技政策宣讲效率和精准度,更好地将科技政策宣讲服务落实到基层,设计了科技政策宣讲信息服务平台。分析了科技政策知识库建设方法,探讨了信息服务平台建设思路,基于PHP+MySQL开发了科技政策宣讲信息服务平台并投入实际应... 为进一步提高科技政策宣讲效率和精准度,更好地将科技政策宣讲服务落实到基层,设计了科技政策宣讲信息服务平台。分析了科技政策知识库建设方法,探讨了信息服务平台建设思路,基于PHP+MySQL开发了科技政策宣讲信息服务平台并投入实际应用中。 展开更多

关键词 PHP+MYSQL 科技政策宣讲 网络抓取 平台开发

下载PDF 职称材料

互联网网站存档增量采集研究

4

作者 杨云鹏 《数字图书馆论坛》 CSSCI 2020年第12期17-21,共5页

互联网网站存档随着互联网的普及,每年的存储量都在快速增长,导致服务器的存储空间、运行负载和网络带宽已无法满足采集量的增长速度。因此,采集系统过滤掉采集周期内重复的文档实现增量采集将是解决这些问题的关键。本文首先讨论增量... 互联网网站存档随着互联网的普及,每年的存储量都在快速增长,导致服务器的存储空间、运行负载和网络带宽已无法满足采集量的增长速度。因此,采集系统过滤掉采集周期内重复的文档实现增量采集将是解决这些问题的关键。本文首先讨论增量采集的采集策略和工具,然后根据采集策略选取合适的工具进行实际采集验证增量采集效果。通过对采集系统添加附加工具的形式实现互联网网站存档增量采集,并对采集的结果进行分析讨论,实现减轻服务器的运行负载、减少网络带宽的占用、降低互联网网站存档存储空间和提高采集资源展示质量的目标。 展开更多

关键词 互联网网站存档 增量采集 采集策略 网络抓取

下载PDF 职称材料

国外网络抓取数据在CPI统计中的应用实践 被引量：4

5

作者 余芳东 《调研世界》 CSSCI 2018年第7期3-6,共4页

随着互联网交易平台的普及,网络抓取数据成为消费价格统计的重要数据来源。荷兰、英国、挪威等国家十分重视网络抓取数据在消费者价格指数(CPI)编制中的应用,开展试验性研究,并取得突破性进展。这些国家的实践经验和做法,对我国开展相... 随着互联网交易平台的普及,网络抓取数据成为消费价格统计的重要数据来源。荷兰、英国、挪威等国家十分重视网络抓取数据在消费者价格指数(CPI)编制中的应用,开展试验性研究,并取得突破性进展。这些国家的实践经验和做法,对我国开展相关工作具有一定的借鉴和启示。 展开更多

关键词 网络抓取数据 CPI 消费价格统计 官方统计 消费者价格指数

下载PDF 职称材料

基于教学模块的文献检索改革与实践

6

作者 段君淼 潘瑞雪 《新校园（上旬刊）》 2012年第6期13-13,共1页

随着Intemet技术的发展，数字化进程步伐的加快，信息资源变得丰富、交互、易获取。而文献检索课依然存在内容陈旧，形式单一等问题，逐渐落伍。笔者试图从受众分析、教学内容、教学方法、教学手段等方面对文献检索课进行了系统化的改... 随着Intemet技术的发展，数字化进程步伐的加快，信息资源变得丰富、交互、易获取。而文献检索课依然存在内容陈旧，形式单一等问题，逐渐落伍。笔者试图从受众分析、教学内容、教学方法、教学手段等方面对文献检索课进行了系统化的改革实践。 展开更多

关键词 文献检索课 网络抓取 知识拓展

下载PDF 职称材料

基于网络爬虫、移动应用App等技术的城市建筑物调查与在线应用——以贵阳市建筑物普查项目为例 被引量：2

7

作者 佘佐明 申勇智 +2 位作者 钟宝 雷洋 宋剑虹 《城市勘测》 2022年第6期57-61,共5页

在贵阳市建筑物普查项目中,针对贵阳市城区典型的山地城市的建筑分布的特征带来的实地调查工作的一些难题,综合运用了基于网络爬虫建筑物信息抓取、外业调查移动应用App等关键技术,结合普查单元的科学划分、三维场景可视化等多方面技术... 在贵阳市建筑物普查项目中,针对贵阳市城区典型的山地城市的建筑分布的特征带来的实地调查工作的一些难题,综合运用了基于网络爬虫建筑物信息抓取、外业调查移动应用App等关键技术,结合普查单元的科学划分、三维场景可视化等多方面技术,实现了在贵阳特殊地貌环境下高效、准确地获取与更新建筑物普查信息的目标,为今后典型山地城市的地物要素调查类项目的开展建设提供了一定的借鉴作用。 展开更多

关键词 建筑物普查 网络数据抓取 移动应用调查 地物要素

下载PDF 职称材料

旅游景区无形资产绩效评估研究——以天津蓟县为例 被引量：1

8

作者 赵黎明 潘露娃 《重庆理工大学学报（自然科学）》 CAS 2017年第9期158-166,共9页

无形资产是旅游景区的核心竞争力,是提升利润的关键。在已有研究成果的基础上结合旅游行业发展特点,采用层次分析法,创造性地从资源资产、知识资产、市场资产和人力资产4个方面考察旅游景区无形资产,构建一个由16个因素33个因子构成的... 无形资产是旅游景区的核心竞争力,是提升利润的关键。在已有研究成果的基础上结合旅游行业发展特点,采用层次分析法,创造性地从资源资产、知识资产、市场资产和人力资产4个方面考察旅游景区无形资产,构建一个由16个因素33个因子构成的评价指标体系。选取天津蓟县为实证研究对象,探讨其无形资产的开发、使用与管理现状。结果显示,盘山景区绩效最高,应保持并强化;黄崖关景区应进行策略调整,着重知识资产的开发;独乐寺景区绩效最低,应进行策略重构,提升市场资产绩效。研究成果对我国旅游景区无形资产绩效的评估具有较大的参考价值,对其他行业也有一定的借鉴意义。 展开更多

关键词 旅游景区 无形资产 绩效评估 层次分析法 网络数据抓取

下载PDF 职称材料

利用Nutch设计实现生物医学信息垂直搜索引擎

9

作者 王小磊 李立 赵东升 《北京生物医学工程》 2010年第6期638-640,644,共4页

在网络的海量信息搜索过程中,医学情报研究和信息服务机构,经常需要构建面向专题的垂直搜索系统以满足特定人群的需求。本文利用Nutch和Lucene等开源软件设计了一个面向生物医学信息的垂直搜索引擎系统,并对网页信息抓取、格式处理、内... 在网络的海量信息搜索过程中,医学情报研究和信息服务机构,经常需要构建面向专题的垂直搜索系统以满足特定人群的需求。本文利用Nutch和Lucene等开源软件设计了一个面向生物医学信息的垂直搜索引擎系统,并对网页信息抓取、格式处理、内容索引和检索等关键技术进行了说明。在此搜索引擎中,通过加入中文分词和增量抓取等模块,提高了中文关键字的识别率,缩短了信息的更新周期。目前该系统已经上线测试,能够获得较为精确和及时的搜索结果。 展开更多

关键词 NUTCH 网络信息抓取 LUCENE 中文分词 增量抓取

下载PDF 职称材料

从中国证监会行政处罚决定书分析证券交易市场财务造假问题特点

10

作者 兰辰牧 《中国审计》 2022年第22期52-54,共3页

随着互联网技术的快速发展,网络非结构化数据呈爆发式增长。运用Python丰富的第三方库可以实现网络信息抓取、自然语言处理、数据建模分析等,从而对网络文档进行实时抓取和深入分析,有效解决人工查阅、复制粘贴等传统方式信息利用效率... 随着互联网技术的快速发展,网络非结构化数据呈爆发式增长。运用Python丰富的第三方库可以实现网络信息抓取、自然语言处理、数据建模分析等,从而对网络文档进行实时抓取和深入分析,有效解决人工查阅、复制粘贴等传统方式信息利用效率不高、程度不深、随机性大的问题。本文以中国证监会近10年间发布的行政处罚决定书为研究对象,阐述如何利用Python的网络信息抓取。 展开更多

关键词 自然语言处理 非结构化数据 网络信息抓取 网络文档 Python 复制粘贴 数据建模 证券交易市场

原文传递

基于网络数据抓取的异构试题资源库的构建

11

作者 陈钰华 尹晶海 《科技广场》 2012年第8期35-37,共3页

本文介绍了一种对网络搜索引擎的搜索结果进行数据抓取来构建试题资源库的方法。通过这些方法使得构建题库的效率得到提高,成本得以降低,基于XML的试题存储格式也使得题库具有很强的兼容性。

关键词 网络数据抓取 试题资源库 正则表达式

下载PDF 职称材料