期刊文献+
共找到26篇文章
< 1 2 >
每页显示 20 50 100
基于云计算及大数据技术的电力搜索引擎技术研究 被引量:28
1
作者 楼凤丹 裴旭斌 +1 位作者 王志强 纪德良 《电网与清洁能源》 北大核心 2016年第12期86-92,99,共8页
电力营销经过多年的信息化发展,企业内部已经建立大量异构型应用系统,产生了大量分散的结构化、半结构化、非结构化数据。基于云计算及大数据技术的电力"求索"搜索引擎技术,构建集中式数据中心全文检索的索引,实现对大规模不... 电力营销经过多年的信息化发展,企业内部已经建立大量异构型应用系统,产生了大量分散的结构化、半结构化、非结构化数据。基于云计算及大数据技术的电力"求索"搜索引擎技术,构建集中式数据中心全文检索的索引,实现对大规模不同业务功能和业务数据的统一检索,满足用户从大量异构业务系统和海量数据中进行快速检索的要求。电力"求索"搜索引擎技术基于开源的Elastic Search,利用分布式索引、分布式检索、分布式缓存技术,实现分布式全文检索平台,提供对大规模索引数据的高效管理与快速、灵活的访问能力。通过搜索引擎技术,综合利用文本挖掘、自然语言处理、信息检索等领域的技术,进一步提高全文检索的查准率、查全率。该技术的应用,可以满足大规模不同业务数据的统一检索的需求;并同时满足大规模数据检索请求的快速响应要求。 展开更多
关键词 elastic search 电力 云计算 大数据 分布式全文检索 单点登录
下载PDF
基于HBase+ ElasticSearch的海量交通数据实时存取方案设计 被引量:7
2
作者 董长青 任女尔 +1 位作者 张庆余 田玉靖 《大数据》 2017年第1期80-89,共10页
交通流数据具有数据海量、存储和交互速率快等特征,因此其数据的采集、存储及检索成为了车辆远程监控平台中的关键问题。采用LVS集群技术进行数据采集负载均衡,队列缓存处理I/O时延,HBase进行分布式数据存储;针对Hadoop实时在线数据处... 交通流数据具有数据海量、存储和交互速率快等特征,因此其数据的采集、存储及检索成为了车辆远程监控平台中的关键问题。采用LVS集群技术进行数据采集负载均衡,队列缓存处理I/O时延,HBase进行分布式数据存储;针对Hadoop实时在线数据处理不足的问题,整合Elastic Search并构建了分层索引。通过关键技术的设计和实现,车辆监控由400辆扩展到上万辆,PB级数据在线查询速度提升了10~20倍,验证了方案的高效性。 展开更多
关键词 Hadoop/HBase elastic search LINUX虚拟服务器 海量数据 实时
下载PDF
基于大数据技术架构的免疫规划信息系统设计与应用 被引量:1
3
作者 唐蓉 张华东 +2 位作者 王东 吴蕾蕾 汤来红 《中国卫生信息管理杂志》 2023年第4期581-586,共6页
目的为支撑疫苗接种工作,设计基于大数据技术架构的免疫规划信息系统,大幅提升系统高并发状态下的承载能力。方法基于大数据技术架构设计系统的硬件部署、软件功能及业务流程,对各个环节实时查看、分析和统计。结果该系统高效支撑了全... 目的为支撑疫苗接种工作,设计基于大数据技术架构的免疫规划信息系统,大幅提升系统高并发状态下的承载能力。方法基于大数据技术架构设计系统的硬件部署、软件功能及业务流程,对各个环节实时查看、分析和统计。结果该系统高效支撑了全市疫苗接种工作,实现了对疫苗接种全流程信息采集、疫苗管理全程追溯、实时查询统计分析、数据共享交换等功能。结论大数据技术在疫苗接种工作中的成功应用,对于高并发信息系统建设具有借鉴意义。 展开更多
关键词 HADOOP 大数据 免疫规划 elastic search 疫苗接种
下载PDF
智能备件管理系统的设计与实现
4
作者 张婧 庞毅飞 李有松 《科技创新与应用》 2024年第8期122-128,共7页
烟草企业生产线位居行业前列,主要采用国际先进设备,专用机械相对较少。随着科技发展,设备维护、更换和技术改造速度加快,备件管理成为重要工作。为提高备件查询效率、增进烟厂工作效率,构建一套结构清晰、功能全面的智能备件管理系统... 烟草企业生产线位居行业前列,主要采用国际先进设备,专用机械相对较少。随着科技发展,设备维护、更换和技术改造速度加快,备件管理成为重要工作。为提高备件查询效率、增进烟厂工作效率,构建一套结构清晰、功能全面的智能备件管理系统。智能备件管理系统前后端分离,并且提供移动端和PC端2个选项,在查询备件信息时,采用先进的弹性搜索算法(ElasticSearch)和图像识别算法,提高搜索的准确性和容错性,提高烟厂工作效率,实现数字化赋能,为高效管理备件、提升生产效益提供可行的解决方案。 展开更多
关键词 烟草企业 备件管理 弹性搜索 图像识别 数字化
下载PDF
基于ElasticSearch全文检索的农业地理信息大数据平台设计与实现 被引量:5
5
作者 刘吉 孙俊英 +1 位作者 陈忠超 蔡忠亮 《测绘与空间地理信息》 2021年第6期162-164,共3页
针对目前农业大数据平台地理要素纳入不足、研究尺度受限、搜索功能相对薄弱等问题,本文充分发挥了测绘部门自然地理要素数据精细、农业遥感监测数据精准、野外全景采样数据完整的优势,基于ElasticSearch搜索引擎,利用网络技术、电子地... 针对目前农业大数据平台地理要素纳入不足、研究尺度受限、搜索功能相对薄弱等问题,本文充分发挥了测绘部门自然地理要素数据精细、农业遥感监测数据精准、野外全景采样数据完整的优势,基于ElasticSearch搜索引擎,利用网络技术、电子地图技术与空间数据库技术设计并实现了全文检索的农业地理信息大数据平台,多角度、多维度、多层次精确地展示数据信息内容,为农业大数据的规律寻找、价值挖掘与有效利用提供了有力支撑。 展开更多
关键词 农业大数据 地理信息平台 elasticsearch 全文检索
下载PDF
基于状态空间模型进化算法的全局收敛性分析 被引量:5
6
作者 王鼎湘 李茂军 +1 位作者 李雪 成立 《计算机应用》 CSCD 北大核心 2014年第10期2816-2819,共4页
基于状态空间模型进化算法(SEA)是一种新颖的实数编码进化算法,在工程优化问题中具有广阔的应用前景。为了完善SEA的理论体系,促进SEA在工程优化问题中的应用研究,利用齐次有限Markov链对SEA的全局收敛性进行分析,证明了SEA不是全局收... 基于状态空间模型进化算法(SEA)是一种新颖的实数编码进化算法,在工程优化问题中具有广阔的应用前景。为了完善SEA的理论体系,促进SEA在工程优化问题中的应用研究,利用齐次有限Markov链对SEA的全局收敛性进行分析,证明了SEA不是全局收敛的。通过限定SEA状态进化矩阵内元素的取值范围,同时引入弹力搜索得到改进型弹力状态空间模型进化算法(MESEA)。分析结果表明,弹力搜索能提高SEA的搜索效率。最后得到了MESEA全局收敛的结论,为算法在工程优化问题中的应用提供了理论依据。 展开更多
关键词 状态空间模型 进化算法 弹力搜索 收敛性 搜索效率
下载PDF
分布式弹性搜索研究与实践 被引量:5
7
作者 王占宏 王战英 +2 位作者 顾国强 马国春 吕振华 《微型电脑应用》 2014年第7期9-12,共4页
针对大数据量数据资源的简洁、快速搜索问题,深入研究了基于Lucene的分布式弹性搜索引擎ElasticSearch,简单分析了它的基本原理,详细描述了它的技术框架,并基于ElasticSearch搜索引擎,开发实现了公安信息资源整合与搜索系统,实现了大数... 针对大数据量数据资源的简洁、快速搜索问题,深入研究了基于Lucene的分布式弹性搜索引擎ElasticSearch,简单分析了它的基本原理,详细描述了它的技术框架,并基于ElasticSearch搜索引擎,开发实现了公安信息资源整合与搜索系统,实现了大数据量信息资源的快速整合与一键式分布式准实时搜索,通过可视化监控界面,实时了解系统数据同步与搜索性能,为不断优化其性能奠定了坚实基础。 展开更多
关键词 LUCENE 弹性搜索 分布式 公安信息
下载PDF
基于云架构的蒙古文硕士论文检索系统的设计与实现 被引量:3
8
作者 王玉荣 张树钧 +1 位作者 林民 宝美荣 《内蒙古师范大学学报(自然科学汉文版)》 CAS 2020年第3期194-200,共7页
设计了蒙古文硕士论文检索系统,并实现了一个基于云架构的分布式论文检索系统。设计完成了满足分布式要求的蒙古文分析器,作为系统核心模块在分布式多节点上实现了蒙古文的索引和检索功能。在分布式索引方面,主要实现数据哈希分片、蒙... 设计了蒙古文硕士论文检索系统,并实现了一个基于云架构的分布式论文检索系统。设计完成了满足分布式要求的蒙古文分析器,作为系统核心模块在分布式多节点上实现了蒙古文的索引和检索功能。在分布式索引方面,主要实现数据哈希分片、蒙古文分析器对每个分片进行分析、评分并建立倒排分片索引。在检索方面,使用BM25概率模型可对蒙古文论文检索和排序,并具有关键词或摘要的中文检索功能。分布式蒙古文硕士论文检索系统,可为进一步研究主题分析提供高质量的蒙古文硕士论文数据。 展开更多
关键词 云架构 分布式检索 蒙古文分析器 elastic search
下载PDF
Enhanced elastic beam model with BADS integrated for settlement assessment of immersed tunnels
9
作者 Cong Tang Shu-Yu He +2 位作者 Zheng Guan Wan-Huan Zhou Zhen-Yu Yin 《Underground Space》 SCIE EI CSCD 2023年第5期79-88,共10页
Excessive settlement may induce structural damage and water leakage in immersed tunnels,seriously threatening the tunnels’safety.However,making accurate assessment of the settlement in immersed tunnels is difficult d... Excessive settlement may induce structural damage and water leakage in immersed tunnels,seriously threatening the tunnels’safety.However,making accurate assessment of the settlement in immersed tunnels is difficult due to the incomplete knowledge of the geotechnical parameters and the inadequacy of the model itself.This paper proposes an effective method to accurately assess the settlement in immersed tunnels.An enhanced beam on elastic foundation model(E-BEFM)is developed for the settlement assessment,with the Bayesian adaptive direct search algorithm adopted to estimate unknown model parameters based on previous observations.The proposed method is applied to a field case of the Hong Kong–Zhuhai–Macao immersed tunnel.The original BEFM is used for comparison to highlight the better assessment performance of E-BEFM,particularly for joints’differential settlement.Results show that the proposed method can provide accurate predictions of the total settlement,angular distortion(a representation of tubes’relatively differential settlement),and joints’differential settlement,which consequently supports the associated maintenance decision-making and potential risk prevention for immersed tunnels in service. 展开更多
关键词 Immersed tunnel SETTLEMENT Beam on elastic foundation model Bayesian adaptive direct search Hong Kong-Zhuhai-Macao tunnel
原文传递
基于Spark Streaming的高校网站敏感信息监测设计与实现 被引量:2
10
作者 王丹 邓谦 刘姣 《科教导刊》 2021年第5期40-41,44,共3页
高校在实现智慧化的同时也面临着网站发布信息或网页内容被黑客篡改成不符合国家或学校规定的信息及内容.通过对已有学术研究发现,现有技术的研究普遍存在着效率低、实时性差的问题,本文提出了一种基于Spark Streaming的高校网站敏感信... 高校在实现智慧化的同时也面临着网站发布信息或网页内容被黑客篡改成不符合国家或学校规定的信息及内容.通过对已有学术研究发现,现有技术的研究普遍存在着效率低、实时性差的问题,本文提出了一种基于Spark Streaming的高校网站敏感信息监测系统.该系统利用Kafka作为中间存储,系统架构在Spark Streaming框架上可实时消费Kafka中数据进行链接解析处理,将获取到的网页内容存储到Elastic Search中进行倒排索引敏感信息匹配,从而达到数据采集和数据处理同步,提高了网站监测效率. 展开更多
关键词 SPARK STREAMING Kafka elastic search 敏感信息监测 倒排索引
下载PDF
基于弹性搜索的网络入侵数据防御控制系统 被引量:3
11
作者 张战胜 马亮 《现代电子技术》 2021年第23期57-61,共5页
目前研究的网络入侵数据防御控制系统识别时间较长,而且不能完全弹出所有的木马信息。为了解决上述问题,基于弹性搜索设计了一种新的网络入侵数据防御控制系统,从系统硬件和软件两方面进行优化设计。硬件设计的主要内容包括探测器、中... 目前研究的网络入侵数据防御控制系统识别时间较长,而且不能完全弹出所有的木马信息。为了解决上述问题,基于弹性搜索设计了一种新的网络入侵数据防御控制系统,从系统硬件和软件两方面进行优化设计。硬件设计的主要内容包括探测器、中央处理器和存储器,探测器寄存于系统网络和系统主机中,内置嗅觉探测器、数据预处理器、入侵规则分析器、入侵警报模块以及节点控制模块,实现对系统网络运行的实时监控。中央处理器的核心处理芯片采用STM32F103VCT6单片机,主要通信接口为SOI接口,电路非常简单且易于实现,并成功实现了在存储器中建立FLASH文件系统,使FLASH芯片能够对存储器中的文件进行读写等操作。通过采集运行数据和应用程序的日志、收集信号、选取置信度阈值、数据划分、识别数据分析结果完成软件流程。实验结果表明,基于弹性搜索的网络入侵数据防御控制系统能够有效缩短系统识别时间,并在识别网络入侵数据的过程中弹出木马信息。 展开更多
关键词 防御控制系统 网络入侵 弹性搜索 入侵数据防御 实时监控 硬件设计 软件流程
下载PDF
地震行业网络安全全流量监控系统建设与应用 被引量:3
12
作者 李刚 陈述新 +3 位作者 赵洪壮 张颖 李永红 丁晶 《地震工程学报》 CSCD 北大核心 2018年第A01期205-213,共9页
介绍地震行业网络安全全流量监控系统的设计、建设与应用效果,阐述全流量监控系统对于网络安全防护工作的重要性与实际意义。研究对于大型信息网络系统的安全防护工作具有参考价值。
关键词 网络 安全 防护 全流量 监控 elasticsearch
下载PDF
Research on Establish an Efficient Log Analysis System with Kafka and Elastic Search 被引量:1
13
作者 Yuanzhou Wei Manman Li Binsen Xu 《Journal of Software Engineering and Applications》 2017年第11期843-853,共11页
Search logs in a timely and efficient manner are an important part of SRE (Site Reliability Engineer). Logs help us solve the problems during our development work. In this paper, we will introduce you a way how to bui... Search logs in a timely and efficient manner are an important part of SRE (Site Reliability Engineer). Logs help us solve the problems during our development work. In this paper, we will introduce you a way how to build an efficient logs analysis system based on kafka and Elastic Search. We hope you can learn something through the iteration of the Version and get some inspiration with your own log analysis system. 展开更多
关键词 LOG Analysis SYSTEM Kafka elastic search Software Applications SITE Reliability ENGINEER
下载PDF
基于弹性搜索的异构多表联查方法 被引量:1
14
作者 张腾 李常宝 +1 位作者 李晓辉 刘忠麟 《信息技术》 2020年第12期148-151,157,共5页
弹性搜索技术作为性能优越的海量数据检索技术被广泛应用到各类数据分析场景中,文中提出一种基于弹性搜索的多表联查方法,在弹性搜索技术基础上面向交互式分析需求,利用采样、散列相结合的思路实现海量异构多表的秒级联查。实验表明,在... 弹性搜索技术作为性能优越的海量数据检索技术被广泛应用到各类数据分析场景中,文中提出一种基于弹性搜索的多表联查方法,在弹性搜索技术基础上面向交互式分析需求,利用采样、散列相结合的思路实现海量异构多表的秒级联查。实验表明,在海量数据的背景下,该算法的查询效率明显优于现有的基于弹性搜索的多表联查技术。 展开更多
关键词 弹性搜索 多表联查 Hash采样
下载PDF
基于开源软件的Web GIS地震大数据综合平台
15
作者 石晓辉 刘克辉 胡旭辉 《科技资讯》 2018年第33期14-16,共3页
采用互联网行业流行的Elastic Search、OpenStreetMap、Leaflet、jQuery、ECharts等开源软件技术,提出了一种基于局域网Web GIS地图服务和分布式NoSQL数据库,实现Web客户端与服务端之间的大数据交互方案。不依赖于桌面GIS和MATLAB专业软... 采用互联网行业流行的Elastic Search、OpenStreetMap、Leaflet、jQuery、ECharts等开源软件技术,提出了一种基于局域网Web GIS地图服务和分布式NoSQL数据库,实现Web客户端与服务端之间的大数据交互方案。不依赖于桌面GIS和MATLAB专业软件,实现低成本、跨平台的快速开发。为有效解决互联网时代海量空间信息相关的数据存储和可视化交互问题提供了一种新思路,在需要进行GIS大数据可视化交互的地震、气象等行业具有很高的实用价值。 展开更多
关键词 Web GIS 大数据交互 elastic search 开发框架 离线地图
下载PDF
基于HBase的海量文件的检索方案研究
16
作者 陈栋波 高跃明 《软件》 2016年第11期88-92,共5页
在互联网(尤其是移动互联网)、物联网、云计算、大数据等高速发展的大背景下,数据呈现爆炸式地增长。这类数据不规则的特性决定了其无法再按照传统基于属性列的方式进行检索,而是需要具备更加庞大的水平扩展性。使用No SQL数据库HBase... 在互联网(尤其是移动互联网)、物联网、云计算、大数据等高速发展的大背景下,数据呈现爆炸式地增长。这类数据不规则的特性决定了其无法再按照传统基于属性列的方式进行检索,而是需要具备更加庞大的水平扩展性。使用No SQL数据库HBase和搜索引擎Elastic Search相结合,通过对检索方案进行设计,对关键字匹配、语意检索、逻辑关系等检索策略进行测试和分析,实现能够快速、准确的适用于海量数据的检索方案。 展开更多
关键词 大数据 HBASE elastic search 检索方案
下载PDF
网络安全交互式分析系统构建方法 被引量:1
17
作者 邹峰 陈兴蜀 罗永刚 《计算机工程与设计》 北大核心 2021年第9期2433-2438,共6页
为解决Elastic Search大数据环境下的网络安全交互式分析场景中存在的原生DSL语言语法复杂、多个索引间的关联能力较弱等问题,研究并构建基于Elastic Search的网络安全交互式分析系统。通过一种新的语言CSIAL来简化网络安全分析的操作,... 为解决Elastic Search大数据环境下的网络安全交互式分析场景中存在的原生DSL语言语法复杂、多个索引间的关联能力较弱等问题,研究并构建基于Elastic Search的网络安全交互式分析系统。通过一种新的语言CSIAL来简化网络安全分析的操作,利用语句的解析结果去调用相应API来实现对网络安全相关数据的基本查询与分析,通过一定方法扩展Elastic Search所不具有的子查询、连接查询等功能,对连接过程进行优化,实现介于安全分析人员与数据之间的交互式分析桥梁。实验结果验证了该方法的有效性。 展开更多
关键词 网络安全 交互式 分析语言 弹性搜索 关联查询
下载PDF
冶金信息网中搜索引擎技术研究
18
作者 吴崇浩 蔡锦蓉 《冶金信息导刊》 2018年第5期59-62,共4页
在如今大数据时代,冶金信息网的旧搜索引擎已经制约了网站的发展.研究了开源搜索引擎ElasticSearch,并成功应用于冶金信息网.采用开源软件,以极小的成本完成了冶金信息网搜索引擎的升级,带给用户更好的访问体验.
关键词 搜索引擎 冶金信息网 elastic search
下载PDF
交叉型状态空间模型进化算法的全局收敛性分析
19
作者 王鼎湘 李茂军 +1 位作者 李雪 成立 《计算机应用》 CSCD 北大核心 2014年第12期3424-3427,共4页
基于状态空间模型的进化算法(SEA)是一种新颖的实数编码进化算法,在实际工程优化问题中取得了良好的优化效果。为促进SEA的理论及应用研究,对交叉型SEA(SCEA)的全局收敛性进行了研究,得出SCEA不是全局收敛的结论。通过改变状态进化矩阵... 基于状态空间模型的进化算法(SEA)是一种新颖的实数编码进化算法,在实际工程优化问题中取得了良好的优化效果。为促进SEA的理论及应用研究,对交叉型SEA(SCEA)的全局收敛性进行了研究,得出SCEA不是全局收敛的结论。通过改变状态进化矩阵的构造方式和提出弹力搜索操作,得到改进交叉型SEA(SMCEA),利用齐次有限Markov链对SMCEA的全局收敛性进行了证明。最后利用两个测试函数对算法进行实验分析,结果表明,SMCEA在收敛速度、最优解搜索能力和运算时间等方面都有较大改善,验证了SMCEA的有效性,得到了SMCEA优于遗传算法(GA)和SCEA的结论。 展开更多
关键词 状态空间模型 进化算法 交叉算子 弹力搜索 收敛性
下载PDF
一种新的解决tsp问题的算法——弹性搜索法
20
作者 安卫钢 白艳萍 《山西电子技术》 2008年第5期76-76,93,共2页
在弹性网络的基础上提出一种新的解决旅行商问题的方法,该方法模仿了吹气球的过程,随着气球被吹大,城市逐次被访问,就像气球收缩一样,每次搜索代价最小的城市,将他加入到已访问的城市环中。该方法能够快速给出多种不同次优的平面解。
关键词 弹性网络 旅行商问题 优化 弹性搜索
下载PDF
上一页 1 2 下一页 到第
使用帮助 返回顶部