期刊文献+
共找到7篇文章
< 1 >
每页显示 20 50 100
基于Storm的面向大数据实时流查询系统设计研究 被引量:6
1
作者 蒋晨晨 季一木 +1 位作者 孙雁飞 王汝传 《南京邮电大学学报(自然科学版)》 北大核心 2016年第3期100-105,111,共7页
随着大数据的发展,传统的流查询系统框架不能满足用户实时查询的需求。通过调研传统的集中式查询系统与流计算框架,提出了一种新的能够适应用户处理连续查询的实时查询框架。该框架具备延时小、可拓展的特点。最后实验证明,该框架能够... 随着大数据的发展,传统的流查询系统框架不能满足用户实时查询的需求。通过调研传统的集中式查询系统与流计算框架,提出了一种新的能够适应用户处理连续查询的实时查询框架。该框架具备延时小、可拓展的特点。最后实验证明,该框架能够满足大数据流处理要求。 展开更多
关键词 大数据 流查询系统 Storm平台 实时流数据
下载PDF
基于数据流的实时处理框架模型 被引量:3
2
作者 李庆华 陈球霞 蒋盛益 《计算机工程》 EI CAS CSCD 北大核心 2005年第16期59-60,63,共3页
提出了一个新型的基于大型数据流的实时处理模型,其处理模式主要是以实时存储和实时分析为主要目标,利用回归、聚类、实时分析等方法为数据流建立了一个完整的处理模型。该模型是对现有模型的完善和改进,从而在有限的存储空间中能切实... 提出了一个新型的基于大型数据流的实时处理模型,其处理模式主要是以实时存储和实时分析为主要目标,利用回归、聚类、实时分析等方法为数据流建立了一个完整的处理模型。该模型是对现有模型的完善和改进,从而在有限的存储空间中能切实可行地对快速的流数据做出实时响应。详细阐述了模型的框架建立和处理用户需求的过程与算法。 展开更多
关键词 回归 聚类 实时处理 流数据挖掘
下载PDF
基于Spark Streaming的实时流数据处理模型化研究与实现 被引量:2
3
作者 云惟英 苟宇 +1 位作者 王京 王丽莉 《测绘与空间地理信息》 2017年第S1期48-50,55,共4页
通过研究与分析,选取Spark Streaming技术实现对P实时流数据的处理.同时,研究出一套模型化的方式,实现动态装配软件的执行过程;并通过具体的实例展示了两者结合后,在数据处理的易用性、性能及吞吐量方面,都得到了大幅提升.
关键词 SPARK streamING 空间大数据 时实流数据
下载PDF
基于电力大数据的多维聚合技术研究 被引量:1
4
作者 张莉娜 吴伟 +1 位作者 程旭明 胡勇 《数字技术与应用》 2017年第8期40-41,共2页
本文将从实时数据处理技术、流数据处理技术、实时数据批处理技术、等方面开展研究与应用,全面提高数据分析处理的实时性,满足大范围实时数据分析的需求。
关键词 实时数据处理 流数据处理技术 实时数据批处理
下载PDF
动目标数据实时分析技术研究与实现 被引量:1
5
作者 侯博 聂颖 《计算机与现代化》 2020年第1期17-21,27,共6页
针对动目标的实时轨迹数据,分析已有研究出现的问题,提出2种实时分析的解决思路:基于五点微分法的轨迹预测方法,此方法可以较快速地预测动目标下一个位置点,实时性较强;基于Storm的历史频次统计分析方法,此方法根据历史轨迹频次进行分析... 针对动目标的实时轨迹数据,分析已有研究出现的问题,提出2种实时分析的解决思路:基于五点微分法的轨迹预测方法,此方法可以较快速地预测动目标下一个位置点,实时性较强;基于Storm的历史频次统计分析方法,此方法根据历史轨迹频次进行分析,准确率较高。上述2种方法解决了实时分析的2个重点问题:实时、准确,有较高的实用性。 展开更多
关键词 动目标 实时分析 流数据框架
下载PDF
接触网数智化运维实时数据处理分析平台研究 被引量:2
6
作者 吴昊 《电气化铁道》 2022年第S01期28-31,35,共5页
轨道交通接触网运维工作面临大规模的“数智化”实时数据处理分析需求,并且接触网运维数据类型较多,处理流程复杂。本文提出基于Kafka和Spark Streaming流数据处理分析技术的实时数据处理分析平台设计方案。从数据采集端以一定的频率获... 轨道交通接触网运维工作面临大规模的“数智化”实时数据处理分析需求,并且接触网运维数据类型较多,处理流程复杂。本文提出基于Kafka和Spark Streaming流数据处理分析技术的实时数据处理分析平台设计方案。从数据采集端以一定的频率获取实时数据,并通过分布式流数据处理的方法调用分析挖掘模型或基于深度学习的智能识别模型对每批次的流数据进行分析和处理,然后将分析或识别的结果推送至数据应用程序与用户作进一步交互。以某线路的2C视频数据为例,验证该分析平台运行的消耗时间以及平台运行的稳定性,证明该平台及其技术方案针对接触网运维实时数据的分析场景切实可行。 展开更多
关键词 数智化 实时数据处理平台 流数据
下载PDF
基于空间数据与流数据集成管理的交通实时监控系统设计与实现 被引量:1
7
作者 夏英 甘红梅 《数字通信》 2009年第1期65-68,共4页
实时交通数据以流的形式持续快速到达,智能交通系统在地理空间数据的基础上处理实时交通数据。从数据存储、数据查询等角度来看,传统关系数据库技术在同时处理空间数据和流数据方面具有不足。基于GIS的实时交通监控原型系统集成现有的... 实时交通数据以流的形式持续快速到达,智能交通系统在地理空间数据的基础上处理实时交通数据。从数据存储、数据查询等角度来看,传统关系数据库技术在同时处理空间数据和流数据方面具有不足。基于GIS的实时交通监控原型系统集成现有的空间数据和流数据管理技术,支持静态查询、连续查询和混合查询,为交通用户提供高质量的服务。 展开更多
关键词 实时交通监控系统 空间数据 流数据 数据集成
下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部