期刊文献+
共找到3篇文章
< 1 >
每页显示 20 50 100
大数据技术下的流数据处理框架构建研究
1
作者 邹威 罗小刚 周亮 《科技资讯》 2024年第18期36-38,共3页
在大数据技术快速发展的背景下,流数据已成为了一个不可忽视的重要领域。由于流数据具有实时性、突发性、无序性、易失性和无限性等多重特性,传统的分布式计算机系统在处理数据时倍感压力。面对这样的挑战,流计算技术的出现成为了解决之... 在大数据技术快速发展的背景下,流数据已成为了一个不可忽视的重要领域。由于流数据具有实时性、突发性、无序性、易失性和无限性等多重特性,传统的分布式计算机系统在处理数据时倍感压力。面对这样的挑战,流计算技术的出现成为了解决之道,其能够针对海量的、来自不同数据源的流数据进行实时、高效的分析和处理,满足现代数据处理的需求。基于此,将对流数据处理框架的建设进行深入研究,以大数据技术为基础给出常用的处理框架,以期为提高数据处理水平提供相关参考。 展开更多
关键词 大数据技术 流数据 处理框架 流计算技术
下载PDF
OODAFlow:面向智能无人系统的流式数据处理框架
2
作者 全振宇 尹龙祥 +1 位作者 陈晓明 韩银和 《高技术通讯》 CAS 北大核心 2024年第9期905-920,共16页
智能无人系统是一种能够在复杂环境中自主进行实时推理、决策和制定行动方案的计算系统。智能无人系统实现实时决策的关键在于对流式数据的实时处理,然而随着人工智能技术和传感器技术的快速发展,智能无人系统需要处理的数据规模不断增... 智能无人系统是一种能够在复杂环境中自主进行实时推理、决策和制定行动方案的计算系统。智能无人系统实现实时决策的关键在于对流式数据的实时处理,然而随着人工智能技术和传感器技术的快速发展,智能无人系统需要处理的数据规模不断增长,数据类型变得更加复杂。面对不断增长的数据处理性能需求,智能无人系统需要一个充分优化的专用流式数据处理框架来提升其数据处理性能。针对该问题,本文提出了一种面向智能无人系统的流式数据处理框架OODAFlow,该框架将智能无人系统的硬件特征和智能计算任务的数据特征与观察-判断-决策-行动(OODA)模型思想相融合,实现了OODA任务创建、任务调度、资源调度等功能,能够实现对智能无人系统异构资源的调度和智能计算任务的处理。本文在智能无人系统上搭建了一套OODA任务处理系统,验证了所提OODAFlow框架的可行性。通过提出的图像预处理过程优化、流水线优化以及判断节点并行加速优化等方法,提高了系统的数据吞吐性能和资源利用率。无人机智能控制任务的实验表明,采用本文提出的OODAFlow框架后,智能无人系统的数据处理性能提升了73倍。 展开更多
关键词 智能无人系统 深度学习加速卡 观察-判断-决策-行动(OODA) 流式数据处理框架 异构计算资源
下载PDF
嵌入式异构多核测试的流式大数据处理系统
3
作者 柳文波 何鹏举 +2 位作者 张京妹 李聪 张鹏 《单片机与嵌入式系统应用》 2022年第3期19-22,共4页
本文采用FPGA实现四通道传感器的高速数据采集、同步转换和LMS自适应降噪,使用ARM搭建了边缘计算平台,进而实现了一种云边端协同的测试流式大数据处理系统,并且在磨床设备检测中得到了应用。实验和现场测试结果表明,本系统可以满足实际... 本文采用FPGA实现四通道传感器的高速数据采集、同步转换和LMS自适应降噪,使用ARM搭建了边缘计算平台,进而实现了一种云边端协同的测试流式大数据处理系统,并且在磨床设备检测中得到了应用。实验和现场测试结果表明,本系统可以满足实际应用的需求,为基于工业物联网的设备监测提供了一种可行的方法。 展开更多
关键词 多核异构平台 流式大数据处理系统 磨床砂轮状态在线监测 Zynq 7045 Netty框架
下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部