期刊文献+
共找到11篇文章
< 1 >
每页显示 20 50 100
一种面向大型地理栅格数据的并行处理框架 被引量:6
1
作者 杨典华 潘欣 《国防科技大学学报》 EI CAS CSCD 北大核心 2013年第6期152-156,共5页
随着高分辨率数据获取技术的发展,地理栅格数据的数据量不断增大,串行计算方式无法快速处理大型栅格数据,因此需要通过并行技术提高效率。传统开发过程将算法与进程调度、内存管理以及数据I/O混杂在一起的编程方式,对程序员要求较高,代... 随着高分辨率数据获取技术的发展,地理栅格数据的数据量不断增大,串行计算方式无法快速处理大型栅格数据,因此需要通过并行技术提高效率。传统开发过程将算法与进程调度、内存管理以及数据I/O混杂在一起的编程方式,对程序员要求较高,代码质量不易控制。提出了一种面向大型地理栅格数据的并行处理框架,利用核心类的真实和虚拟两种读取方式,实现了大型数据的分步骤、分块的快速加载和写入,并将所有的并行任务调度、进程间的数据传输过程以及特定的栅格算法步骤归结为任务;通过该框架可以将算法本身与并行调度、磁盘I/O等底层操作分离,使算法编写者可以专注于算法本身,降低开发难度,提高代码质量,解决了快速编写大型地理栅格数据算法程序的目的。实验表明,本框架可实现较好的并行效果,并显著降低代码量、提高软件质量。 展开更多
关键词 栅格图像 超大型地理数据 MPI 并行处理框架
下载PDF
基于设计模式的地震并行处理应用框架 被引量:1
2
作者 王宏琳 高绘生 《石油地球物理勘探》 EI CSCD 北大核心 2000年第2期214-221,共8页
本文研究石油地震勘探数据处理的流水、扇出扇入、主从和混合并行计算模式 ,并针对这些模式设计和实现了 GRISYS地震并行处理应用框架。利用这个框架 ,不需要对以往大量的串行地震处理模块作任何改动 ,可以在工作站集群计算机或大规模... 本文研究石油地震勘探数据处理的流水、扇出扇入、主从和混合并行计算模式 ,并针对这些模式设计和实现了 GRISYS地震并行处理应用框架。利用这个框架 ,不需要对以往大量的串行地震处理模块作任何改动 ,可以在工作站集群计算机或大规模并行计算机上实现并行处理。 展开更多
关键词 并行计算 并行处理 地震数据处理 地震勘探 模式
下载PDF
并行处理技术在地理信息数据处理中的应用 被引量:1
3
作者 徐道柱 金澄 焦洋洋 《测绘科学技术学报》 CSCD 北大核心 2016年第6期629-634,共6页
随着地理信息存储量的飞速增长,传统的单进程、集中式的数据处理方式已不能满足基于网络的地理信息服务的效能要求。分析对比了OpenMP,MPI和MapReduce等主流并行编程模式,将关系型数据库与分布式空间数据管理系统相结合,提出了面向并行... 随着地理信息存储量的飞速增长,传统的单进程、集中式的数据处理方式已不能满足基于网络的地理信息服务的效能要求。分析对比了OpenMP,MPI和MapReduce等主流并行编程模式,将关系型数据库与分布式空间数据管理系统相结合,提出了面向并行处理的地理信息存储模型和数据组织模型,将该模型与传统模型进行了对比分析,并基于MapReduce实现了地理空间数据并行处理框架,选取了矢量数据装载、影像数据装载以及数据切片作为典型数据处理案例开展对比实验,该技术方案的处理效率均数倍于传统技术方案。实验表明,该模型能够很好地支持并行处理框架,可为分布式环境下数据处理中心构建提供一个有效解决方案。 展开更多
关键词 并行处理 MAPREDUCE框架 主服务器集群 并行矢量数据模型 数据切片
下载PDF
一种多核实时图像处理模块设计与实现 被引量:1
4
作者 王闯 贺莹 +1 位作者 张晓曦 刘硕 《航空计算技术》 2017年第4期123-125,共3页
实时图像处理能力是嵌入式系统中影响系统性能的核心因素。为充分挖掘多核DSP性能,从计算机系统结构的角度出发,开展对多核DSP实时图像处理体系结构的研究,设计了一种基于TMS320C6678的实时图像处理模块。采用FPGA进行实时图像的采集和... 实时图像处理能力是嵌入式系统中影响系统性能的核心因素。为充分挖掘多核DSP性能,从计算机系统结构的角度出发,开展对多核DSP实时图像处理体系结构的研究,设计了一种基于TMS320C6678的实时图像处理模块。采用FPGA进行实时图像的采集和缓存,利用四线Rapid IO高速接口完成FPGA与DSP之间的数据传输,并设计了四级图像缓冲流水处理结构,实现了图像采集、缓存、处理和发送的并行进行。设计了一套基于数据块共享的实时图像处理多核协同处理机制,可以充分利用C6678八个核的优势,实现对图像的实时处理。 展开更多
关键词 多核DSP FPGA 并行处理框架 实时图像处理
下载PDF
SEIP: System for Efficient Image Processing on Distributed Platform
5
作者 刘弢 刘轶 +4 位作者 李钦 王香荣 高飞 朱延超 钱德沛 《Journal of Computer Science & Technology》 SCIE EI CSCD 2015年第6期1215-1232,共18页
Nowadays, there exist numerous images in the Internet, and with the development ot cloud compuung ano big data applications, many of those images need to be processed for different kinds of applications by using speci... Nowadays, there exist numerous images in the Internet, and with the development ot cloud compuung ano big data applications, many of those images need to be processed for different kinds of applications by using specific image processing algorithms. Meanwhile, there already exist many kinds of image processing algorithms and their variations, while new algorithms are still emerging. Consequently, an ongoing problem is how to improve the efficiency of massive image processing and support the integration of existing implementations of image processing algorithms into the systems. This paper proposes a distributed image processing system named SEIP, which is built on Hadoop, and employs extensible in- node architecture to support various kinds of image processing algorithms on distributed platforms with GPU accelerators. The system also uses a pipeline-based h'amework to accelerate massive image file processing. A demonstration application for image feature extraction is designed. The system is evaluated in a small-scale Hadoop cluster with GPU accelerators, and the experimental results show the usability and efficiency of SEIP. 展开更多
关键词 big data distributed system image processing GPU parallel programming framework
原文传递
基于蠕虫算法的DSP网络结构探测 被引量:1
6
作者 徐精华 邹雄 王旭成 《计算机与现代化》 2010年第1期16-18,22,共4页
蠕虫算法在多DSP并行处理网络中的应用是一个新的课题,针对由AD公司Tiger SHARC系列处理器构成的并行处理网络硬件图,论文具体阐述蠕虫算法的实现过程,得出该算法在网络结构探测中的实现结果。
关键词 蠕虫算法 并行处理 TIGER SHARC DSP 结构探测
下载PDF
GeoEast系统地震作业运行方式的优化
7
作者 孙孝萍 杜吉国 +2 位作者 陈继红 宁克岩 柴军丽 《物探装备》 2014年第3期204-209,共6页
GeoEast地震数据处理系统为批量处理作业提供了多种作业的运行方式,每种作业运行方式有优点也有不足。本文详细地介绍了目前GeoEast系统提供的批量作业运行方式的特点以及不同运行方式的运行效率对比。在实际应用中,用户可根据具体情况... GeoEast地震数据处理系统为批量处理作业提供了多种作业的运行方式,每种作业运行方式有优点也有不足。本文详细地介绍了目前GeoEast系统提供的批量作业运行方式的特点以及不同运行方式的运行效率对比。在实际应用中,用户可根据具体情况合理选择、有效利用不同的运行方式,以达到事半功倍的效果,最大可能地提高地震数据处理的效率。 展开更多
关键词 GeoEast 地震数据处理 串行执行控制系统 并行处理框架
下载PDF
云GIS架构下的电网数据并行计算及编辑技术研究
8
作者 夏伟 李志坚 +4 位作者 蔡文婷 邓兵 高永铭 陈姣 蔡喜荣 《测绘地理信息》 CSCD 2022年第6期101-105,共5页
随着电网GIS业务应用的拓展,海量空间数据量呈几何级数增长,如何系统地存储和管理地理空间数据、提高软硬件的利用率和高效地服务更多用户,成为了电网GIS实际应用的新的研究热点。以南方电网GIS平台为例,主要研究云GIS架构下的数据并行... 随着电网GIS业务应用的拓展,海量空间数据量呈几何级数增长,如何系统地存储和管理地理空间数据、提高软硬件的利用率和高效地服务更多用户,成为了电网GIS实际应用的新的研究热点。以南方电网GIS平台为例,主要研究云GIS架构下的数据并行计算及编辑的关键技术,结合云计算在大数据处理方面的优势,来解决电网GIS所面临的困境。首先概述了云GIS的架构;然后重点介绍云计算与GIS结合的关键技术;最后通过在南方电网的应用实践证明相关技术的可行性及先进性。 展开更多
关键词 云计算 云GIS 海量空间数据 并行处理框架
原文传递
一种基于云计算的并行流生成方法
9
作者 孙韩林 《计算机工程》 CAS CSCD 2013年第10期10-13,共4页
在高速网络中,网络设备的分组转发性能在打开流采集功能后会受其影响。为此,提出一种在网络设备外基于云计算平台的并行流生成方法。在需要监测的网络设备附近部署小型云,把分组流量复制到云中,采用云的Map-Reduce并行处理框架快速地从... 在高速网络中,网络设备的分组转发性能在打开流采集功能后会受其影响。为此,提出一种在网络设备外基于云计算平台的并行流生成方法。在需要监测的网络设备附近部署小型云,把分组流量复制到云中,采用云的Map-Reduce并行处理框架快速地从海量分组数据中生成流记录。设计基于Map-Reduce框架的并行流生成算法,通过配置合适数量的云节点,可分析任意大小的网络流量。用实际网络分组数据对并行流生成方法的性能进行验证,实验结果表明,在由3台、5台或7台节点构成的小型云平台上,从超过40 GB的文本分组数据中共提取了15 160 052条流,与顺序处理相比,耗费时间至少可减小85%、90%和94%。 展开更多
关键词 网络流量分析 并行处理 Map—Reduce框架 HADOOP平台
下载PDF
基于Xeon Phi平台的波动方程叠前深度偏移
10
作者 杨祥森 金君 +2 位作者 王鹏 马召贵 亢永敢 《计算机工程与科学》 CSCD 北大核心 2015年第5期907-913,共7页
波动方程叠前深度偏移适用于强横向变速介质,是一种高精度成像方法,但其巨大的计算量阻碍了该技术的应用。Xeon Phi是一种全新的高性能计算设备,为波动方程叠前深度偏移方法的推广应用提供了新的技术支持。以裂步傅里叶算子为例,介绍了... 波动方程叠前深度偏移适用于强横向变速介质,是一种高精度成像方法,但其巨大的计算量阻碍了该技术的应用。Xeon Phi是一种全新的高性能计算设备,为波动方程叠前深度偏移方法的推广应用提供了新的技术支持。以裂步傅里叶算子为例,介绍了面向Xeon Phi平台的偏移算法移植和优化方法,即采用offload模式将计算核函数加载到Xeon Phi设备上,在Xeon Phi协处理器上采用多线程方式,并且调整程序结构,充分利用SIMD矢量引擎提高向量化处理效率。扩展负载动态均衡的并行框架,形成了一套适用于大规模异构系统、基于Xeon Phi平台的波动方程叠前深度偏移软件。实际数据测试表明Xeon Phi平台可以极大地提高地震偏移处理效率,具有良好的可扩展性。 展开更多
关键词 XEON Phi平台 波动方程叠前深度偏移 裂步傅里叶算子 并行框架 offload模式
下载PDF
原位可视化研究与应用进展 被引量:3
11
作者 王昉 李思昆 +1 位作者 赵丹 曾亮 《系统仿真学报》 CAS CSCD 北大核心 2015年第10期2589-2599,共11页
科学可视化是分析数值模拟数据的最有效手段。随着高性能计算机运算能力的不断提升,数值模拟问题的规模迅速增长,但IO带宽、存储系统容量和后处理的可视化模式很难满足超大规模并行数值模拟数据的可视化分析需求。原位可视化在运行数值... 科学可视化是分析数值模拟数据的最有效手段。随着高性能计算机运算能力的不断提升,数值模拟问题的规模迅速增长,但IO带宽、存储系统容量和后处理的可视化模式很难满足超大规模并行数值模拟数据的可视化分析需求。原位可视化在运行数值模拟任务的高性能计算机系统上进行可视化计算和绘制,克服IO和存储容量的限制,实现了在线数据可视化。从数据组织管理、并行可视化算法、交互、集成框架与软件、应用案例等方面介绍了原位可视化近年研究和应用进展,对原位可视化面临的技术挑战以及未来发展趋势进行了分析。 展开更多
关键词 原位可视化 大规模并行处理 软件框架 可视化软件
下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部