-
题名一种大规模空间数据流式并行处理方法研究
被引量：9
- 1
-
-
作者
刘纪平
吴立新
董春
张福浩
亢晓琛
-
机构
中国测绘科学研究院
东北大学
-
出处
《测绘科学》
CSCD
北大核心
2016年第1期89-93,75,共6页
-
基金
测绘地理信息公益性行业科研专项经费项目(201512032)
国家863计划项目(2011AA20302)
+1 种基金
国家自然科学基金重点项目(40930104)
辽宁省自然科学基金资助项目(2015020581)
-
文摘
针对空间数据的读写(I/O)时间占比过高问题,文章提出一种流式并行化方法:通过将空间计算过程与数据I/O过程相重叠,使传统并行空间计算方法中的性能提升瓶颈得到显著缓解;并且,方法所采用的数据分片策略,能够使数据单次I/O所产生的高内存使用率得到降低,进一步提高了具体地学算法的适用性。最后以地理国情普查基本统计分析中地表面积计算为例进行验证,结果表明:该算法的计算效率与内存使用率相对于直接并行方法均获得明显改善,且空间数据流式并行处理方法与具体地学算法耦合度低。该方法已成功应用于多个其他统计分析算法中。
-
关键词
流式并行方法
大规模空间数据处理
空间计算
I/O过程
地表面积
-
Keywords
streaming parallel method
massive spatial data processing
spatial computation
I/O process
surface area
-
分类号
P208
[天文地球—地图制图学与地理信息工程]
-
-
题名基于代理的并行空间查询语言
被引量：2
- 2
-
-
作者
范协裕
任应超
邓富亮
王庆刚
-
机构
中国科学院遥感应用研究所遥感科学国家重点实验室
-
出处
《计算机工程》
CAS
CSCD
2013年第11期61-64,共4页
-
基金
国家"863"计划基金资助项目(2012AA12A401)
-
文摘
目前针对并行空间数据处理的研究主要集中在空间数据划分及其在其基础上的并行空间算法,对空间并行数据库平台本身的可用性,如应用程序的开发模式、高并发请求支持等研究较少。为此,对开源并行关系数据库查询语言进行空间查询扩展,提出一种基于代理的并行空间查询语言,并实现相应的并行数据库平台原型。基于该平台开发标准的网络地图绘图服务,在高并发环境下使用该服务对海量矢量数据进行实时渲染。实验结果表明,该平台具有与传统关系数据库一致的开发应用模式,可提供无缝的衔接方式,在海量数据高并发的情况下具有较高的可用性及查询性能。
-
关键词
空间查询语言
并行空间数据处理
网络地图服务
并行数据库
空间查询
空间数据划分
-
Keywords
spatial query language
parallel spatial data processing
Web Mapping Service（WMS）
parallel database
spatial query
spatial data partitioning
-
分类号
TP319
[自动化与计算机技术—计算机软件与理论]
-
