期刊文献+
共找到2篇文章
< 1 >
每页显示 20 50 100
南海物理海洋数据的OPeNDAP服务实现 被引量:7
1
作者 徐超 李莎 米浦春 《热带海洋学报》 CAS CSCD 北大核心 2010年第4期174-180,共7页
OPeNDAP(Open-source Project for a Network Data Access Protocol)代表开放源代码的网络数据访问协议。OPeNDAP协议提供一种通过网络请求和提供数据的方法,让所有用户使用熟悉的程序直接存取需要的数据。文章介绍了OPeNDAP常用服务器... OPeNDAP(Open-source Project for a Network Data Access Protocol)代表开放源代码的网络数据访问协议。OPeNDAP协议提供一种通过网络请求和提供数据的方法,让所有用户使用熟悉的程序直接存取需要的数据。文章介绍了OPeNDAP常用服务器,描述了基于OPeNDAP的南海物理海洋科学数据共享平台的设计与搭建:采用GDS(GrADS Data Server)、Dapper、THREDDS(Thematic Realtime Environmental Distributed Data Services)等服务器来实现海风数据、海流数据、海浪数据、Argo数据和潮位数据等南海物理海洋数据的OPeNDAP服务,最后介绍目前提供的OPeNDAP服务形式。希望借助OPeNDAP来实现分布、异构环境下南海物理海洋数据的网络无缝共享之目标。 展开更多
关键词 OPeNDAP/开放源代码的网络数据访问协议 DODS/分布式海洋数据系统 物理海洋数据 数据服务
下载PDF
NetCDF物理海洋数据云存储技术研究 被引量:5
2
作者 夏伟 艾波 +1 位作者 杨应召 尚恒帅 《海洋技术学报》 2019年第4期71-78,共8页
物理海洋数据具有多维、时空和海量等特征,主要以NetCDF结构化文件格式进行存储。然而,在分布式环境中,结构化文件存在数据块寻址困难、边界不易判定等问题,制约着大数据场景下的存储及应用。论文设计基于HDFS+Spark的NetCDF物理海洋数... 物理海洋数据具有多维、时空和海量等特征,主要以NetCDF结构化文件格式进行存储。然而,在分布式环境中,结构化文件存在数据块寻址困难、边界不易判定等问题,制约着大数据场景下的存储及应用。论文设计基于HDFS+Spark的NetCDF物理海洋数据云存储方案,首先采用HDFS分布式存储技术存储和管理物理海洋数据;并设计基于Spark并行计算框架的数据分片方案,复写读取接口获取分布式环境下的NetCDF文件数据块地址,实现了物理海洋数据的高效率存储与查询分析。选取中国海域100 a时长的物理海洋数据进行波高-周期散布图统计实验。结果表明:在数亿级记录数条件下,文中方法可将查询分析耗时由集中式文件存储方式的2300s缩短至50s内,效率较集中式文件存储方式提升95%以上,验证了该方法的正确性和有效性。 展开更多
关键词 物理海洋数据 NETCDF HDFS 并行计算框架 SPARK
下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部