-
题名基于分布式共享存储系统的并行文件子系统DPFS
被引量：4
- 1
-
-
作者
章隆兵
陈意云
章锋
陈国良
-
机构
中国科技大学计算机科学与技术系
-
出处
《计算机研究与发展》
EI
CSCD
北大核心
2002年第3期360-366,共7页
-
基金
国家"八六三"高技术研究发展计划基金(863 -3 0 6-ZD0 1-0 2 -3 )
高等学校学科点专项科研基金 (980 3 5 82 8)资助
-
文摘
为了改进软件 DSM系统中对文件的存取性能以获得更好的应用程序性能 ,基于软件 DSM系统 JIAJIA的并行文件子系统 DPFS被开发出来 .DPFS系统采用文件映射接口作为应用编程接口 ,使得文件存取界面简单 ,并且能充分利用软件 DSM系统的大量特性 ,系统设计相对简单 .在曙光 2 0 0 0并行机上进行的应用测试表明 ,采用DPFS文件子系统后 。
-
关键词
分布式共享存储系统
文件映射接口
DPFS
并行文件子系统
工作站网络
-
Keywords
distributed shared memory system, parallel file system, file mapping interface
-
分类号
TP393
[自动化与计算机技术—计算机应用技术]
-
-
题名基于新型存储技术的大数据管理分析
- 2
-
-
作者
董恩虎
-
机构
国家税务总局兰陵县税务局
-
出处
《电子技术（上海）》
2023年第11期212-213,共2页
-
文摘
阐述新型存储技术的特点,提出基于新型存储的大数据存储管理方法。探讨相变存储器PCM能够直接被CPU(中央处理器)按位存取,且具有极强的存取性能,可以实现数据持久存储。
-
关键词
相变存储器
大数据存储管理
分布式内存文件系统
-
Keywords
phase change memory
big data storage management
distributed memory file system
-
分类号
TP311.13
[自动化与计算机技术—计算机软件与理论]
TP309
[自动化与计算机技术—计算机科学与技术]
-
-
题名分布式测试系统中数据存储管理系统研究
被引量：1
- 3
-
-
作者
闫鑫
李士林
周学威
杨海
-
机构
中北大学仪器科学与动态测试教育部重点实验室
-
出处
《单片机与嵌入式系统应用》
2011年第8期22-25,共4页
-
文摘
在一些大海域进行的分布式测试系统实验中,对大量、多种类测试数据的有效存储管理是必要的。NAND Flash存储器具有非易失、大容量、可擦除与重复性编程等优点,并可基于其构建文件系统实现文件的有效存储管理。无线实时回传处理大量数据是系统的瓶颈,因此存储数据时可提取数据特征并存储特征,为实现基于特征提取的高效数据传输提供可能,提高系统的实时性。
-
关键词
分布式测试
NAND
FLASH
特征提取
文件系统
-
Keywords
distributed test
NAND Flash
non volatile memory
eigenvalue extraction
file system
-
分类号
TP333
[自动化与计算机技术—计算机系统结构]
-
-
题名Spark下遥感大数据特征提取的加速策略
被引量：7
- 4
-
-
作者
黄震
钱育蓉
范迎迎
杜娇
-
机构
新疆大学软件学院
-
出处
《计算机工程与设计》
北大核心
2017年第12期3279-3283,共5页
-
基金
国家自然科学基金项目(61562086
61462079
+3 种基金
61363083
61262088)
新疆"万人计划"后备基金项目(wr2015bj01)
新疆自治区研究生科研创新基金项目(XJGRI2016029)
-
文摘
提出一种基于Spark分布式内存计算框架的遥感大数据特征提取策略。采用Landsat8为数据源,以计算归一化植被指数(NDVI)、差值植被指数(DVI)、比值植被指数(RVI)为例开展实验。实验结果表明,在相同硬件环境、处理任务、数据量的条件下,Spark处理遥感大数据的速度较单机模式下的处理遥感大数据提升了约2倍,基于Hadoop分布式文件系统(HDFS)处理模式较Spark-standalone处理模式处理速度提升了约1.2倍,基于Spark下的HDFS存储模式下,栅格切分遥感大数据较非栅格切分处理速度提高了约1.5倍。
-
关键词
Spark分布式内存计算框架
HADOOP分布式文件系统
遥感大数据
内存计算
栅格切分
-
Keywords
Spark distributed memory computing framework
Hadoop distributed file system
remote sensing big data
memory computing
grid segmentation
-
分类号
TP391
[自动化与计算机技术—计算机应用技术]
-
-
题名一种并行内存缓冲系统及其实现技术
- 5
-
-
作者
赵朔
吴绍春
吴耿锋
任小龙
-
机构
上海大学计算机学院
-
出处
《计算机工程与应用》
CSCD
北大核心
2003年第33期122-124,共3页
-
基金
上海市科委重点基础研究项目支持(编号:01JC14022)
-
文摘
为支持数据挖掘应用,对NOW机群系统的分布式共享存储管理机制进行了适当的简化1～2,结合数据挖掘中数据处理的特点,设计了一个并行内存缓冲系统。该缓冲系统为应用程序提供上下两层应用接口,既可以保证内存操作的透明性,又为应用程序自主操作数据提供了极大的灵活性。缓冲系统可以充分利用网络结点的存储空间为应用程序实现网络虚拟存储环境,同时也可以很好地支持应用程序对数据文件的并行化处理。
-
关键词
数据挖掘
分布式共享存储系统
并行文件系统
机群
文件缓冲
-
Keywords
data mining,distributed sha red memory system,parallel file system,cluster system,file cache system
-
分类号
TP333
[自动化与计算机技术—计算机系统结构]
-
