期刊导航
期刊开放获取
cqvip
退出
期刊文献
+
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
检索
高级检索
期刊导航
共找到
8
篇文章
<
1
>
每页显示
20
50
100
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
显示方式:
文摘
详细
列表
相关度排序
被引量排序
时效性排序
一种支持并发访问流的文件预取算法
被引量:
10
1
作者
吴峰光
奚宏生
徐陈锋
《软件学报》
EI
CSCD
北大核心
2010年第8期1820-1833,共14页
设计并实现了一种按需预取算法,采用更为宽松的顺序性判决条件,并以页面和页面缓存的状态作为可靠的决策依据.它可以发现淹没在随机读中的顺序访问并进行有效的预读,支持对单个文件实例的并发访问而产生的交织访问模式.实验结果表...
设计并实现了一种按需预取算法,采用更为宽松的顺序性判决条件,并以页面和页面缓存的状态作为可靠的决策依据.它可以发现淹没在随机读中的顺序访问并进行有效的预读,支持对单个文件实例的并发访问而产生的交织访问模式.实验结果表明:相对于原Linux预读算法,该算法在随机干扰下的顺序读性能可提高29%;交织读的性能是传统算法的4-27倍;同时,应用程序可见延迟改善可达35倍.该算法已被Linux2.6.24内核采用.
展开更多
关键词
LINUX
操作系统
I/O性能
文件预取
并发I/O
访问模式
下载PDF
职称材料
网格虚拟组织副本协作预取机制
被引量:
3
2
作者
田田
罗军舟
+1 位作者
宋爱波
伍之昂
《软件学报》
EI
CSCD
北大核心
2011年第10期2372-2384,共13页
副本复制是数据网格中提高数据访问效率的有效方法,如何提高副本复制的效率是一个关键性问题.现有的复制策略大多基于文件访问历史选择高价值副本进行复制,但其针对的都是节点已经访问过的文件.通过对虚拟组织文件访问特性进行深入分析...
副本复制是数据网格中提高数据访问效率的有效方法,如何提高副本复制的效率是一个关键性问题.现有的复制策略大多基于文件访问历史选择高价值副本进行复制,但其针对的都是节点已经访问过的文件.通过对虚拟组织文件访问特性进行深入分析,引入隐性高价值文件概念,提出虚拟组织副本协作预取机制(cooperative replica prefetching mechanism,简称CoRPM),使得本地节点通过与虚拟组织中其他节点进行协作来获取隐性高价值文件副本.该机制首先给出了副本协作预取架构,各个虚拟组织节点上的文件预取模块以协作的方式为虚拟组织内节点提供文件预取服务;然后,在副本协作预取架构的基础上设计了副本协作预取流程,其核心算法包括以作业类型为中心的本地文件预取算法和预取文件选择算法.模拟实验结果表明,CoRPM与已有的基于文件访问历史的副本复制策略相结合,可以更加有效地降低数据访问延迟.
展开更多
关键词
数据网格
副本复制
虚拟组织
文件预取
协作
下载PDF
职称材料
一种面向分布式文件系统的文件预取模型的设计与实现
被引量:
2
3
作者
师明
刘轶
唐歌实
《计算机科学》
CSCD
北大核心
2014年第7期30-35,共6页
如何为上层应用和计算提供稳定高效的文件I/O性能,是分布式文件系统性能研究的热点。文中分析分布式文件系统在设计机理上的共同特征,基于此提出一种通用型的启发式文件预取模型,并选取HDFS平台进行系统实现。启发式文件预取对上层应用...
如何为上层应用和计算提供稳定高效的文件I/O性能,是分布式文件系统性能研究的热点。文中分析分布式文件系统在设计机理上的共同特征,基于此提出一种通用型的启发式文件预取模型,并选取HDFS平台进行系统实现。启发式文件预取对上层应用透明,采用在文件系统内部建立预取线程池的方法,以组成文件块的数据存储文件为预取单位,在分布式文件系统内部实现。这种设计思路具有一定的普适性,适合推广应用于多种分布式文件系统。实验结果表明,所述的启发式文件预取,能够有效提升分布式文件系统的I/O性能。
展开更多
关键词
分布式文件系统
文件预取
启发式
HDFS
下载PDF
职称材料
多线程环境下基于多预取点的文件预取
被引量:
1
4
作者
刘金
胡创
+1 位作者
胡明
龚奕利
《计算机应用》
CSCD
北大核心
2012年第6期1713-1716,1720,共5页
为解决当前Linux内核的预取算法在多线程情况下出现预取误判的问题,依据多线程环境下进程对磁盘文件的访问特点,提出一种基于多预取点的预取算法。在Linux内核原有的预取算法的基础上,结合多线程环境下应用程序对数据的访问模式,在Linu...
为解决当前Linux内核的预取算法在多线程情况下出现预取误判的问题,依据多线程环境下进程对磁盘文件的访问特点,提出一种基于多预取点的预取算法。在Linux内核原有的预取算法的基础上,结合多线程环境下应用程序对数据的访问模式,在Linux内核的页面缓存层进行了实现。实验和分析表明,在IOzone单线程测试中,该算法和Linux内核原预取算法性能相当;在多线程测试中,读取相同大小的文件,耗时比Linux内核原预取算法至少少1/3。新算法对于提高I/O并行度,从而提高整个计算机系统并行化很有帮助。
展开更多
关键词
多线程
文件预取
多预取点
LINUX内核
下载PDF
职称材料
低能耗磁光混合归档系统的设计与实现
被引量:
1
5
作者
缪嘉嘉
付印金
+1 位作者
余沛毅
毛捍东
《计算机技术与发展》
2017年第8期52-56,共5页
层次型混合归档系统是数据存储领域的研究热点,在工业界也被广泛接受,小到个人存储大到数据中心都在使用混合存储系统。针对大数据中心的能耗问题,引入更为廉价低能耗的光介质存储,建立阵列、在线光盘库、离线光盘库构成的混合归档系统...
层次型混合归档系统是数据存储领域的研究热点,在工业界也被广泛接受,小到个人存储大到数据中心都在使用混合存储系统。针对大数据中心的能耗问题,引入更为廉价低能耗的光介质存储,建立阵列、在线光盘库、离线光盘库构成的混合归档系统,采用低能耗磁光混合的存储架构,在牺牲陈旧文件读取速度的情况下,大幅降低了存储能耗;在研究分析数据的一致性保证机制以及多级存储系统的弹性设计的基础上,针对光介质的读写特性,重点研究了磁光混合归档系统的文件缓存和预取机制。采用基于整体访问频率的数据迁移策略解决了热度文件的访问效率不受影响的问题,采用基于I/O特征预测模型的预取算法,提升了多级存储结构的命中准确度。实验结果表明,所构建的系统能够有效节省能源并可维持数据检索查询的时效性。
展开更多
关键词
低能耗
光盘库
磁光混合
多级存储系统
文件预取
文件缓存
下载PDF
职称材料
KingCloud:智能对象归档系统
6
作者
缪嘉嘉
付印金
毛捍东
《计算机科学》
CSCD
北大核心
2016年第S2期575-577,596,共4页
随着信息化进程的不断推进,生产系统积累了大量的数据,形成了归档需求;与此同时,数据信息类型不断丰富,非结构化数据的处理是挖掘数据价值的关键。设计并实现了KingCloud智能对象归档系统,通过文档分类技术实现了文本文件的分类,并提供...
随着信息化进程的不断推进,生产系统积累了大量的数据,形成了归档需求;与此同时,数据信息类型不断丰富,非结构化数据的处理是挖掘数据价值的关键。设计并实现了KingCloud智能对象归档系统,通过文档分类技术实现了文本文件的分类,并提供了文档逻辑视图;利用图像识别、视频关键帧提取等技术实现图片和视频文件的内容元数据获取,在整体存储结构上结合文件系统语义研究对文件预取、存储缓存、数据布局和策略感知等方面进行优化,能够对数据进行智能的分类、归纳总结、智能的发现和预测及智能的分析,有效提升了存储系统的服务能力、服务质量和服务性能。
展开更多
关键词
文件系统语义
归档系统
文档分类
数据布局
文件预取
下载PDF
职称材料
基于文件相关性的云存储缓存策略
7
作者
肖芳
周可
《华中科技大学学报(自然科学版)》
EI
CAS
CSCD
北大核心
2019年第4期1-6,共6页
分析云存储数据访问的长尾现象,设计一种基于文件相关性的缓存策略MSU(mostsimilarunit).该策略通过判断文件之间的相关性完成大容量缓存中的文件预取与替换.首先,MSU选择文件的多个访问特征作为计算余弦距离值的输入,从而得到文件相关...
分析云存储数据访问的长尾现象,设计一种基于文件相关性的缓存策略MSU(mostsimilarunit).该策略通过判断文件之间的相关性完成大容量缓存中的文件预取与替换.首先,MSU选择文件的多个访问特征作为计算余弦距离值的输入,从而得到文件相关性的度量.然后,MSU将缓存中的文件作为替换待选集合,将一段时间内从缓存中替换出来的文件作为预取待选集合.当出现文件不命中时,从替换待选集合中取得缺失文件的k-非近邻作为替换文件,从预取待选集合中取得缺失文件的1-近邻作为预取文件.仿真实验表明MSU在命中率和字节命中率方面优于LRU(最近最少使用策略)、ARC(自适应替换策略)和GDS(多参数贪心策略)算法.
展开更多
关键词
云存储
缓存策略
命中率
文件相关性
文件预取
原文传递
一种识别I/O Feature的文件预测模型
8
作者
杨晓芬
师明
+2 位作者
李博
胡海燕
刘轶
《小型微型计算机系统》
CSCD
北大核心
2012年第11期2493-2497,共5页
在文件预取技术中,如何提高文件预取的命中率和适用度一直是研究的焦点.尤其是在面对大批量数据读取的时候,如何提高预取命中率对系统的性能提升有着至关重要的影响.本文提出识别I/O Feature的预测模型(IOPM),该模型通过记录文件的历史...
在文件预取技术中,如何提高文件预取的命中率和适用度一直是研究的焦点.尤其是在面对大批量数据读取的时候,如何提高预取命中率对系统的性能提升有着至关重要的影响.本文提出识别I/O Feature的预测模型(IOPM),该模型通过记录文件的历史访问信息获取I/O Features,然后分析这些I/O访问模式,设计一个简单高效的特征符号表来表示这些模式.此预测模型可以有效地识别出顺序读、固定点读、逆序读、跳读、多步跳读等多种模式.同时,该模型添加应用程序的信息,可以有效地对不同程序之间的交叉读做出预测,具有很高的预测命中率.
展开更多
关键词
文件预取
命中率
预测模型
I
O
FEATURE
下载PDF
职称材料
题名
一种支持并发访问流的文件预取算法
被引量:
10
1
作者
吴峰光
奚宏生
徐陈锋
机构
中国科学技术大学自动化系
出处
《软件学报》
EI
CSCD
北大核心
2010年第8期1820-1833,共14页
基金
国家自然科学基金No.60774038
国家高技术研究发展计划(863)No.2008AA01A317
英特尔研究委员会项目No.4507345522~~
文摘
设计并实现了一种按需预取算法,采用更为宽松的顺序性判决条件,并以页面和页面缓存的状态作为可靠的决策依据.它可以发现淹没在随机读中的顺序访问并进行有效的预读,支持对单个文件实例的并发访问而产生的交织访问模式.实验结果表明:相对于原Linux预读算法,该算法在随机干扰下的顺序读性能可提高29%;交织读的性能是传统算法的4-27倍;同时,应用程序可见延迟改善可达35倍.该算法已被Linux2.6.24内核采用.
关键词
LINUX
操作系统
I/O性能
文件预取
并发I/O
访问模式
Keywords
Linux
operating
system
I/O
performance
file
prefetching
parallel
I/O
access
pattern
分类号
TP316 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
网格虚拟组织副本协作预取机制
被引量:
3
2
作者
田田
罗军舟
宋爱波
伍之昂
机构
东南大学计算机科学与工程学院
出处
《软件学报》
EI
CSCD
北大核心
2011年第10期2372-2384,共13页
基金
国家自然科学基金(60903161
60903162
+7 种基金
61070161
61003257
61103229)
国家重点基础研究发展计划(973)(2010CB328104)
高等学校博士学科点专项科研基金(200802860031)
江苏省自然科学基金(BK2008030)
江苏省网络与信息安全重点实验室(BM2003201)
东南大学计算机网络和信息集成教育部重点实验室(93K-9)
文摘
副本复制是数据网格中提高数据访问效率的有效方法,如何提高副本复制的效率是一个关键性问题.现有的复制策略大多基于文件访问历史选择高价值副本进行复制,但其针对的都是节点已经访问过的文件.通过对虚拟组织文件访问特性进行深入分析,引入隐性高价值文件概念,提出虚拟组织副本协作预取机制(cooperative replica prefetching mechanism,简称CoRPM),使得本地节点通过与虚拟组织中其他节点进行协作来获取隐性高价值文件副本.该机制首先给出了副本协作预取架构,各个虚拟组织节点上的文件预取模块以协作的方式为虚拟组织内节点提供文件预取服务;然后,在副本协作预取架构的基础上设计了副本协作预取流程,其核心算法包括以作业类型为中心的本地文件预取算法和预取文件选择算法.模拟实验结果表明,CoRPM与已有的基于文件访问历史的副本复制策略相结合,可以更加有效地降低数据访问延迟.
关键词
数据网格
副本复制
虚拟组织
文件预取
协作
Keywords
data
grid
replication
virtual
organization
file
prefetching
cooperative
分类号
TP393 [自动化与计算机技术—计算机应用技术]
下载PDF
职称材料
题名
一种面向分布式文件系统的文件预取模型的设计与实现
被引量:
2
3
作者
师明
刘轶
唐歌实
机构
北京航天飞行控制中心
航天飞行动力学技术重点实验室
北京航空航天大学计算机学院中德联合软件研究所
出处
《计算机科学》
CSCD
北大核心
2014年第7期30-35,共6页
基金
国家“十二五”863计划信息技术领域重大项目“云计算关键技术与系统”课题:以公众汉语服务为主的搜索引擎研制(2011AA01A205)资助
文摘
如何为上层应用和计算提供稳定高效的文件I/O性能,是分布式文件系统性能研究的热点。文中分析分布式文件系统在设计机理上的共同特征,基于此提出一种通用型的启发式文件预取模型,并选取HDFS平台进行系统实现。启发式文件预取对上层应用透明,采用在文件系统内部建立预取线程池的方法,以组成文件块的数据存储文件为预取单位,在分布式文件系统内部实现。这种设计思路具有一定的普适性,适合推广应用于多种分布式文件系统。实验结果表明,所述的启发式文件预取,能够有效提升分布式文件系统的I/O性能。
关键词
分布式文件系统
文件预取
启发式
HDFS
Keywords
Distributed
file
system,
file
prefetching
,
Heuristic,
HDFS
分类号
TP393 [自动化与计算机技术—计算机应用技术]
下载PDF
职称材料
题名
多线程环境下基于多预取点的文件预取
被引量:
1
4
作者
刘金
胡创
胡明
龚奕利
机构
武汉大学计算机学院
出处
《计算机应用》
CSCD
北大核心
2012年第6期1713-1716,1720,共5页
基金
国家重大科技专项(2010ZX03004-003-03)
国家自然科学基金资助项目(61100020)
文摘
为解决当前Linux内核的预取算法在多线程情况下出现预取误判的问题,依据多线程环境下进程对磁盘文件的访问特点,提出一种基于多预取点的预取算法。在Linux内核原有的预取算法的基础上,结合多线程环境下应用程序对数据的访问模式,在Linux内核的页面缓存层进行了实现。实验和分析表明,在IOzone单线程测试中,该算法和Linux内核原预取算法性能相当;在多线程测试中,读取相同大小的文件,耗时比Linux内核原预取算法至少少1/3。新算法对于提高I/O并行度,从而提高整个计算机系统并行化很有帮助。
关键词
多线程
文件预取
多预取点
LINUX内核
Keywords
multi-thread
file
prefetching
multiple
prefetching
point
Linux
kernel
分类号
TP316 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
低能耗磁光混合归档系统的设计与实现
被引量:
1
5
作者
缪嘉嘉
付印金
余沛毅
毛捍东
机构
解放军理工大学指挥信息系统学院
北京普世时代科技有限公司
出处
《计算机技术与发展》
2017年第8期52-56,共5页
基金
国家自然科学基金资助项目(61402518)
总装预研基金(9140A15070414JB25224)
文摘
层次型混合归档系统是数据存储领域的研究热点,在工业界也被广泛接受,小到个人存储大到数据中心都在使用混合存储系统。针对大数据中心的能耗问题,引入更为廉价低能耗的光介质存储,建立阵列、在线光盘库、离线光盘库构成的混合归档系统,采用低能耗磁光混合的存储架构,在牺牲陈旧文件读取速度的情况下,大幅降低了存储能耗;在研究分析数据的一致性保证机制以及多级存储系统的弹性设计的基础上,针对光介质的读写特性,重点研究了磁光混合归档系统的文件缓存和预取机制。采用基于整体访问频率的数据迁移策略解决了热度文件的访问效率不受影响的问题,采用基于I/O特征预测模型的预取算法,提升了多级存储结构的命中准确度。实验结果表明,所构建的系统能够有效节省能源并可维持数据检索查询的时效性。
关键词
低能耗
光盘库
磁光混合
多级存储系统
文件预取
文件缓存
Keywords
energy-efficient
optical
disk
library
hybrid
magneto-optical
multilevel
storage
system
file
prefetching
file
caching
分类号
TP302 [自动化与计算机技术—计算机系统结构]
下载PDF
职称材料
题名
KingCloud:智能对象归档系统
6
作者
缪嘉嘉
付印金
毛捍东
机构
解放军理工大学指挥信息系统学院
国防科学技术大学C
出处
《计算机科学》
CSCD
北大核心
2016年第S2期575-577,596,共4页
基金
总装预研基金(9140A15070414JB25224)
国家自然科学基金(61402518)资助
文摘
随着信息化进程的不断推进,生产系统积累了大量的数据,形成了归档需求;与此同时,数据信息类型不断丰富,非结构化数据的处理是挖掘数据价值的关键。设计并实现了KingCloud智能对象归档系统,通过文档分类技术实现了文本文件的分类,并提供了文档逻辑视图;利用图像识别、视频关键帧提取等技术实现图片和视频文件的内容元数据获取,在整体存储结构上结合文件系统语义研究对文件预取、存储缓存、数据布局和策略感知等方面进行优化,能够对数据进行智能的分类、归纳总结、智能的发现和预测及智能的分析,有效提升了存储系统的服务能力、服务质量和服务性能。
关键词
文件系统语义
归档系统
文档分类
数据布局
文件预取
Keywords
file
system
semantic
Achieve
system
Document
classification
Data
layout
file
prefetching
分类号
TP333 [自动化与计算机技术—计算机系统结构]
下载PDF
职称材料
题名
基于文件相关性的云存储缓存策略
7
作者
肖芳
周可
机构
华中科技大学计算机科学与技术学院
华中科技大学图书馆
出处
《华中科技大学学报(自然科学版)》
EI
CAS
CSCD
北大核心
2019年第4期1-6,共6页
文摘
分析云存储数据访问的长尾现象,设计一种基于文件相关性的缓存策略MSU(mostsimilarunit).该策略通过判断文件之间的相关性完成大容量缓存中的文件预取与替换.首先,MSU选择文件的多个访问特征作为计算余弦距离值的输入,从而得到文件相关性的度量.然后,MSU将缓存中的文件作为替换待选集合,将一段时间内从缓存中替换出来的文件作为预取待选集合.当出现文件不命中时,从替换待选集合中取得缺失文件的k-非近邻作为替换文件,从预取待选集合中取得缺失文件的1-近邻作为预取文件.仿真实验表明MSU在命中率和字节命中率方面优于LRU(最近最少使用策略)、ARC(自适应替换策略)和GDS(多参数贪心策略)算法.
关键词
云存储
缓存策略
命中率
文件相关性
文件预取
Keywords
cloud
storage
caching
strategy
hit
rate
file
correlation
file
prefetching
分类号
TP333 [自动化与计算机技术—计算机系统结构]
原文传递
题名
一种识别I/O Feature的文件预测模型
8
作者
杨晓芬
师明
李博
胡海燕
刘轶
机构
北京航空航天大学计算机学院中德联合软件研究所
出处
《小型微型计算机系统》
CSCD
北大核心
2012年第11期2493-2497,共5页
基金
国家自然科学基金项目(61073011)资助
国家"八六三"高技术研究发展计划项目(2009AA01A129)资助
文摘
在文件预取技术中,如何提高文件预取的命中率和适用度一直是研究的焦点.尤其是在面对大批量数据读取的时候,如何提高预取命中率对系统的性能提升有着至关重要的影响.本文提出识别I/O Feature的预测模型(IOPM),该模型通过记录文件的历史访问信息获取I/O Features,然后分析这些I/O访问模式,设计一个简单高效的特征符号表来表示这些模式.此预测模型可以有效地识别出顺序读、固定点读、逆序读、跳读、多步跳读等多种模式.同时,该模型添加应用程序的信息,可以有效地对不同程序之间的交叉读做出预测,具有很高的预测命中率.
关键词
文件预取
命中率
预测模型
I
O
FEATURE
Keywords
file
prefetching
hit
ratio
prediction
model
I/O
feature
分类号
TP303 [自动化与计算机技术—计算机系统结构]
下载PDF
职称材料
题名
作者
出处
发文年
被引量
操作
1
一种支持并发访问流的文件预取算法
吴峰光
奚宏生
徐陈锋
《软件学报》
EI
CSCD
北大核心
2010
10
下载PDF
职称材料
2
网格虚拟组织副本协作预取机制
田田
罗军舟
宋爱波
伍之昂
《软件学报》
EI
CSCD
北大核心
2011
3
下载PDF
职称材料
3
一种面向分布式文件系统的文件预取模型的设计与实现
师明
刘轶
唐歌实
《计算机科学》
CSCD
北大核心
2014
2
下载PDF
职称材料
4
多线程环境下基于多预取点的文件预取
刘金
胡创
胡明
龚奕利
《计算机应用》
CSCD
北大核心
2012
1
下载PDF
职称材料
5
低能耗磁光混合归档系统的设计与实现
缪嘉嘉
付印金
余沛毅
毛捍东
《计算机技术与发展》
2017
1
下载PDF
职称材料
6
KingCloud:智能对象归档系统
缪嘉嘉
付印金
毛捍东
《计算机科学》
CSCD
北大核心
2016
0
下载PDF
职称材料
7
基于文件相关性的云存储缓存策略
肖芳
周可
《华中科技大学学报(自然科学版)》
EI
CAS
CSCD
北大核心
2019
0
原文传递
8
一种识别I/O Feature的文件预测模型
杨晓芬
师明
李博
胡海燕
刘轶
《小型微型计算机系统》
CSCD
北大核心
2012
0
下载PDF
职称材料
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
上一页
1
下一页
到第
页
确定
用户登录
登录
IP登录
使用帮助
返回顶部