期刊导航
期刊开放获取
cqvip
退出
期刊文献
+
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
检索
高级检索
期刊导航
共找到
2
篇文章
<
1
>
每页显示
20
50
100
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
显示方式：
文摘
详细
列表
相关度排序
被引量排序
时效性排序
相似性—局部性方法相关参数分析
被引量：
3
1
作者
张星煜
张建
辛明军
《计算机技术与发展》
2014年第11期47-50,共4页
大数据时代到来,备份数据量增大给存储空间带来新的挑战。重复数据删除技术在备份存储系统中正逐渐流行,但大量数据访问,造成了磁盘的很大负担。针对重复数据删除技术存在的块索引查询磁盘瓶颈问题,文中提出了文件相似性与数据流局部性...
大数据时代到来,备份数据量增大给存储空间带来新的挑战。重复数据删除技术在备份存储系统中正逐渐流行,但大量数据访问,造成了磁盘的很大负担。针对重复数据删除技术存在的块索引查询磁盘瓶颈问题,文中提出了文件相似性与数据流局部性结合方法改善磁盘I/O性能。该方法充分发挥了各自的优势,相似性优化了索引查找,可以检测到相同数据检测技术不能识别的重复数据;而数据局部性保留了数据流的序列,使得cache的命中率提高,减少磁盘访问次数。布鲁过滤器存储数据块索引可节省大量查询时间和空间开销。对于提出的解决方法所涉及的重要参数如块大小、段大小以及对误判率的影响做了深入分析。通过相关实验评估与性能分析,实验数据与结果为进一步系统性能优化问题提供了重要的数据依据。
展开更多
关键词
重复数据删除技术
相似性与局部性
布鲁过滤器
磁盘瓶颈
下载PDF
职称材料
云存储中基于相似性的客户-服务端双端数据去重方法
被引量：
2
2
作者
燕彩蓉
钱凯
《东华大学学报（自然科学版）》
CAS
CSCD
北大核心
2018年第1期115-122,共8页
数据去重是云存储系统提高存储率的主要手段之一,为解决查重过程中因数据量大而导致的索引I/O瓶颈和数据块指纹冲突问题,从而提高查重效率和去重准确度,提出了一种快速且安全的数据去重方法。该方法采用客户-服务器端双重检测框架,基于...
数据去重是云存储系统提高存储率的主要手段之一,为解决查重过程中因数据量大而导致的索引I/O瓶颈和数据块指纹冲突问题,从而提高查重效率和去重准确度,提出了一种快速且安全的数据去重方法。该方法采用客户-服务器端双重检测框架,基于滑动窗口技术和Rabin指纹算法并根据文件内容确定数据块边界,摒弃传统的MD5和SHA1算法,应用第3代安全哈希函数SHA3来计算数据块的指纹。提出两级索引策略,基于数据相似性原理来加快索引查找和比对速度。试验结果表明,客户-服务器双重检测框架能有效提高系统查重效率,基于SHA3的数据块指纹计算更加精确,能有效提高去重准确度。
展开更多
关键词
云存储
数据去重
滑动窗口技术
数据指纹
下载PDF
职称材料
题名
相似性—局部性方法相关参数分析
被引量：
3
1
作者
张星煜
张建
辛明军
机构
上海大学计算机工程与科学学院
出处
《计算机技术与发展》
2014年第11期47-50,共4页
基金
国家自然科学基金资助项目(61074135)
文摘
大数据时代到来,备份数据量增大给存储空间带来新的挑战。重复数据删除技术在备份存储系统中正逐渐流行,但大量数据访问,造成了磁盘的很大负担。针对重复数据删除技术存在的块索引查询磁盘瓶颈问题,文中提出了文件相似性与数据流局部性结合方法改善磁盘I/O性能。该方法充分发挥了各自的优势,相似性优化了索引查找,可以检测到相同数据检测技术不能识别的重复数据;而数据局部性保留了数据流的序列,使得cache的命中率提高,减少磁盘访问次数。布鲁过滤器存储数据块索引可节省大量查询时间和空间开销。对于提出的解决方法所涉及的重要参数如块大小、段大小以及对误判率的影响做了深入分析。通过相关实验评估与性能分析,实验数据与结果为进一步系统性能优化问题提供了重要的数据依据。
关键词
重复数据删除技术
相似性与局部性
布鲁过滤器
磁盘瓶颈
Keywords
data
deduplication
technique
similarity-locality
Bloom
filter
disk
bottleneck
分类号
TP301 [自动化与计算机技术—计算机系统结构]
下载PDF
职称材料
题名
云存储中基于相似性的客户-服务端双端数据去重方法
被引量：
2
2
作者
燕彩蓉
钱凯
机构
东华大学计算机科学与技术学院
出处
《东华大学学报（自然科学版）》
CAS
CSCD
北大核心
2018年第1期115-122,共8页
基金
国家自然科学基金资助项目(61402100)
中央高校基本科研业务费专项资金资助项目(16D111210)
文摘
数据去重是云存储系统提高存储率的主要手段之一,为解决查重过程中因数据量大而导致的索引I/O瓶颈和数据块指纹冲突问题,从而提高查重效率和去重准确度,提出了一种快速且安全的数据去重方法。该方法采用客户-服务器端双重检测框架,基于滑动窗口技术和Rabin指纹算法并根据文件内容确定数据块边界,摒弃传统的MD5和SHA1算法,应用第3代安全哈希函数SHA3来计算数据块的指纹。提出两级索引策略,基于数据相似性原理来加快索引查找和比对速度。试验结果表明,客户-服务器双重检测框架能有效提高系统查重效率,基于SHA3的数据块指纹计算更加精确,能有效提高去重准确度。
关键词
云存储
数据去重
滑动窗口技术
数据指纹
Keywords
cloud
storage
data
deduplication
sliding
window
technique
data
fingerprint
分类号
TP391 [自动化与计算机技术—计算机应用技术]
下载PDF
职称材料
题名
作者
出处
发文年
被引量
操作
1
相似性—局部性方法相关参数分析
张星煜
张建
辛明军
《计算机技术与发展》
2014
3
下载PDF
职称材料
2
云存储中基于相似性的客户-服务端双端数据去重方法
燕彩蓉
钱凯
《东华大学学报（自然科学版）》
CAS
CSCD
北大核心
2018
2
下载PDF
职称材料
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
上一页
1
下一页
到第
页
确定
用户登录
登录
IP登录
使用帮助
返回顶部
