-
题名云环境下船舶密集数据布局策略和方法
被引量：1
- 1
-
-
作者
张明
-
机构
绵阳职业技术学院
-
出处
《舰船科学技术》
北大核心
2017年第4X期166-167,188,共3页
-
文摘
随着船舶航行信息的增多,海量数据的存储和管理成为船舶业发展的关键问题之一。本文首先阐述云环境下船舶数据布局,并详细说明了此布局结构是如何进行数据传递;其次,研究Fisher线性判别的改进K均值算法的数据布局,在此过程中充分考虑了数据分组的计算能力、存储大小以及数据之间的相互关系;最后通过对比实验来说明本文算法在跨数据集应用方面数据移动性最少。
-
关键词
云环境
数据布局策略
FISHER线性判别
-
Keywords
cloud environment
data placement strategy
fisher linear discriminant
-
分类号
U665.26
[交通运输工程—船舶及航道工程]
-
-
题名基于随机森林的高能物理数据放置策略
被引量：1
- 2
-
-
作者
程振京
程耀东
陈刚
汪璐
李海波
胡庆宝
-
机构
中国科学院高能物理研究所
中国科学院大学
中国科学院高能物理研究所天府宇宙线研究中心
-
出处
《计算机工程与应用》
CSCD
北大核心
2020年第21期60-64,共5页
-
基金
国家自然科学基金(No.11675201,No.11575223,No.11605223,No.11805226)。
-
文摘
随着LHAASO高海拔宇宙线等高能物理实验规模的不断扩大,每年需要存储PB级的海量物理数据。高能物理海量存储系统一般采用随机的数据放置策略,没有考虑数据访问场景和服务器节点、存储设备的差异性。针对以上问题,提出一种异构存储环境下基于随机森林算法的数据放置策略,根据存储设备性能差异划分快慢存储池,同时对后期文件的读写访问场景进行预测和识别,综合考虑当前设备负载为数据找到最佳的放置位置。使用真实物理实验数据验证了算法的有效性。
-
关键词
随机森林
分布式存储系统
异构存储
存储池
数据放置策略
访问场景
-
Keywords
random forest
distributed storage system
heterogeneous storage
storage pool
data placement strategy
access scenario
-
分类号
TP18
[自动化与计算机技术—控制理论与控制工程]
-
-
题名分布式存储中数据分布策略的分析与研究
被引量：1
- 3
-
-
作者
庞慧
陈艳君
-
机构
河北建筑工程学院
北京交通大学计算机与信息技术学院
-
出处
《河北建筑工程学院学报》
CAS
2012年第3期64-69,共6页
-
基金
河北省科技厅科技攻关项目(112135118)
-
文摘
通过对当前已有分布式存储中数据放置策略与动态负载平衡算法的研究及学习,本文简单分析了分布式存储架构模型;详细介绍了分布式缓存的问题;研究了哈希算法,并对其容错性和可扩展性进行了分析;分析了虚拟节点的引入原理;并深入研究了基于节点容量感知的负载均衡策略.最后,针对当前分布式存储中数据应用环境中数据分布策略可扩展性以及灵活性的不足,并结合所得的研究成果写出了个人心得,提出一种更加合理的数据分布策略.
-
关键词
分布式存储
数据放置策略
负载均衡策略
-
Keywords
distributed storage
consistency hash algorithm
data placement strategy
load balancing
-
分类号
TP391.41
[自动化与计算机技术—计算机应用技术]
-
-
题名基于均衡数据放置策略的分布式网络存储编码缓存方案
被引量：3
- 4
-
-
作者
陈雪
胡玉平
-
机构
广州工商学院计算机科学与工程系
广东财经大学信息学院
-
出处
《计算机应用研究》
CSCD
北大核心
2020年第4期1194-1199,共6页
-
基金
广东省自然科学基金资助项目(2016A030313717)。
-
文摘
为了保证网络存储的负载平衡并避免在节点或磁盘故障的情况下造成不可恢复的损失,提出一种基于均衡数据放置策略的分布式网络存储编码缓存方案,针对大型高速缓存和小型缓存分别给出了不同的解决办法。首先,将Maddah方案扩展到多服务器系统,结合均衡数据放置策略,将每个文件作为一个单元存储在数据服务器中,从而解决大型高速缓存问题。然后,将干扰消除方案扩展到多服务器系统,利用干扰消除方案降低缓存的峰值速率,结合均衡数据放置策略,提出缓存分段的线性组合,从而解决小型缓存问题。最后,通过基于Linux的NS2仿真软件,分别在一个和两个奇偶校验服务器系统中进行仿真实验。仿真结果表明,提出的方案可以有效地降低峰值传输速率,相比其他两种较新的缓存方案,提出的方案获得了更好的性能。此外,采用分布式存储虽然限制了将来自不同服务器的内容组合成单个消息的能力,导致编码缓存方案性能损失,但可以充分利用分布式存储系统中存在的固有冗余,从而提高存储系统的性能。
-
关键词
均衡数据放置策略
分布式网络存储
编码缓存
文件条带化
奇偶校验服务器
-
Keywords
balanced data placement strategy
distributed storage
coded cache
striping
parity-check server
-
分类号
TP393.07
[自动化与计算机技术—计算机应用技术]
-
