期刊文献+
共找到10篇文章
< 1 >
每页显示 20 50 100
面向数据湖存取性能优化的数据并行处理技术研究
1
作者 赵卓峰 陈元 梅宇生 《北方工业大学学报》 2024年第3期1-10,共10页
本文围绕数据湖应用背景下海量数据的高性能存取需求,以新型数据存储模型和分布式存储及缓存机制为目标,通过对数据湖存储结构、数据访问模式和数据处理方法进行分析,开展数据湖存取性能优化问题研究。首先,结合数据湖系统中的文件系统... 本文围绕数据湖应用背景下海量数据的高性能存取需求,以新型数据存储模型和分布式存储及缓存机制为目标,通过对数据湖存储结构、数据访问模式和数据处理方法进行分析,开展数据湖存取性能优化问题研究。首先,结合数据湖系统中的文件系统存储方式,设计了一种基于列式存储的数据存储结构,并通过索引优化技术提高数据访问速度。其次,针对数据湖中常用的批处理和流处理这两种访问模式,提出了一种基于数据分区和缓存机制的访问优化方案,以提高数据访问的效率和稳定性。最后,针对数据湖在大规模数据情况下更新和增量计算出现的计算时间长问题,提出了一种基于Spark并行计算和分布式文件系统(Hadoop Distributed File System,HDFS)的数据处理方案,以提高数据处理的速度和可靠性。实验结果表明,本文提出的数据湖存储性能优化技术相对于现有方法能够有效地提高数据的存储、访问和处理效率。 展开更多
关键词 数据湖 存取性能 数据分区 并行计算 索引优化
下载PDF
Internet存取性能优化的推测预取算法设计 被引量:1
2
作者 刘海 黄志强 陈基禄 《华北电力大学学报(自然科学版)》 CAS 北大核心 2004年第2期73-76,共4页
缓存技术和推测预取技术可用于提高网络访问响应速度。在对性能改进的理论分析后,设计了一个基于性能模型的推测预取存取算法(SKP),并对算法作了改进,达到存取时间改进的最大化。仿真表明算法的存取改进效果较明显。
关键词 INTERNET 网络访问 数据缓冲 存取性能 优化 推测预取算法 设计
下载PDF
触摸海量存储的技术之光 最受关注的硬盘新技术分析
3
作者 GF10X 《微型计算机》 2010年第22期106-110,共5页
最近听到很多“终结硬盘”的消息,没错,在SSD硬盘兴起之后,传统的温彻斯特式机械硬盘地位受到了挑战,特别在硬盘的速度和存取性能方面,不过机械硬盘也不是一成不变的老古董,
关键词 技术分析 硬盘 海量存储 存取性能 SSD 机械
下载PDF
SXSES-DSS数据库系统的设计与实现
4
作者 卞雷 曹菡 郭新 《西北大学学报(自然科学版)》 CAS CSCD 1994年第6期487-490,494,共5页
SXSES-DSS数据库系统通过投影技术将多维层次的数据结构转化为二维表结构,实现了数据的关系存储。系统建立了无数据管理字典,采用压缩索引,以管理数据的描述信息,节约存储空间,提高查询速度。为了能够自动产生导出数据和... SXSES-DSS数据库系统通过投影技术将多维层次的数据结构转化为二维表结构,实现了数据的关系存储。系统建立了无数据管理字典,采用压缩索引,以管理数据的描述信息,节约存储空间,提高查询速度。为了能够自动产生导出数据和进行图表输出,系统提供了自定义算术表达式和图表输出功能。此外并利用ORACLE提供的机制,实现了系统的完整性、一致性和安全性控制。 展开更多
关键词 数据结构 存取性能 用户界面 数据库
下载PDF
A Dependable Two-Level Mapping Scheme in Distributed Storage System
5
作者 Ming Hu Minghua Jiang 《通讯和计算机(中英文版)》 2010年第10期8-13,共6页
关键词 分布式存储系统 地址映射 虚拟存储 数据服务器 优化方案 存取性能 存储机制 代理机制
下载PDF
基于微服务架构的煤矿井下人员定位系统的设计 被引量:3
6
作者 仇凤娟 李夏 《数字技术与应用》 2020年第2期170-172,174,共4页
煤矿井下人员定位系统是保证煤矿生产人员安全的必要软件,为了解决当前的人员定位系统软件不能很好的满足大数据精确定位的需求。本文中介绍的新版人员定位软件,抛弃了原有封闭式软件结构,采用微服务架构升级人员定位系统。微服务架构... 煤矿井下人员定位系统是保证煤矿生产人员安全的必要软件,为了解决当前的人员定位系统软件不能很好的满足大数据精确定位的需求。本文中介绍的新版人员定位软件,抛弃了原有封闭式软件结构,采用微服务架构升级人员定位系统。微服务架构是把整个的大型软件拆分为几个甚至几十个微服务,微服务之间通过中心软件进行调度和通信。这种微服务架构的软件,可以大幅提升数据的存取性能,能够较好的满足TB级数据的存储需求。微服务架构消除了原有架构中数据库集成造成的紧耦合,提高了软件系统灵活性,降低了系统维护和升级的难度。总体来说,采用微服务架构设计的煤矿井下人员定位软件,大幅提升了数据的存储和读取性能,实现了软件功能间的松耦合,保证了人员定位软件的精确定位数据的需求。 展开更多
关键词 微服务架构 人员定位软件 解耦合 提升存取性能 TB级数据
下载PDF
你为何需要一台高档硬盘?
7
作者 周郁钦 《电子测试》 1999年第11期164-164,共1页
在服务器上,高档硬盘搭配上RAID控制卡才能够发挥其最大的性能和储存容量,加上热插拔的功能, 让所储存的数据更具安全性。
关键词 大容量硬盘 服务器 控制卡 热插拔 高档 数据备份 储存装置 传输接口 性能 存取性能
下载PDF
英特尔发布Optane新品首批3D XPoint存储产品出货
8
《微型计算机》 2017年第10期33-33,共1页
3月19日,英特尔正式宣布出货大容量Optane品牌的SSD,首发375GB PCle×4扩展卡板型的产品——DCP4800X。据悉,新款DCP4800X系列USSD首发售价1520美元,拥有不错的随机读取IOPS性能。英特尔表示,其4K随机存取性能达55000010PS(... 3月19日,英特尔正式宣布出货大容量Optane品牌的SSD,首发375GB PCle×4扩展卡板型的产品——DCP4800X。据悉,新款DCP4800X系列USSD首发售价1520美元,拥有不错的随机读取IOPS性能。英特尔表示,其4K随机存取性能达55000010PS(读取)、50000010PS(写入)。在官方技术文档中,英特尔还提到Optane已经能够作为内存来使用。而且,P4800X拥有每天30次全盘写入承载能力,远高于普通NANDSSD的每天0.5到10次水平。英特尔还表示,P4800X的整体可写入字节量达到同等容量的DC P3700 SSD的2.8倍。 展开更多
关键词 存储产品 英特尔 3D USSD 存取性能 技术文档 承载能力 大容量
下载PDF
FM23MLD16系N:8位并行FRAM
9
《世界电子元器件》 2009年第8期41-41,共1页
Ramtron公司推出采用流线型密间距FBGA封装的8位FRAM存储器。FM23MLD16是8Mb、3V并行非易失性RAM,采用48引脚封装,具有快速存取性能,实现无限读,写周期和低功耗等特点。
关键词 FRAM 位并行 Ramtron公司 非易失性RAM BGA封装 引脚封装 存取性能 存储器
下载PDF
其他
10
《电子设计应用》 2006年第10期140-140,共1页
意法半导体车用32Mb闪存演绎更高存取性能;赛灵思承推出PlanAhead8.
关键词 意法半导体 存取性能 闪存
下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部