期刊导航
期刊开放获取
cqvip
退出
期刊文献
+
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
检索
高级检索
期刊导航
共找到
80
篇文章
<
1
2
…
4
>
每页显示
20
50
100
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
显示方式:
文摘
详细
列表
相关度排序
被引量排序
时效性排序
基于HTML5大文件断点续传的实现方案
被引量:
18
1
作者
王莉敏
梁正和
段全锋
《计算机与现代化》
2016年第3期91-95,共5页
在Web应用中,文件上传是一个常用的功能,而目前的文件上传方式在处理大文件上传方面不尽人意,常常因为文件过大或者网络中断导致上传失败,不得不重新上传。随着HTML5相关技术的发展,出现了一系列对文件操作的API,如File List、Blob、Fil...
在Web应用中,文件上传是一个常用的功能,而目前的文件上传方式在处理大文件上传方面不尽人意,常常因为文件过大或者网络中断导致上传失败,不得不重新上传。随着HTML5相关技术的发展,出现了一系列对文件操作的API,如File List、Blob、File、FileReader等接口,使得Web端能够使用Java Script对本地文件进行分片操作进而实现文件断点续传功能。本文在此基础上解决了服务器端文件合并过程中用户等待超时问题以及如何保证合并文件正确性的问题。
展开更多
关键词
大
文件
上传
HTML5
FILE
API
断点续传
文件
合并
下载PDF
职称材料
基于HDFS的小文件存储与读取优化策略
被引量:
14
2
作者
张海
马建红
《计算机系统应用》
2014年第5期167-171,共5页
本文对HDFS分布式文件系统进行了深入的研究,在HDFS中以流式的方式访问大文件时效率很高但是对海量小文件的存取效率比较低.本文针对这个问题提出了一个基于关系数据库的小文件合并策略,首先为每个用户建立一个用户文件,其次当用户上传...
本文对HDFS分布式文件系统进行了深入的研究,在HDFS中以流式的方式访问大文件时效率很高但是对海量小文件的存取效率比较低.本文针对这个问题提出了一个基于关系数据库的小文件合并策略,首先为每个用户建立一个用户文件,其次当用户上传小文件时把文件的元数据信息存入到关系数据库中并将文件追加写入到用户文件中,最后用户读取小文件时通过元数据信息直接以流式方式进行读取.此外当用户读取小于一个文件块大小的文件时还采取了数据节点负载均衡策略,直接由存储数据的DataNode传送给客户端从而减轻主服务器压力提高文件传送效率.实验结果表明通过此方案很好地解决了HDFS对大量小文件存取支持不足的缺点,提高了HDFS文件系统对海量小文件的读写性能,此方案适用于具有海量小文件的云存储系统,可以降低NameNode内存消耗提高文件读写效率.
展开更多
关键词
HDFS
小
文件
优化
文件
合并
负载均衡
云存储
下载PDF
职称材料
基于Hadoop的气象数据分布式存储技术研究
被引量:
8
3
作者
周笑天
冯勇
+1 位作者
陈益玲
陈澍
《信息技术》
2022年第1期68-74,共7页
针对目前气象数据存储所面临的海量扩张、高并发读写、结构化和非结构化数据并存以及长时间序列和大数据集检索效率低下等问题,提出了以Hadoop开源框架为基础的气象数据分布式存储方案。通过对气象数据自身属性和特点进行分析,得出了气...
针对目前气象数据存储所面临的海量扩张、高并发读写、结构化和非结构化数据并存以及长时间序列和大数据集检索效率低下等问题,提出了以Hadoop开源框架为基础的气象数据分布式存储方案。通过对气象数据自身属性和特点进行分析,得出了气象数据在经过充分优化的基础上,在分布式存储框架中具有很强的适应性和规模化应用的潜力;并在HBase数据库中的Row Key设计和小文件合并策略方面做了创新。最后针对气象数据中广泛存在的结构化和非结构化这两种主要数据类型,以自动气象站数据和雷达产品数据为具体实例,给出了详细的设计思路和实现方法。
展开更多
关键词
气象数据存储
HADOOP
Row
Key
文件
合并
下载PDF
职称材料
基于Ceph存储系统的小文件存储优化方案
被引量:
5
4
作者
陈法河
柴小丽
《计算机系统应用》
2022年第2期108-113,共6页
针对Ceph存储系统面对小文件存储时存在元数据服务器性能瓶颈、文件读取效率低等问题.本文从小文件之间固有的数据关联性出发,通过轻量级模式匹配算法,提取出关联特征并以此为依据对小文件进行合并,提高了合并文件之间的合理性,并在文...
针对Ceph存储系统面对小文件存储时存在元数据服务器性能瓶颈、文件读取效率低等问题.本文从小文件之间固有的数据关联性出发,通过轻量级模式匹配算法,提取出关联特征并以此为依据对小文件进行合并,提高了合并文件之间的合理性,并在文件读取时将同一合并文件内的小文件存入客户端缓存来提高缓存读取命中率,经过实验验证本文的方案有效的提高了小文件的访问效率.
展开更多
关键词
分布式存储
小
文件
存储
数据关联性
文件
合并
下载PDF
职称材料
基于HBase的极向场电源系统异构数据存储设计
5
作者
许昌涛
黄连生
《仪表技术》
2024年第2期1-5,38,共6页
极向场电源系统是全超导托卡马克核聚变实验(EAST)装置的重要组成部分。EAST装置的运行和电源系统的日常运行与维护不仅产生海量结构化时序数据,还生成文档、表格、音频和视频等非结构化数据文件。传统的关系型数据库和聚变领域MDSplus...
极向场电源系统是全超导托卡马克核聚变实验(EAST)装置的重要组成部分。EAST装置的运行和电源系统的日常运行与维护不仅产生海量结构化时序数据,还生成文档、表格、音频和视频等非结构化数据文件。传统的关系型数据库和聚变领域MDSplus数据库不能满足异构数据的统一存储管理。搭建分布式集群,选取分布式数据库HBase,提出基于时间序列的行键设计来实现数据均衡分布和并行访问节点提高读取效率,提出基于降序最佳适应算法的文件合并策略设计来实现小文件的高效合并,充分利用数据块存储空间。实验结果表明,该种异构数据存储设计方案满足了存储需求。
展开更多
关键词
极向场电源
分布式存储
行键设计
文件
合并
下载PDF
职称材料
基于MPEG-2文件的合并
被引量:
2
6
作者
徐蕾
徐重阳
+1 位作者
郑立新
张晓龙
《有线电视技术》
2003年第4期78-80,共3页
本文介绍了具有相同音频、视频编码方式的MPEG2节目流如何合并成一个节目流。合并后的文件播放流畅并且时间显示正确。它包括PAT PMT表的重写,系统头部分相关字段的更改,PCR值的修改,解码时间标签(DTS),显示时间标签(PTS)的重新确定,传...
本文介绍了具有相同音频、视频编码方式的MPEG2节目流如何合并成一个节目流。合并后的文件播放流畅并且时间显示正确。它包括PAT PMT表的重写,系统头部分相关字段的更改,PCR值的修改,解码时间标签(DTS),显示时间标签(PTS)的重新确定,传送速率的修改以及添加相应的空包。
展开更多
关键词
MPEG-2
PAT
PMT
PTS
DTS
节目流
文件
合并
下载PDF
职称材料
多媒体伪装文件的取证
7
作者
聂鹏
闫坤
李文宇
《保密科学技术》
2023年第11期14-19,共6页
本文从文件格式转换伪装、隐写术、利用余数据隐藏信息、多媒体文件合并等多种角度介绍伪装技术的基础知识;通过分析多媒体文件伪装的实际案例,说明伪装技术在实际操作中的实现方式;进而对多媒体伪装文件的日常检测和取证提出了建议。
关键词
多媒体
文件
伪装
取证
文件
合并
信息隐藏
原文传递
虚拟地震数据文件并行访问策略
被引量:
3
8
作者
文必龙
赵满
+2 位作者
刘永江
张璇
赵晶浩
《计算机系统应用》
2013年第4期211-215,共5页
针对石油勘探行业海量数据过大以及非结构化的特点导致地震数据合并处理时的效率低、消耗磁盘等问题,提出对地震数据文件建立元数据,将多个独立地震数据文件通过文件元数据合并方式生成一个逻辑上完整的地震数据文件即虚拟地震数据文件...
针对石油勘探行业海量数据过大以及非结构化的特点导致地震数据合并处理时的效率低、消耗磁盘等问题,提出对地震数据文件建立元数据,将多个独立地震数据文件通过文件元数据合并方式生成一个逻辑上完整的地震数据文件即虚拟地震数据文件,提高地震数据合并效率,并根据地震数据并行访问模型实现对虚拟地震数据文件的IO访问.
展开更多
关键词
虚拟地震数据
文件
文件
合并
文件
并行访问
下载PDF
职称材料
基于Python的Excel文档合并系统的设计与实现
被引量:
4
9
作者
张孟研
《福建电脑》
2017年第6期123-124,共2页
使用Python语言,结合Py Qt4包作为软件开发平台,开发了Excel文档合并软件,实现excel文件中的数据合并、文档格式转换等功能。
关键词
EXCEL
文件
合并
PYTHON
SQLITE
下载PDF
职称材料
面向时序数据的两阶段日志结构合并树文件合并框架
被引量:
2
10
作者
张凌哲
黄向东
+2 位作者
乔嘉林
勾王敏浩
王建民
《计算机应用》
CSCD
北大核心
2021年第3期618-622,共5页
时序数据库中日志结构合并树(LSM-tree)在高写入负载或资源受限情况下的不及时的文件合并会导致LSM的C_0层数据大量堆积,从而造成近期写入数据的即席查询延迟增加。针对上述问题,提出了一种在保持面向大块数据的高效查询的基础上实现对...
时序数据库中日志结构合并树(LSM-tree)在高写入负载或资源受限情况下的不及时的文件合并会导致LSM的C_0层数据大量堆积,从而造成近期写入数据的即席查询延迟增加。针对上述问题,提出了一种在保持面向大块数据的高效查询的基础上实现对最新写入的时序数据的低延迟查询的两阶段LSM合并框架。首先将文件的合并过程分为少量乱序文件快速合并与大量小文件合并这两个阶段,然后在每个阶段内提供多种文件合并策略,最后根据系统的查询负载进行两阶段合并的资源分配。通过在时序数据库Apache IoTDB上分别实现传统的LSM合并策略以及两阶段LSM合并框架和测试,结果表明与传统的LSM相比,两阶段的文件合并模块在提升策略灵活性的情况下使即席查询读盘次数大大降低,并且使历史数据分析查询性能提升了约20%。实验结果表明,两阶段的LSM合并框架能够提高近期写入数据的即席查询效率,提高历史数据分析查询性能,而且提升合并策略的灵活性。
展开更多
关键词
物联网
时序数据库
时间序列数据
文件
合并
日志结构
合并
树
即席查询
下载PDF
职称材料
基于HDFS的海量指纹数据云存储优化研究
被引量:
2
11
作者
张宇翔
赵建民
+1 位作者
朱信忠
徐慧英
《浙江师范大学学报(自然科学版)》
CAS
2015年第2期179-184,共6页
HDFS设计之初只考虑到如何更好地处理大文件,并没有针对海量小文件进行优化,因此,当使用HDFS管理海量指纹数据小文件时会出现Name Node内存负载过重、上传及查询性能过低等问题.采用Sequence File序列化技术进行小文件的合并,并且对于...
HDFS设计之初只考虑到如何更好地处理大文件,并没有针对海量小文件进行优化,因此,当使用HDFS管理海量指纹数据小文件时会出现Name Node内存负载过重、上传及查询性能过低等问题.采用Sequence File序列化技术进行小文件的合并,并且对于小文件合并、元数据存储、缓存策略等进行了针对性优化.实验证明,该优化方案可以有效地解决Name Node内存负载过重的问题,并且海量指纹数据小文件的上传和查询性能得到了提高.
展开更多
关键词
HDFS
小
文件
SequenceFile
文件
合并
元数据存储
缓存策略
下载PDF
职称材料
“COPY”命令的另类用途
12
作者
小叶子
《中学生电脑》
2003年第11期13-14,共2页
关键词
“COPY”命令
文件
复制
文件
合并
文件
建立
文件
隐藏
日期更改
文件
内容打印
中学
计算机
教学
下载PDF
职称材料
HJSplit——小巧玲珑的文件分裂者
13
作者
程仁田
《中国新通信》
1999年第Z1期49-50,共2页
前几日到网上seeksoft,在http://www.softseek.com处,发现其推荐的热门软件中有一小巧玲珑的文件分裂者HJSplit。Download下来,试用之后,颇为顺手,不敢独享,愿与广大网友共享。
关键词
分裂
文件
合并
原
文件
文本框
文件
合成
文件
大小
压缩软件
窗口
文件
夹
扩展名
下载PDF
职称材料
轻松玩转RM文件的拆分、合并与修复
14
作者
api
《电脑》
2004年第9期69-70,共2页
在宽带普及的今天,交换视频文件,已经是非常普遍的事情了。RM文件以其在文件大小和画质之间取得的良好平衡,成为大家交换视频文件的首选。那么如何将一个大文件拆分成几个部分,分别传输呢?如何将下载到的RM文件的各部分合并为一个完整...
在宽带普及的今天,交换视频文件,已经是非常普遍的事情了。RM文件以其在文件大小和画质之间取得的良好平衡,成为大家交换视频文件的首选。那么如何将一个大文件拆分成几个部分,分别传输呢?如何将下载到的RM文件的各部分合并为一个完整的文件?又如何将下载中损坏的文件修复呢?下面我们将给大家详细的进行介绍。
展开更多
关键词
RM
文件
视频
文件
文件
拆分
文件
合并
文件
修复
下载PDF
职称材料
如何利用VC + +实现多文件合并与任意文件提取
15
作者
张邦华
《电脑编程技巧与维护》
2008年第7期91-92,共2页
讲解利用VC + +实现多文件合并及任意文件提取的一种方法。
关键词
任意
文件
文件
合并
VC++
提取
模块控制
文件
名称
文件
大小
初始位置
下载PDF
职称材料
文件分割有利器
16
作者
李东光
《电脑技术——Hello-IT》
2004年第2期30-31,共2页
该软件可以将一个文件拆分成多个小文件.并可以将多个文件台井成一个大文件。软件对要拆分的文件大小最大可以达到2G字节。对拆分后每个文件的大小。工具预定了当前四种比较常用软盘的容量.当然。
关键词
文件
分割
奥博
文件
分割机
文件
拆分
文件
合并
下载PDF
职称材料
基于改进HDFS的冠字号小文件分布式存储研究
被引量:
1
17
作者
徐俊
王庆华
赵云龙
《电脑知识与技术(过刊)》
2014年第6X期3980-3985,共6页
针对冠字号小图片存储到HDFS系统中带来的访问瓶颈问题,改进了原有的HDFS系统,新提出的分布式系统机制是充分基于文件相关性(File Correlation)进行合并处理的HDFS(FCHDFS)。由于HDFS中所有的文件都是由单一的主节点服务器托管-NameNode...
针对冠字号小图片存储到HDFS系统中带来的访问瓶颈问题,改进了原有的HDFS系统,新提出的分布式系统机制是充分基于文件相关性(File Correlation)进行合并处理的HDFS(FCHDFS)。由于HDFS中所有的文件都是由单一的主节点服务器托管-NameNode,每个存储到HDFS的文件在NameNode主存储器中都需要存储它的元数据,这必然导致小文件数量越大HDFS性能就越差。存储和管理大量的小文件,对NameNode是一个沉重的负担。可以存储在HDFS的文件数量是受到NameNode的内存大小约束。为了提高存储和访问HDFS上的冠字号小文件的效率,该文提出了一个基于文件关联性的小文件高效处理机制。在这种方法中,按照客户和时间区分,一组相关的文件相结合为一个大文件,从而减少文件数目。而新建的索引机制能从相应的联合文件中访问单个文件。实验结果表明,FCHDFS大大减少主节点内存中元数据数量,也提高了存储和访问大量小文件的效率。
展开更多
关键词
HADOOP
小
文件
HDFS
文件
合并
下载PDF
职称材料
新软速递
18
《网管员世界》
2011年第7期113-114,共2页
是款强大且免费的压缩文件管理器,相比其它压缩软件占用更少的系统资源,有更好的兼容性,压缩率较高。提供了对ZIP、7Z和TAg文件的完整支持,能解压RAR、JAR等多达49种格式文件,功能有强力压缩、分卷、加密、自解压模块、智能图片转...
是款强大且免费的压缩文件管理器,相比其它压缩软件占用更少的系统资源,有更好的兼容性,压缩率较高。提供了对ZIP、7Z和TAg文件的完整支持,能解压RAR、JAR等多达49种格式文件,功能有强力压缩、分卷、加密、自解压模块、智能图片转换、智能媒体文件合并等功能。
展开更多
关键词
文件
管理器
压缩软件
格式
文件
图片转换
文件
合并
兼容性
压缩率
ZIP
下载PDF
职称材料
一种跨反向隔离装置文件传输方法及系统
19
作者
史豪杰
翟桂锋
+1 位作者
陆鑫
孙超
《工业控制计算机》
2020年第11期22-23,25,共3页
针对跨反向安全区数据传输效率不足,研发了一种跨反向隔离装置文件传输方法和系统。在反向隔离装置安全传输文件的基础上,增加反向文件发送和接收代理模块,对大文件进行压缩、切片、并发传输,小文件进行合并、压缩传输,通过重传确认机制...
针对跨反向安全区数据传输效率不足,研发了一种跨反向隔离装置文件传输方法和系统。在反向隔离装置安全传输文件的基础上,增加反向文件发送和接收代理模块,对大文件进行压缩、切片、并发传输,小文件进行合并、压缩传输,通过重传确认机制,保证反向传输可靠性。该系统实现文件跨反向隔离的快速、稳定、可靠传输,已应用于多个电力自动化项目中。
展开更多
关键词
跨安全区
反向隔离装置
文件
传输
文件
切片
文件
合并
下载PDF
职称材料
视频文件的拆分和合并
20
作者
林雪莲
《电子与电脑》
2003年第3期107-111,共5页
随着计算机技术的不断发展,人们收集的视频资料越来越多,许多重要的资料需要刻录到CD-ROM上面长期保存,但此时往往会出现一个问题:一个视频文件的大小超过700M或者更大。一张光盘的客量不够,那如何办呢?另外,网络技术的飞快发展...
随着计算机技术的不断发展,人们收集的视频资料越来越多,许多重要的资料需要刻录到CD-ROM上面长期保存,但此时往往会出现一个问题:一个视频文件的大小超过700M或者更大。一张光盘的客量不够,那如何办呢?另外,网络技术的飞快发展给了人们更多交流的空间,朋友之间通过网络传输来麸享一些视频资源成为一种时尚,但要传输一个几百兆的文件不仅时间长而且在传输过程中容易中断,若没有断点续传的功能,前面的工作就白做了,即使有断点续传的功能,由于文件传输时间长,突发性中断的可能性比较大,多次中断会使文件受损。此时,有什么好的解决办法吗?
展开更多
关键词
视频
文件
网络传输
文件
拆分软件
REAL
Networks公司
视频绱编码软件
共享软件
文件
合并
下载PDF
职称材料
题名
基于HTML5大文件断点续传的实现方案
被引量:
18
1
作者
王莉敏
梁正和
段全锋
机构
河海大学计算机与信息学院
出处
《计算机与现代化》
2016年第3期91-95,共5页
文摘
在Web应用中,文件上传是一个常用的功能,而目前的文件上传方式在处理大文件上传方面不尽人意,常常因为文件过大或者网络中断导致上传失败,不得不重新上传。随着HTML5相关技术的发展,出现了一系列对文件操作的API,如File List、Blob、File、FileReader等接口,使得Web端能够使用Java Script对本地文件进行分片操作进而实现文件断点续传功能。本文在此基础上解决了服务器端文件合并过程中用户等待超时问题以及如何保证合并文件正确性的问题。
关键词
大
文件
上传
HTML5
FILE
API
断点续传
文件
合并
Keywords
large file uploading
HTML5
file API
broken-point continuingly-transferring
files merging
分类号
TP311.1 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
基于HDFS的小文件存储与读取优化策略
被引量:
14
2
作者
张海
马建红
机构
河北工业大学计算机科学与软件学院
出处
《计算机系统应用》
2014年第5期167-171,共5页
文摘
本文对HDFS分布式文件系统进行了深入的研究,在HDFS中以流式的方式访问大文件时效率很高但是对海量小文件的存取效率比较低.本文针对这个问题提出了一个基于关系数据库的小文件合并策略,首先为每个用户建立一个用户文件,其次当用户上传小文件时把文件的元数据信息存入到关系数据库中并将文件追加写入到用户文件中,最后用户读取小文件时通过元数据信息直接以流式方式进行读取.此外当用户读取小于一个文件块大小的文件时还采取了数据节点负载均衡策略,直接由存储数据的DataNode传送给客户端从而减轻主服务器压力提高文件传送效率.实验结果表明通过此方案很好地解决了HDFS对大量小文件存取支持不足的缺点,提高了HDFS文件系统对海量小文件的读写性能,此方案适用于具有海量小文件的云存储系统,可以降低NameNode内存消耗提高文件读写效率.
关键词
HDFS
小
文件
优化
文件
合并
负载均衡
云存储
Keywords
HDFS
optimization of small files
merge files
load balance
cloud storage
分类号
TP311.13 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
基于Hadoop的气象数据分布式存储技术研究
被引量:
8
3
作者
周笑天
冯勇
陈益玲
陈澍
机构
山东省气象信息中心
出处
《信息技术》
2022年第1期68-74,共7页
基金
山东省气象局面上课题(2018sdqxm06)。
文摘
针对目前气象数据存储所面临的海量扩张、高并发读写、结构化和非结构化数据并存以及长时间序列和大数据集检索效率低下等问题,提出了以Hadoop开源框架为基础的气象数据分布式存储方案。通过对气象数据自身属性和特点进行分析,得出了气象数据在经过充分优化的基础上,在分布式存储框架中具有很强的适应性和规模化应用的潜力;并在HBase数据库中的Row Key设计和小文件合并策略方面做了创新。最后针对气象数据中广泛存在的结构化和非结构化这两种主要数据类型,以自动气象站数据和雷达产品数据为具体实例,给出了详细的设计思路和实现方法。
关键词
气象数据存储
HADOOP
Row
Key
文件
合并
Keywords
meteorological data storage
Hadoop
Row Key
merging of files
分类号
TP311 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
基于Ceph存储系统的小文件存储优化方案
被引量:
5
4
作者
陈法河
柴小丽
机构
中国电子科技集团第三十二研究所
出处
《计算机系统应用》
2022年第2期108-113,共6页
文摘
针对Ceph存储系统面对小文件存储时存在元数据服务器性能瓶颈、文件读取效率低等问题.本文从小文件之间固有的数据关联性出发,通过轻量级模式匹配算法,提取出关联特征并以此为依据对小文件进行合并,提高了合并文件之间的合理性,并在文件读取时将同一合并文件内的小文件存入客户端缓存来提高缓存读取命中率,经过实验验证本文的方案有效的提高了小文件的访问效率.
关键词
分布式存储
小
文件
存储
数据关联性
文件
合并
Keywords
distributed storage
small file storage
data relevance
file merging
分类号
TP333 [自动化与计算机技术—计算机系统结构]
下载PDF
职称材料
题名
基于HBase的极向场电源系统异构数据存储设计
5
作者
许昌涛
黄连生
机构
中国科学院合肥物质科学研究院
中国科学技术大学
出处
《仪表技术》
2024年第2期1-5,38,共6页
基金
中国科学院重大科技基础设施维修改造项目(DSS-WXGZ-2021-0009)
安徽省重大专项(202003a05020019)
中科院等离子体物理研究所拔尖基金(DSJJ-2021-07)。
文摘
极向场电源系统是全超导托卡马克核聚变实验(EAST)装置的重要组成部分。EAST装置的运行和电源系统的日常运行与维护不仅产生海量结构化时序数据,还生成文档、表格、音频和视频等非结构化数据文件。传统的关系型数据库和聚变领域MDSplus数据库不能满足异构数据的统一存储管理。搭建分布式集群,选取分布式数据库HBase,提出基于时间序列的行键设计来实现数据均衡分布和并行访问节点提高读取效率,提出基于降序最佳适应算法的文件合并策略设计来实现小文件的高效合并,充分利用数据块存储空间。实验结果表明,该种异构数据存储设计方案满足了存储需求。
关键词
极向场电源
分布式存储
行键设计
文件
合并
Keywords
poloidal power supply
distributed storage
row key design
file compacting
分类号
TP333 [自动化与计算机技术—计算机系统结构]
TL631 [自动化与计算机技术—计算机科学与技术]
下载PDF
职称材料
题名
基于MPEG-2文件的合并
被引量:
2
6
作者
徐蕾
徐重阳
郑立新
张晓龙
机构
湖北武汉华中科技大学
东太信息产业有限公司
出处
《有线电视技术》
2003年第4期78-80,共3页
文摘
本文介绍了具有相同音频、视频编码方式的MPEG2节目流如何合并成一个节目流。合并后的文件播放流畅并且时间显示正确。它包括PAT PMT表的重写,系统头部分相关字段的更改,PCR值的修改,解码时间标签(DTS),显示时间标签(PTS)的重新确定,传送速率的修改以及添加相应的空包。
关键词
MPEG-2
PAT
PMT
PTS
DTS
节目流
文件
合并
分类号
TN919.81 [电子电信—通信与信息系统]
下载PDF
职称材料
题名
多媒体伪装文件的取证
7
作者
聂鹏
闫坤
李文宇
机构
中国信息通信研究院
出处
《保密科学技术》
2023年第11期14-19,共6页
文摘
本文从文件格式转换伪装、隐写术、利用余数据隐藏信息、多媒体文件合并等多种角度介绍伪装技术的基础知识;通过分析多媒体文件伪装的实际案例,说明伪装技术在实际操作中的实现方式;进而对多媒体伪装文件的日常检测和取证提出了建议。
关键词
多媒体
文件
伪装
取证
文件
合并
信息隐藏
分类号
TP309.3 [自动化与计算机技术—计算机系统结构]
D918.2 [自动化与计算机技术—计算机科学与技术]
原文传递
题名
虚拟地震数据文件并行访问策略
被引量:
3
8
作者
文必龙
赵满
刘永江
张璇
赵晶浩
机构
东北石油大学计算机与科学技术学院
中海石油研究中心技术研究部地球物理重点实验室
出处
《计算机系统应用》
2013年第4期211-215,共5页
基金
国家科技重大专项(2011ZX05023-005-012)
黑龙江省教育厅科学技术研究项目(11551018)
文摘
针对石油勘探行业海量数据过大以及非结构化的特点导致地震数据合并处理时的效率低、消耗磁盘等问题,提出对地震数据文件建立元数据,将多个独立地震数据文件通过文件元数据合并方式生成一个逻辑上完整的地震数据文件即虚拟地震数据文件,提高地震数据合并效率,并根据地震数据并行访问模型实现对虚拟地震数据文件的IO访问.
关键词
虚拟地震数据
文件
文件
合并
文件
并行访问
Keywords
virtual seismic data file
file mergence
file access
分类号
TP311.13 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
基于Python的Excel文档合并系统的设计与实现
被引量:
4
9
作者
张孟研
机构
山东省曲阜师范大学附属中学
出处
《福建电脑》
2017年第6期123-124,共2页
文摘
使用Python语言,结合Py Qt4包作为软件开发平台,开发了Excel文档合并软件,实现excel文件中的数据合并、文档格式转换等功能。
关键词
EXCEL
文件
合并
PYTHON
SQLITE
分类号
TP311.1 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
面向时序数据的两阶段日志结构合并树文件合并框架
被引量:
2
10
作者
张凌哲
黄向东
乔嘉林
勾王敏浩
王建民
机构
清华大学软件学院
出处
《计算机应用》
CSCD
北大核心
2021年第3期618-622,共5页
基金
国家重点研发计划项目(2019YFB1707001)
工业和信息化部高质量发展专项2020。
文摘
时序数据库中日志结构合并树(LSM-tree)在高写入负载或资源受限情况下的不及时的文件合并会导致LSM的C_0层数据大量堆积,从而造成近期写入数据的即席查询延迟增加。针对上述问题,提出了一种在保持面向大块数据的高效查询的基础上实现对最新写入的时序数据的低延迟查询的两阶段LSM合并框架。首先将文件的合并过程分为少量乱序文件快速合并与大量小文件合并这两个阶段,然后在每个阶段内提供多种文件合并策略,最后根据系统的查询负载进行两阶段合并的资源分配。通过在时序数据库Apache IoTDB上分别实现传统的LSM合并策略以及两阶段LSM合并框架和测试,结果表明与传统的LSM相比,两阶段的文件合并模块在提升策略灵活性的情况下使即席查询读盘次数大大降低,并且使历史数据分析查询性能提升了约20%。实验结果表明,两阶段的LSM合并框架能够提高近期写入数据的即席查询效率,提高历史数据分析查询性能,而且提升合并策略的灵活性。
关键词
物联网
时序数据库
时间序列数据
文件
合并
日志结构
合并
树
即席查询
Keywords
Internet of Things(IoT)
time series database
time series data
file compaction
Log-Structured Mergetree(LSM)
ad hoc query
分类号
TP392 [自动化与计算机技术—计算机应用技术]
下载PDF
职称材料
题名
基于HDFS的海量指纹数据云存储优化研究
被引量:
2
11
作者
张宇翔
赵建民
朱信忠
徐慧英
机构
浙江师范大学数理与信息工程学院
出处
《浙江师范大学学报(自然科学版)》
CAS
2015年第2期179-184,共6页
基金
国家自然科学基金资助项目(6127268)
文摘
HDFS设计之初只考虑到如何更好地处理大文件,并没有针对海量小文件进行优化,因此,当使用HDFS管理海量指纹数据小文件时会出现Name Node内存负载过重、上传及查询性能过低等问题.采用Sequence File序列化技术进行小文件的合并,并且对于小文件合并、元数据存储、缓存策略等进行了针对性优化.实验证明,该优化方案可以有效地解决Name Node内存负载过重的问题,并且海量指纹数据小文件的上传和查询性能得到了提高.
关键词
HDFS
小
文件
SequenceFile
文件
合并
元数据存储
缓存策略
Keywords
HDFS
small files
SequenceFile
merging of files
metadata storage
caching strategies
分类号
TP391.4 [自动化与计算机技术—计算机应用技术]
下载PDF
职称材料
题名
“COPY”命令的另类用途
12
作者
小叶子
出处
《中学生电脑》
2003年第11期13-14,共2页
关键词
“COPY”命令
文件
复制
文件
合并
文件
建立
文件
隐藏
日期更改
文件
内容打印
中学
计算机
教学
分类号
TP3 [自动化与计算机技术—计算机科学与技术]
G633.67 [文化科学—教育学]
下载PDF
职称材料
题名
HJSplit——小巧玲珑的文件分裂者
13
作者
程仁田
机构
吉林工业大学
出处
《中国新通信》
1999年第Z1期49-50,共2页
文摘
前几日到网上seeksoft,在http://www.softseek.com处,发现其推荐的热门软件中有一小巧玲珑的文件分裂者HJSplit。Download下来,试用之后,颇为顺手,不敢独享,愿与广大网友共享。
关键词
分裂
文件
合并
原
文件
文本框
文件
合成
文件
大小
压缩软件
窗口
文件
夹
扩展名
分类号
TP317 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
轻松玩转RM文件的拆分、合并与修复
14
作者
api
出处
《电脑》
2004年第9期69-70,共2页
文摘
在宽带普及的今天,交换视频文件,已经是非常普遍的事情了。RM文件以其在文件大小和画质之间取得的良好平衡,成为大家交换视频文件的首选。那么如何将一个大文件拆分成几个部分,分别传输呢?如何将下载到的RM文件的各部分合并为一个完整的文件?又如何将下载中损坏的文件修复呢?下面我们将给大家详细的进行介绍。
关键词
RM
文件
视频
文件
文件
拆分
文件
合并
文件
修复
分类号
TN911.7 [电子电信—通信与信息系统]
下载PDF
职称材料
题名
如何利用VC + +实现多文件合并与任意文件提取
15
作者
张邦华
出处
《电脑编程技巧与维护》
2008年第7期91-92,共2页
文摘
讲解利用VC + +实现多文件合并及任意文件提取的一种方法。
关键词
任意
文件
文件
合并
VC++
提取
模块控制
文件
名称
文件
大小
初始位置
分类号
TL631.24 [核科学技术—核技术及应用]
下载PDF
职称材料
题名
文件分割有利器
16
作者
李东光
出处
《电脑技术——Hello-IT》
2004年第2期30-31,共2页
文摘
该软件可以将一个文件拆分成多个小文件.并可以将多个文件台井成一个大文件。软件对要拆分的文件大小最大可以达到2G字节。对拆分后每个文件的大小。工具预定了当前四种比较常用软盘的容量.当然。
关键词
文件
分割
奥博
文件
分割机
文件
拆分
文件
合并
分类号
TP317 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
基于改进HDFS的冠字号小文件分布式存储研究
被引量:
1
17
作者
徐俊
王庆华
赵云龙
机构
广州无线电集团广州广电运通金融电子股份有限公司ATM研究院
华南师范大学计算机学院
出处
《电脑知识与技术(过刊)》
2014年第6X期3980-3985,共6页
基金
国家863计划重大项目智能云服务与管理平台核心软件及系统(2013AA01A212)
国家科技支撑计划课题电子信息产业集群质量保障服务平台应用示范(2012BAH27F05)
广东省自然基金团队研究项目云计算核心技术及云服务应用研究(S2012030006242)资助
文摘
针对冠字号小图片存储到HDFS系统中带来的访问瓶颈问题,改进了原有的HDFS系统,新提出的分布式系统机制是充分基于文件相关性(File Correlation)进行合并处理的HDFS(FCHDFS)。由于HDFS中所有的文件都是由单一的主节点服务器托管-NameNode,每个存储到HDFS的文件在NameNode主存储器中都需要存储它的元数据,这必然导致小文件数量越大HDFS性能就越差。存储和管理大量的小文件,对NameNode是一个沉重的负担。可以存储在HDFS的文件数量是受到NameNode的内存大小约束。为了提高存储和访问HDFS上的冠字号小文件的效率,该文提出了一个基于文件关联性的小文件高效处理机制。在这种方法中,按照客户和时间区分,一组相关的文件相结合为一个大文件,从而减少文件数目。而新建的索引机制能从相应的联合文件中访问单个文件。实验结果表明,FCHDFS大大减少主节点内存中元数据数量,也提高了存储和访问大量小文件的效率。
关键词
HADOOP
小
文件
HDFS
文件
合并
Keywords
Hadoop
small file
HDFS
file merge
分类号
TP333 [自动化与计算机技术—计算机系统结构]
下载PDF
职称材料
题名
新软速递
18
出处
《网管员世界》
2011年第7期113-114,共2页
文摘
是款强大且免费的压缩文件管理器,相比其它压缩软件占用更少的系统资源,有更好的兼容性,压缩率较高。提供了对ZIP、7Z和TAg文件的完整支持,能解压RAR、JAR等多达49种格式文件,功能有强力压缩、分卷、加密、自解压模块、智能图片转换、智能媒体文件合并等功能。
关键词
文件
管理器
压缩软件
格式
文件
图片转换
文件
合并
兼容性
压缩率
ZIP
分类号
TP311.56 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
一种跨反向隔离装置文件传输方法及系统
19
作者
史豪杰
翟桂锋
陆鑫
孙超
机构
南京南瑞继保电气有限公司
出处
《工业控制计算机》
2020年第11期22-23,25,共3页
文摘
针对跨反向安全区数据传输效率不足,研发了一种跨反向隔离装置文件传输方法和系统。在反向隔离装置安全传输文件的基础上,增加反向文件发送和接收代理模块,对大文件进行压缩、切片、并发传输,小文件进行合并、压缩传输,通过重传确认机制,保证反向传输可靠性。该系统实现文件跨反向隔离的快速、稳定、可靠传输,已应用于多个电力自动化项目中。
关键词
跨安全区
反向隔离装置
文件
传输
文件
切片
文件
合并
Keywords
cross security zone
reverse isolation device
file transfer
file slicing
file merge
分类号
TM76 [电气工程—电力系统及自动化]
TP309 [自动化与计算机技术—计算机系统结构]
下载PDF
职称材料
题名
视频文件的拆分和合并
20
作者
林雪莲
出处
《电子与电脑》
2003年第3期107-111,共5页
文摘
随着计算机技术的不断发展,人们收集的视频资料越来越多,许多重要的资料需要刻录到CD-ROM上面长期保存,但此时往往会出现一个问题:一个视频文件的大小超过700M或者更大。一张光盘的客量不够,那如何办呢?另外,网络技术的飞快发展给了人们更多交流的空间,朋友之间通过网络传输来麸享一些视频资源成为一种时尚,但要传输一个几百兆的文件不仅时间长而且在传输过程中容易中断,若没有断点续传的功能,前面的工作就白做了,即使有断点续传的功能,由于文件传输时间长,突发性中断的可能性比较大,多次中断会使文件受损。此时,有什么好的解决办法吗?
关键词
视频
文件
网络传输
文件
拆分软件
REAL
Networks公司
视频绱编码软件
共享软件
文件
合并
分类号
TP317.4 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
作者
出处
发文年
被引量
操作
1
基于HTML5大文件断点续传的实现方案
王莉敏
梁正和
段全锋
《计算机与现代化》
2016
18
下载PDF
职称材料
2
基于HDFS的小文件存储与读取优化策略
张海
马建红
《计算机系统应用》
2014
14
下载PDF
职称材料
3
基于Hadoop的气象数据分布式存储技术研究
周笑天
冯勇
陈益玲
陈澍
《信息技术》
2022
8
下载PDF
职称材料
4
基于Ceph存储系统的小文件存储优化方案
陈法河
柴小丽
《计算机系统应用》
2022
5
下载PDF
职称材料
5
基于HBase的极向场电源系统异构数据存储设计
许昌涛
黄连生
《仪表技术》
2024
0
下载PDF
职称材料
6
基于MPEG-2文件的合并
徐蕾
徐重阳
郑立新
张晓龙
《有线电视技术》
2003
2
下载PDF
职称材料
7
多媒体伪装文件的取证
聂鹏
闫坤
李文宇
《保密科学技术》
2023
0
原文传递
8
虚拟地震数据文件并行访问策略
文必龙
赵满
刘永江
张璇
赵晶浩
《计算机系统应用》
2013
3
下载PDF
职称材料
9
基于Python的Excel文档合并系统的设计与实现
张孟研
《福建电脑》
2017
4
下载PDF
职称材料
10
面向时序数据的两阶段日志结构合并树文件合并框架
张凌哲
黄向东
乔嘉林
勾王敏浩
王建民
《计算机应用》
CSCD
北大核心
2021
2
下载PDF
职称材料
11
基于HDFS的海量指纹数据云存储优化研究
张宇翔
赵建民
朱信忠
徐慧英
《浙江师范大学学报(自然科学版)》
CAS
2015
2
下载PDF
职称材料
12
“COPY”命令的另类用途
小叶子
《中学生电脑》
2003
0
下载PDF
职称材料
13
HJSplit——小巧玲珑的文件分裂者
程仁田
《中国新通信》
1999
0
下载PDF
职称材料
14
轻松玩转RM文件的拆分、合并与修复
api
《电脑》
2004
0
下载PDF
职称材料
15
如何利用VC + +实现多文件合并与任意文件提取
张邦华
《电脑编程技巧与维护》
2008
0
下载PDF
职称材料
16
文件分割有利器
李东光
《电脑技术——Hello-IT》
2004
0
下载PDF
职称材料
17
基于改进HDFS的冠字号小文件分布式存储研究
徐俊
王庆华
赵云龙
《电脑知识与技术(过刊)》
2014
1
下载PDF
职称材料
18
新软速递
《网管员世界》
2011
0
下载PDF
职称材料
19
一种跨反向隔离装置文件传输方法及系统
史豪杰
翟桂锋
陆鑫
孙超
《工业控制计算机》
2020
0
下载PDF
职称材料
20
视频文件的拆分和合并
林雪莲
《电子与电脑》
2003
0
下载PDF
职称材料
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
上一页
1
2
…
4
下一页
到第
页
确定
用户登录
登录
IP登录
使用帮助
返回顶部