期刊文献+
共找到80篇文章
< 1 2 4 >
每页显示 20 50 100
基于HTML5大文件断点续传的实现方案 被引量:18
1
作者 王莉敏 梁正和 段全锋 《计算机与现代化》 2016年第3期91-95,共5页
在Web应用中,文件上传是一个常用的功能,而目前的文件上传方式在处理大文件上传方面不尽人意,常常因为文件过大或者网络中断导致上传失败,不得不重新上传。随着HTML5相关技术的发展,出现了一系列对文件操作的API,如File List、Blob、Fil... 在Web应用中,文件上传是一个常用的功能,而目前的文件上传方式在处理大文件上传方面不尽人意,常常因为文件过大或者网络中断导致上传失败,不得不重新上传。随着HTML5相关技术的发展,出现了一系列对文件操作的API,如File List、Blob、File、FileReader等接口,使得Web端能够使用Java Script对本地文件进行分片操作进而实现文件断点续传功能。本文在此基础上解决了服务器端文件合并过程中用户等待超时问题以及如何保证合并文件正确性的问题。 展开更多
关键词 文件上传 HTML5 FILE API 断点续传 文件合并
下载PDF
基于HDFS的小文件存储与读取优化策略 被引量:14
2
作者 张海 马建红 《计算机系统应用》 2014年第5期167-171,共5页
本文对HDFS分布式文件系统进行了深入的研究,在HDFS中以流式的方式访问大文件时效率很高但是对海量小文件的存取效率比较低.本文针对这个问题提出了一个基于关系数据库的小文件合并策略,首先为每个用户建立一个用户文件,其次当用户上传... 本文对HDFS分布式文件系统进行了深入的研究,在HDFS中以流式的方式访问大文件时效率很高但是对海量小文件的存取效率比较低.本文针对这个问题提出了一个基于关系数据库的小文件合并策略,首先为每个用户建立一个用户文件,其次当用户上传小文件时把文件的元数据信息存入到关系数据库中并将文件追加写入到用户文件中,最后用户读取小文件时通过元数据信息直接以流式方式进行读取.此外当用户读取小于一个文件块大小的文件时还采取了数据节点负载均衡策略,直接由存储数据的DataNode传送给客户端从而减轻主服务器压力提高文件传送效率.实验结果表明通过此方案很好地解决了HDFS对大量小文件存取支持不足的缺点,提高了HDFS文件系统对海量小文件的读写性能,此方案适用于具有海量小文件的云存储系统,可以降低NameNode内存消耗提高文件读写效率. 展开更多
关键词 HDFS 文件优化 文件合并 负载均衡 云存储
下载PDF
基于Hadoop的气象数据分布式存储技术研究 被引量:8
3
作者 周笑天 冯勇 +1 位作者 陈益玲 陈澍 《信息技术》 2022年第1期68-74,共7页
针对目前气象数据存储所面临的海量扩张、高并发读写、结构化和非结构化数据并存以及长时间序列和大数据集检索效率低下等问题,提出了以Hadoop开源框架为基础的气象数据分布式存储方案。通过对气象数据自身属性和特点进行分析,得出了气... 针对目前气象数据存储所面临的海量扩张、高并发读写、结构化和非结构化数据并存以及长时间序列和大数据集检索效率低下等问题,提出了以Hadoop开源框架为基础的气象数据分布式存储方案。通过对气象数据自身属性和特点进行分析,得出了气象数据在经过充分优化的基础上,在分布式存储框架中具有很强的适应性和规模化应用的潜力;并在HBase数据库中的Row Key设计和小文件合并策略方面做了创新。最后针对气象数据中广泛存在的结构化和非结构化这两种主要数据类型,以自动气象站数据和雷达产品数据为具体实例,给出了详细的设计思路和实现方法。 展开更多
关键词 气象数据存储 HADOOP Row Key 文件合并
下载PDF
基于Ceph存储系统的小文件存储优化方案 被引量:5
4
作者 陈法河 柴小丽 《计算机系统应用》 2022年第2期108-113,共6页
针对Ceph存储系统面对小文件存储时存在元数据服务器性能瓶颈、文件读取效率低等问题.本文从小文件之间固有的数据关联性出发,通过轻量级模式匹配算法,提取出关联特征并以此为依据对小文件进行合并,提高了合并文件之间的合理性,并在文... 针对Ceph存储系统面对小文件存储时存在元数据服务器性能瓶颈、文件读取效率低等问题.本文从小文件之间固有的数据关联性出发,通过轻量级模式匹配算法,提取出关联特征并以此为依据对小文件进行合并,提高了合并文件之间的合理性,并在文件读取时将同一合并文件内的小文件存入客户端缓存来提高缓存读取命中率,经过实验验证本文的方案有效的提高了小文件的访问效率. 展开更多
关键词 分布式存储 文件存储 数据关联性 文件合并
下载PDF
基于HBase的极向场电源系统异构数据存储设计
5
作者 许昌涛 黄连生 《仪表技术》 2024年第2期1-5,38,共6页
极向场电源系统是全超导托卡马克核聚变实验(EAST)装置的重要组成部分。EAST装置的运行和电源系统的日常运行与维护不仅产生海量结构化时序数据,还生成文档、表格、音频和视频等非结构化数据文件。传统的关系型数据库和聚变领域MDSplus... 极向场电源系统是全超导托卡马克核聚变实验(EAST)装置的重要组成部分。EAST装置的运行和电源系统的日常运行与维护不仅产生海量结构化时序数据,还生成文档、表格、音频和视频等非结构化数据文件。传统的关系型数据库和聚变领域MDSplus数据库不能满足异构数据的统一存储管理。搭建分布式集群,选取分布式数据库HBase,提出基于时间序列的行键设计来实现数据均衡分布和并行访问节点提高读取效率,提出基于降序最佳适应算法的文件合并策略设计来实现小文件的高效合并,充分利用数据块存储空间。实验结果表明,该种异构数据存储设计方案满足了存储需求。 展开更多
关键词 极向场电源 分布式存储 行键设计 文件合并
下载PDF
基于MPEG-2文件的合并 被引量:2
6
作者 徐蕾 徐重阳 +1 位作者 郑立新 张晓龙 《有线电视技术》 2003年第4期78-80,共3页
本文介绍了具有相同音频、视频编码方式的MPEG2节目流如何合并成一个节目流。合并后的文件播放流畅并且时间显示正确。它包括PAT PMT表的重写,系统头部分相关字段的更改,PCR值的修改,解码时间标签(DTS),显示时间标签(PTS)的重新确定,传... 本文介绍了具有相同音频、视频编码方式的MPEG2节目流如何合并成一个节目流。合并后的文件播放流畅并且时间显示正确。它包括PAT PMT表的重写,系统头部分相关字段的更改,PCR值的修改,解码时间标签(DTS),显示时间标签(PTS)的重新确定,传送速率的修改以及添加相应的空包。 展开更多
关键词 MPEG-2 PAT PMT PTS DTS 节目流 文件合并
下载PDF
多媒体伪装文件的取证
7
作者 聂鹏 闫坤 李文宇 《保密科学技术》 2023年第11期14-19,共6页
本文从文件格式转换伪装、隐写术、利用余数据隐藏信息、多媒体文件合并等多种角度介绍伪装技术的基础知识;通过分析多媒体文件伪装的实际案例,说明伪装技术在实际操作中的实现方式;进而对多媒体伪装文件的日常检测和取证提出了建议。
关键词 多媒体文件伪装 取证 文件合并 信息隐藏
原文传递
虚拟地震数据文件并行访问策略 被引量:3
8
作者 文必龙 赵满 +2 位作者 刘永江 张璇 赵晶浩 《计算机系统应用》 2013年第4期211-215,共5页
针对石油勘探行业海量数据过大以及非结构化的特点导致地震数据合并处理时的效率低、消耗磁盘等问题,提出对地震数据文件建立元数据,将多个独立地震数据文件通过文件元数据合并方式生成一个逻辑上完整的地震数据文件即虚拟地震数据文件... 针对石油勘探行业海量数据过大以及非结构化的特点导致地震数据合并处理时的效率低、消耗磁盘等问题,提出对地震数据文件建立元数据,将多个独立地震数据文件通过文件元数据合并方式生成一个逻辑上完整的地震数据文件即虚拟地震数据文件,提高地震数据合并效率,并根据地震数据并行访问模型实现对虚拟地震数据文件的IO访问. 展开更多
关键词 虚拟地震数据文件 文件合并 文件并行访问
下载PDF
基于Python的Excel文档合并系统的设计与实现 被引量:4
9
作者 张孟研 《福建电脑》 2017年第6期123-124,共2页
使用Python语言,结合Py Qt4包作为软件开发平台,开发了Excel文档合并软件,实现excel文件中的数据合并、文档格式转换等功能。
关键词 EXCEL 文件合并 PYTHON SQLITE
下载PDF
面向时序数据的两阶段日志结构合并树文件合并框架 被引量:2
10
作者 张凌哲 黄向东 +2 位作者 乔嘉林 勾王敏浩 王建民 《计算机应用》 CSCD 北大核心 2021年第3期618-622,共5页
时序数据库中日志结构合并树(LSM-tree)在高写入负载或资源受限情况下的不及时的文件合并会导致LSM的C_0层数据大量堆积,从而造成近期写入数据的即席查询延迟增加。针对上述问题,提出了一种在保持面向大块数据的高效查询的基础上实现对... 时序数据库中日志结构合并树(LSM-tree)在高写入负载或资源受限情况下的不及时的文件合并会导致LSM的C_0层数据大量堆积,从而造成近期写入数据的即席查询延迟增加。针对上述问题,提出了一种在保持面向大块数据的高效查询的基础上实现对最新写入的时序数据的低延迟查询的两阶段LSM合并框架。首先将文件的合并过程分为少量乱序文件快速合并与大量小文件合并这两个阶段,然后在每个阶段内提供多种文件合并策略,最后根据系统的查询负载进行两阶段合并的资源分配。通过在时序数据库Apache IoTDB上分别实现传统的LSM合并策略以及两阶段LSM合并框架和测试,结果表明与传统的LSM相比,两阶段的文件合并模块在提升策略灵活性的情况下使即席查询读盘次数大大降低,并且使历史数据分析查询性能提升了约20%。实验结果表明,两阶段的LSM合并框架能够提高近期写入数据的即席查询效率,提高历史数据分析查询性能,而且提升合并策略的灵活性。 展开更多
关键词 物联网 时序数据库 时间序列数据 文件合并 日志结构合并 即席查询
下载PDF
基于HDFS的海量指纹数据云存储优化研究 被引量:2
11
作者 张宇翔 赵建民 +1 位作者 朱信忠 徐慧英 《浙江师范大学学报(自然科学版)》 CAS 2015年第2期179-184,共6页
HDFS设计之初只考虑到如何更好地处理大文件,并没有针对海量小文件进行优化,因此,当使用HDFS管理海量指纹数据小文件时会出现Name Node内存负载过重、上传及查询性能过低等问题.采用Sequence File序列化技术进行小文件的合并,并且对于... HDFS设计之初只考虑到如何更好地处理大文件,并没有针对海量小文件进行优化,因此,当使用HDFS管理海量指纹数据小文件时会出现Name Node内存负载过重、上传及查询性能过低等问题.采用Sequence File序列化技术进行小文件的合并,并且对于小文件合并、元数据存储、缓存策略等进行了针对性优化.实验证明,该优化方案可以有效地解决Name Node内存负载过重的问题,并且海量指纹数据小文件的上传和查询性能得到了提高. 展开更多
关键词 HDFS 文件 SequenceFile 文件合并 元数据存储 缓存策略
下载PDF
“COPY”命令的另类用途
12
作者 小叶子 《中学生电脑》 2003年第11期13-14,共2页
关键词 “COPY”命令 文件复制 文件合并 文件建立 文件隐藏 日期更改 文件内容打印 中学 计算机 教学
下载PDF
HJSplit——小巧玲珑的文件分裂者
13
作者 程仁田 《中国新通信》 1999年第Z1期49-50,共2页
前几日到网上seeksoft,在http://www.softseek.com处,发现其推荐的热门软件中有一小巧玲珑的文件分裂者HJSplit。Download下来,试用之后,颇为顺手,不敢独享,愿与广大网友共享。
关键词 分裂 文件合并 文件 文本框 文件合成 文件大小 压缩软件 窗口 文件 扩展名
下载PDF
轻松玩转RM文件的拆分、合并与修复
14
作者 api 《电脑》 2004年第9期69-70,共2页
在宽带普及的今天,交换视频文件,已经是非常普遍的事情了。RM文件以其在文件大小和画质之间取得的良好平衡,成为大家交换视频文件的首选。那么如何将一个大文件拆分成几个部分,分别传输呢?如何将下载到的RM文件的各部分合并为一个完整... 在宽带普及的今天,交换视频文件,已经是非常普遍的事情了。RM文件以其在文件大小和画质之间取得的良好平衡,成为大家交换视频文件的首选。那么如何将一个大文件拆分成几个部分,分别传输呢?如何将下载到的RM文件的各部分合并为一个完整的文件?又如何将下载中损坏的文件修复呢?下面我们将给大家详细的进行介绍。 展开更多
关键词 RM文件 视频文件 文件拆分 文件合并 文件修复
下载PDF
如何利用VC + +实现多文件合并与任意文件提取
15
作者 张邦华 《电脑编程技巧与维护》 2008年第7期91-92,共2页
讲解利用VC + +实现多文件合并及任意文件提取的一种方法。
关键词 任意文件 文件合并 VC++ 提取 模块控制 文件名称 文件大小 初始位置
下载PDF
文件分割有利器
16
作者 李东光 《电脑技术——Hello-IT》 2004年第2期30-31,共2页
该软件可以将一个文件拆分成多个小文件.并可以将多个文件台井成一个大文件。软件对要拆分的文件大小最大可以达到2G字节。对拆分后每个文件的大小。工具预定了当前四种比较常用软盘的容量.当然。
关键词 文件分割 奥博文件分割机 文件拆分 文件合并
下载PDF
基于改进HDFS的冠字号小文件分布式存储研究 被引量:1
17
作者 徐俊 王庆华 赵云龙 《电脑知识与技术(过刊)》 2014年第6X期3980-3985,共6页
针对冠字号小图片存储到HDFS系统中带来的访问瓶颈问题,改进了原有的HDFS系统,新提出的分布式系统机制是充分基于文件相关性(File Correlation)进行合并处理的HDFS(FCHDFS)。由于HDFS中所有的文件都是由单一的主节点服务器托管-NameNode... 针对冠字号小图片存储到HDFS系统中带来的访问瓶颈问题,改进了原有的HDFS系统,新提出的分布式系统机制是充分基于文件相关性(File Correlation)进行合并处理的HDFS(FCHDFS)。由于HDFS中所有的文件都是由单一的主节点服务器托管-NameNode,每个存储到HDFS的文件在NameNode主存储器中都需要存储它的元数据,这必然导致小文件数量越大HDFS性能就越差。存储和管理大量的小文件,对NameNode是一个沉重的负担。可以存储在HDFS的文件数量是受到NameNode的内存大小约束。为了提高存储和访问HDFS上的冠字号小文件的效率,该文提出了一个基于文件关联性的小文件高效处理机制。在这种方法中,按照客户和时间区分,一组相关的文件相结合为一个大文件,从而减少文件数目。而新建的索引机制能从相应的联合文件中访问单个文件。实验结果表明,FCHDFS大大减少主节点内存中元数据数量,也提高了存储和访问大量小文件的效率。 展开更多
关键词 HADOOP 文件 HDFS 文件合并
下载PDF
新软速递
18
《网管员世界》 2011年第7期113-114,共2页
是款强大且免费的压缩文件管理器,相比其它压缩软件占用更少的系统资源,有更好的兼容性,压缩率较高。提供了对ZIP、7Z和TAg文件的完整支持,能解压RAR、JAR等多达49种格式文件,功能有强力压缩、分卷、加密、自解压模块、智能图片转... 是款强大且免费的压缩文件管理器,相比其它压缩软件占用更少的系统资源,有更好的兼容性,压缩率较高。提供了对ZIP、7Z和TAg文件的完整支持,能解压RAR、JAR等多达49种格式文件,功能有强力压缩、分卷、加密、自解压模块、智能图片转换、智能媒体文件合并等功能。 展开更多
关键词 文件管理器 压缩软件 格式文件 图片转换 文件合并 兼容性 压缩率 ZIP
下载PDF
一种跨反向隔离装置文件传输方法及系统
19
作者 史豪杰 翟桂锋 +1 位作者 陆鑫 孙超 《工业控制计算机》 2020年第11期22-23,25,共3页
针对跨反向安全区数据传输效率不足,研发了一种跨反向隔离装置文件传输方法和系统。在反向隔离装置安全传输文件的基础上,增加反向文件发送和接收代理模块,对大文件进行压缩、切片、并发传输,小文件进行合并、压缩传输,通过重传确认机制... 针对跨反向安全区数据传输效率不足,研发了一种跨反向隔离装置文件传输方法和系统。在反向隔离装置安全传输文件的基础上,增加反向文件发送和接收代理模块,对大文件进行压缩、切片、并发传输,小文件进行合并、压缩传输,通过重传确认机制,保证反向传输可靠性。该系统实现文件跨反向隔离的快速、稳定、可靠传输,已应用于多个电力自动化项目中。 展开更多
关键词 跨安全区 反向隔离装置 文件传输 文件切片 文件合并
下载PDF
视频文件的拆分和合并
20
作者 林雪莲 《电子与电脑》 2003年第3期107-111,共5页
随着计算机技术的不断发展,人们收集的视频资料越来越多,许多重要的资料需要刻录到CD-ROM上面长期保存,但此时往往会出现一个问题:一个视频文件的大小超过700M或者更大。一张光盘的客量不够,那如何办呢?另外,网络技术的飞快发展... 随着计算机技术的不断发展,人们收集的视频资料越来越多,许多重要的资料需要刻录到CD-ROM上面长期保存,但此时往往会出现一个问题:一个视频文件的大小超过700M或者更大。一张光盘的客量不够,那如何办呢?另外,网络技术的飞快发展给了人们更多交流的空间,朋友之间通过网络传输来麸享一些视频资源成为一种时尚,但要传输一个几百兆的文件不仅时间长而且在传输过程中容易中断,若没有断点续传的功能,前面的工作就白做了,即使有断点续传的功能,由于文件传输时间长,突发性中断的可能性比较大,多次中断会使文件受损。此时,有什么好的解决办法吗? 展开更多
关键词 视频文件 网络传输 文件拆分软件 REAL Networks公司 视频绱编码软件 共享软件 文件合并
下载PDF
上一页 1 2 4 下一页 到第
使用帮助 返回顶部