海量小文件存储文件系统研究综述 被引量：20

1

作者 王铃惠 李小勇 张轶彬 《计算机应用与软件》 CSCD 北大核心 2012年第8期106-109,共4页

随着互联网的发展,存储的小文件数量也呈几何级的增长。传统文件系统已不能满足存储性能的需求,对于小文件存储,尤其是海量小文件存储的优化已变得越来越重要。首先提出对小文件存储的系统进行优化的必要性,然后对小文件存储中存在的问... 随着互联网的发展,存储的小文件数量也呈几何级的增长。传统文件系统已不能满足存储性能的需求,对于小文件存储,尤其是海量小文件存储的优化已变得越来越重要。首先提出对小文件存储的系统进行优化的必要性,然后对小文件存储中存在的问题进行分析并阐述优化的方式,并介绍三种具有代表性的适合小文件存储的文件系统,最后总结归纳。 展开更多

关键词 小文件 海量存储 元数据操作 磁盘访问效率 C-FFS Reiser FS FACEBOOK

下载PDF 职称材料

地理空间信息元数据模型 被引量：12

2

作者 赵汗青 郭刚 《测绘通报》 CSCD 北大核心 2002年第z1期19-23,共5页

元数据是关于数据的数据 ,是实现数据高效组织、管理、维护、快速检索、访问、存取的核心和关键技术之一。通过对元数据特点和本质的分析 ,提出并定义严格的元数据模式概念以及基于元数据模式的 5种基本运算 。

关键词 元数据 模式 地理空间信息 模式运算 元数据操作

下载PDF 职称材料

分布式文件系统中元数据操作的优化 被引量：6

3

作者 刘恋 郑彪 龚奕利 《计算机应用》 CSCD 北大核心 2012年第12期3271-3273,共3页

分析了PVFS2中的元数据操作流程,以remove操作为例,通过测试发现其瓶颈之处,提出一种将判断过程放置到服务器端来减少通信次数的优化方法,这些方法同样可以应用于其他元数据操作。在PVFS2中实现了该优化方法,并将其同原来的remove操作... 分析了PVFS2中的元数据操作流程,以remove操作为例,通过测试发现其瓶颈之处,提出一种将判断过程放置到服务器端来减少通信次数的优化方法,这些方法同样可以应用于其他元数据操作。在PVFS2中实现了该优化方法,并将其同原来的remove操作耗时进行了对比,结果表明,该元数据操作的性能提高了10%左右。 展开更多

关键词 分布式文件系统 元数据操作 优化处理 PVFS2

下载PDF 职称材料

一种服务端驱动的无锁的文件元数据操作方法

4

作者 冯振乾 苏金树 《计算机工程与科学》 CSCD 北大核心 2009年第A01期153-156,共4页

当前的大规模存储系统提供大量的聚合I/O带宽,但并没有实现高度的元数据扩展性以管理分布于成千上万存储节点之上的文件。本文提出服务端驱动的无锁元数据操作来改进文件元数据操作的扩展性。服务端驱动技术简化了一致性维护,无锁技术... 当前的大规模存储系统提供大量的聚合I/O带宽,但并没有实现高度的元数据扩展性以管理分布于成千上万存储节点之上的文件。本文提出服务端驱动的无锁元数据操作来改进文件元数据操作的扩展性。服务端驱动技术简化了一致性维护,无锁技术既避免了资源冲突,又增进了元数据操作的并行性。实现了文件创建、删除操作。实验结果表明,该方法能显著提高系统的性能和扩展性。 展开更多

关键词 元数据操作 服务端驱动 无锁 扩展性

下载PDF 职称材料

面向海量存储的文件系统评测基准 被引量：4

5

作者 李鑫 李战怀 张晓 《计算机工程》 CAS CSCD 北大核心 2011年第15期55-57,共3页

为满足海量存储文件系统级性能评测需求,开发一个通用的符合POSIX.1标准的文件系统基准评测工具LZpack,可为不同文件系统的性能评测比较提供一种有效的方法,也可为使用文件系统操作API集合的应用程序设计者提供性能评价的依据。LZpack... 为满足海量存储文件系统级性能评测需求,开发一个通用的符合POSIX.1标准的文件系统基准评测工具LZpack,可为不同文件系统的性能评测比较提供一种有效的方法,也可为使用文件系统操作API集合的应用程序设计者提供性能评价的依据。LZpack采用集群评测的评测架构,可以对文件I/O性能及元数据操作性能进行准确评测。对LZpack的系统结构和关键问题进行描述,对使用LZpack在不同文件系统上的测试结果进行分析,提出LZpack下一步的改进思路。 展开更多

关键词 海量存储文件系统 性能测试 集群评测 元数据操作测试

下载PDF 职称材料

蓝鲸机群文件系统的元数据一致性协议

6

作者 邵冰清 张军伟 +2 位作者 郑彩平 张浩 刘振军 《小型微型计算机系统》 CSCD 北大核心 2015年第5期903-909,共7页

蓝鲸机群文件系统BWFS采用元数据服务器集群以扩展元数据服务能力,多个服务器之间的分布式元数据一致性维护成为必须要解决的问题.然而传统一致性维护协议通常需要多次的网络交互和磁盘同步,阻碍了BWFS元数据性能扩展.BWFS在本地日志系... 蓝鲸机群文件系统BWFS采用元数据服务器集群以扩展元数据服务能力,多个服务器之间的分布式元数据一致性维护成为必须要解决的问题.然而传统一致性维护协议通常需要多次的网络交互和磁盘同步,阻碍了BWFS元数据性能扩展.BWFS在本地日志系统的基础上设计实现了一种新型的分布式元数据一致性协议.协议针对BWFS中每个分布式元数据操作只涉及到两台服务器,通过在所涉及的两台服务器之间互相保存冗余操作日志,实现了异步的分布式元数据一致性,避免了磁盘同步开销.测试表明,保证一致性的情况下分布式元数据操作的平均响应时间相比无一致性保证仅延长了约5%-15%;在宕机的情况下,单个服务器恢复10000个分布式元数据操作的时间仅1s. 展开更多

关键词 机群文件系统 分布式元数据操作 一致性

下载PDF 职称材料

数字图书馆互操作综述 被引量：23

7

作者 张付志 刘明业 +1 位作者 孔令富 牛振东 《情报学报》 CSSCI 北大核心 2004年第2期191-197,共7页

互操作是实现数字图书馆(DLs)的集成或联邦所面临的中心问题.文章对DLs互操作的研究现状及关键技术进行了综述与讨论,主要内容包括:(1)DLs互操作协议、DLs中间件、DLs中的信息发现、语义互操作和元数据互操作;(2)DLs互操作的实现方法及... 互操作是实现数字图书馆(DLs)的集成或联邦所面临的中心问题.文章对DLs互操作的研究现状及关键技术进行了综述与讨论,主要内容包括:(1)DLs互操作协议、DLs中间件、DLs中的信息发现、语义互操作和元数据互操作;(2)DLs互操作的实现方法及评价标准.最后,指出了DLs互操作今后的研究方向. 展开更多

关键词 数字图书馆 综述 互操作协议 信息发现 语义互操作 元数据互操作 中间件

下载PDF 职称材料

元数据与数据元的内涵及其应用 被引量：21

8

作者 王丹 王文生 《农业网络信息》 2005年第11期27-30,共4页

本文详细论述了元数据和数据元的概念、定义、用途、两者的区别和联系,两者的字典标准格式的相同与不同之处以及它们的应用。

关键词 数据元 元数据 元数据应用 元数据互操作

下载PDF 职称材料

基于OAI-PMH的信息资源整合 被引量：22

9

作者 郭少友 《大学图书馆学报》 CSSCI 北大核心 2005年第3期16-18,共3页

OAI-PMH提供了一个元数据互操作框架,OAI服务提供者利用OAI-PMH可以对动态OAI数据、静态OAI数据、Z39.50数据和其他非OAI数据进行整合,以统一的格式为用户提供增值服务。

关键词 OAI 信息资源整合 元数据互操作 Z39.50 服务提供者 增值服务 用户

下载PDF 职称材料

从元数据映射出发谈元数据互操作问题 被引量：17

10

作者 申晓娟 高红 《国家图书馆学刊》 2006年第4期51-55,共5页

元数据是近年来人们经常提到而且出现频率较高的一个名词,元数据的研究与开发正成为当今信息网络发展的热点。随着元数据格式的增多,各种元数据互操作问题日益突出。本文从元数据互操作背景、主要实现方法、映射实例评析方面进行探讨,... 元数据是近年来人们经常提到而且出现频率较高的一个名词,元数据的研究与开发正成为当今信息网络发展的热点。随着元数据格式的增多,各种元数据互操作问题日益突出。本文从元数据互操作背景、主要实现方法、映射实例评析方面进行探讨,并提出建立有效的元数据互操作机制的构想。表2。参考文献7。 展开更多

关键词 数字图书馆 元数据互操作 MARC DC 元数据映射

下载PDF 职称材料

数字图书馆推广工程面向数字资源整合的元数据仓储构建 被引量：16

11

作者 梁蕙玮 萨蕾 《国家图书馆学刊》 CSSCI 北大核心 2012年第5期27-32,共6页

数字资源整合有多种方式,其中元数据仓储是数字资源整合的主流方法。从对外购数字资源的整合和对自建数字资源的整合入手,介绍了国家数字图书馆推广工程中的元数据仓储建设目标与实践,并针对存在的问题提出相应的发展建议。参考文献4。

关键词 数字资源整合 元数据仓储 元数据互操作

下载PDF 职称材料

元数据互操作问题技术解决方案研究 被引量：15

12

作者 孔庆杰 宋丹辉 《情报科学》 CSSCI 北大核心 2007年第5期754-758,共5页

本文在简要介绍元数据产生背景和体系结构的基础上,从语义、结构、语法、检索协议等角度对元数据互操作问题进行深入分析,并对现存技术途径解决方案的局限性进行概括总结。

关键词 元数据互操作 XML RDF OM

下载PDF 职称材料

元数据互操作技术探讨 被引量：9

13

作者 杨德婷 阎保平 《计算机应用研究》 CSCD 北大核心 2004年第1期44-47,共4页

首先分析了元数据互操作的三个层次和当前互操作技术的发展趋势;然后以元数据互操作技术OAI为实例分析,简单介绍了OAI的技术框架和OAI协议的主要特点,并给出了元数据采集系统一般的设计方法和需要考虑的问题;最后对元数据互操作的几种... 首先分析了元数据互操作的三个层次和当前互操作技术的发展趋势;然后以元数据互操作技术OAI为实例分析,简单介绍了OAI的技术框架和OAI协议的主要特点,并给出了元数据采集系统一般的设计方法和需要考虑的问题;最后对元数据互操作的几种技术进行了效益分析和比较,并介绍了设计一个复杂的系统时通常采用的策略。 展开更多

关键词 互操作 元数据 元数据互操作 OAJ 元数据采集

下载PDF 职称材料

OAI-PMH协议及应用新趋势 被引量：9

14

作者 王宇芳 黄镝 +1 位作者 李晓玲 符礼平 《现代情报》 北大核心 2006年第5期81-83,共3页

简要介绍了OAI-PMH协议的技术特色、优势和弱点,重点总结了OAI协议国内外应用的最新热点和协议的发展动向,探讨了该协议的发展趋势,提出了OAI协议在推广应用和提高收割元数据质量中必须着力研究的问题。

关键词 OAI-PMH OAI协议 元数据收割 元数据互操作 数字图书馆

下载PDF 职称材料

大型文献数字化项目的信息资源整合研究 被引量：12

15

作者 宋琳琳 李海涛 《图书情报知识》 CSSCI 北大核心 2014年第4期94-105,共12页

调查发现知名的大型文献数字化项目信息资源整合开展范围有限,实现方式单一。为了更好地满足用户的信息需求,文章提出根据整合范围采取差异性整合方式与技术。以原始文献的元数据为基础,实现机构内部的资源整合;以项目协作、检索协议和... 调查发现知名的大型文献数字化项目信息资源整合开展范围有限,实现方式单一。为了更好地满足用户的信息需求,文章提出根据整合范围采取差异性整合方式与技术。以原始文献的元数据为基础,实现机构内部的资源整合;以项目协作、检索协议和元数据互操作实现机构间的资源整合;以数据复用、页面解析和关联数据实现其与外部资源的整合。研究发现,要真正深化信息资源聚合的层次,必须从整合对象即数字资源的加工和组织着手,细化其描述粒度,揭示更为丰富的属性关系,以此为基础构建项目资源的数据模型,才能实现数字资源的深度集合。 展开更多

关键词 信息资源整合 元数据互操作 关联数据 大型文献数字化项目 深度聚合 数据复用

下载PDF 职称材料

互操作——数字图书馆元数据方案的关键 被引量：9

16

作者 罗昊 《情报杂志》 CSSCI 北大核心 2003年第12期32-33,36,共3页

分析了元数据互操作产生的原因 ,指出互操作是数字图书馆元数据方案的关键 ,并从技术和制度两个角度分析了其解决的途径 。

关键词 数字图书馆 元数据互操作 0AI MR 元数据映射 RDF 标准化建设

下载PDF 职称材料

元数据互操作研究 被引量：10

17

作者 萨蕾 《情报科学》 CSSCI 北大核心 2014年第1期36-40,共5页

元数据互操作是实现各种类型资源统一检索的有效途径,本文从元数据自身特点及图书馆元数据使用现状两方面出发,论证了在数字环境下进行元数据互操作的必要性,基于CNMARC、MARC21、DC元数据的特点分析了在他们之间进行映射存在的问题,进... 元数据互操作是实现各种类型资源统一检索的有效途径,本文从元数据自身特点及图书馆元数据使用现状两方面出发,论证了在数字环境下进行元数据互操作的必要性,基于CNMARC、MARC21、DC元数据的特点分析了在他们之间进行映射存在的问题,进而提出实现元数据互操作的几个途径。 展开更多

关键词 元数据互操作 元数据映射 元数据整合

原文传递

高校教学参考信息管理与服务系统的研究与设计 被引量：10

18

作者 任磊 张育超 葛家翔 《现代图书情报技术》 CSSCI 北大核心 2007年第5期73-76,共4页

阐述"高校教学参考信息管理与服务系统"项目建设的目标和主要内容,详细分析系统设计的总体结构。研究OAI元数据收割协议(OAI-PMH),确定系统采用分布式数据收集,本地或集中两种服务模式;并给出教学参考信息系统中关键部分元数... 阐述"高校教学参考信息管理与服务系统"项目建设的目标和主要内容,详细分析系统设计的总体结构。研究OAI元数据收割协议(OAI-PMH),确定系统采用分布式数据收集,本地或集中两种服务模式;并给出教学参考信息系统中关键部分元数据收割模块的具体解决方案。 展开更多

关键词 教学参考信息 OAI 元数据收割 元数据互操作

下载PDF 职称材料

科学数据中心间互操作模式研究 被引量：8

19

作者 卢逸航 李国庆 陈祖刚 《数据与计算发展前沿》 CSCD 2022年第1期69-83,共15页

【目的】为了满足学科交叉融合对科学数据互操作的需求,解决科学数据中心资源重复存储问题,促进跨学科数据资源的有效利用。【方法】本文调研了现有的科学数据互操作技术与模式、国内外科学数据中心间互操作的现状,分析了各种互操作模... 【目的】为了满足学科交叉融合对科学数据互操作的需求,解决科学数据中心资源重复存储问题,促进跨学科数据资源的有效利用。【方法】本文调研了现有的科学数据互操作技术与模式、国内外科学数据中心间互操作的现状,分析了各种互操作模式与技术适用的条件以及我国科学数据中心的特点。【结果】最终,提出了两大类共7种科学数据中心间互操作的模式,即基于元数据收割的转接板模式、基于元数据框架的元数据信息交换站模式、基于多领域本体映射的关联数据模式、元数据映射模式、本体模式、现有系统再整合模式和统一信息化系统模式,同时提供了我国科学数据中心互操作模式的实施建议。【结论】本研究提出的科学数据中心互操作模式具有可落地性和可实施性,能大大促进交叉学科科学数据资源的共享与利用,具有非常重要的推广意义和价值。 展开更多

关键词 科学数据互操作 科学数据中心 互操作模式 元数据互操作 映射 受控词表

下载PDF 职称材料

XML Schema在科学数据库元数据互操作中的应用 被引量：5

20

作者 刘飞 黎建辉 阎保平 《计算机应用研究》 CSCD 北大核心 2005年第5期199-201,共3页

XMLSchema是XML的Schema语言,用来描述XML文档的合法结构、内容和约束。以科学数据库元数据标准建设为背景,介绍了XMLSchema及其在科学数据库元数据互操作中的应用情况,并展望了科学数据库元数据互操作研究的发展方向。

关键词 元数据 XML XML SCHEMA 元数据互操作

下载PDF 职称材料