期刊文献+
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
共找到79篇文章
< 1 2 … 4 >
每页显示 20 50 100
已选择0条
导出题录 引用分析
参考文献
引证文献
 统计分析
检索结果
已选文献
显示方式：
区块链系统中的分布式数据管理技术--挑战与展望 被引量：89
1
作者 于戈 聂铁铮 +3 位作者 李晓华 张岩峰 申德荣 鲍玉斌 《计算机学报》 EI CSCD 北大核心 2021年第1期28-54,共27页
区块链是在数字加密货币的应用基础之上发展起来的一种分布式数据库技术.区块链系统具有去中心化、不可篡改、分布共识、可溯源和最终一致性等特点,这使其可以用于解决不可信环境下数据管理问题.区块链独特的数据管理功能已经成为各领... 区块链是在数字加密货币的应用基础之上发展起来的一种分布式数据库技术.区块链系统具有去中心化、不可篡改、分布共识、可溯源和最终一致性等特点,这使其可以用于解决不可信环境下数据管理问题.区块链独特的数据管理功能已经成为各领域应用中发挥区块链价值的关键.本文基于对比特币、以太坊、超级账本等代表性区块链系统的研究分析,阐述区块链系统中分布式数据管理技术.首先,深入讨论区块链系统与传统分布式数据库系统之间的异同点,从分布式部署模式、节点角色、链拓扑结构等多个方面给出区块链的分类.然后,详细分析各类区块链系统所使用的数据存储结构、分布式查询处理与优化技术及其优缺点.最后,总结区块链系统的分布式数据管理技术在各专门领域应用中所面临的挑战和发展趋势. 展开更多
关键词 区块链 分布式数据管理 数据存储 查询处理
下载PDF
分布式VOD系统的视频数据存储 被引量：23
2
作者 彭宇行 陈福接 《计算机学报》 EI CSCD 北大核心 2000年第6期671-671,F003,共2页
以降低视频服务损失率为目标研究分布式 VOD系统视频文件的存储策略 。
关键词 分布式VOD系统 视频数据存储 多媒体
下载PDF
考虑EV换电站调度和区块链数据存储的电网分布式优化 被引量：27
3
作者 王冠男 杨镜非 +3 位作者 王硕 端凌立 张嘉 武雅桐 《电力系统自动化》 EI CSCD 北大核心 2019年第8期110-127,182,共19页
随着电动汽车规模的迅速增长和主动配电网的发展,对包含电动汽车的电力系统进行调度优化变得越来越重要。文中提出一种包含电动汽车换电站优化调度的三层分布式算法,相比于传统的中心化算法,该算法对于趋于分散布局的现代电力系统更加... 随着电动汽车规模的迅速增长和主动配电网的发展,对包含电动汽车的电力系统进行调度优化变得越来越重要。文中提出一种包含电动汽车换电站优化调度的三层分布式算法,相比于传统的中心化算法,该算法对于趋于分散布局的现代电力系统更加适用。在此基础上,构建了针对该模型的区块链数据存储与共识体系,保证所有历史数据不被篡改和可追溯。此外,提出了适用于该算法的电动汽车换电站车辆入网(V2G)的电价引导模型,能够准确地引导电动汽车换电站的V2G行为。针对优化运行中可能存在的线路阻塞问题,采用动态约束集法对优化结果进行了校正。最后,通过对15节点测试系统进行仿真,验证了该模型对于分布式电网布局的适用性。 展开更多
关键词 分布式优化 电动汽车换电站 区块链数据存储 电价引导 动态约束集 车辆入网
下载PDF
基于云计算的数据存储技术研究 被引量：20
4
作者 孙知信 黄涵霞 《南京邮电大学学报（自然科学版）》 北大核心 2014年第4期13-19,共7页
以云计算环境下大数据存储技术为研究对象,首先介绍了云计算环境下主要的两种典型的分布式存储系统,即Google的GFS和Hadoop的HDFS;对其中的数据存储技术进行了专门分析,从可扩展性和延迟性(如何支持海量小文件的存储)、容错性(在数据丢... 以云计算环境下大数据存储技术为研究对象,首先介绍了云计算环境下主要的两种典型的分布式存储系统,即Google的GFS和Hadoop的HDFS;对其中的数据存储技术进行了专门分析,从可扩展性和延迟性(如何支持海量小文件的存储)、容错性(在数据丢失时进行数据恢复)和海量数据存储的实时性这3个方面对现有技术进行了评价。在此基础上,提出了分布式文件系统的系统架构。最后给出了研究展望。 展开更多
关键词 云计算 海量数据 分布式文件系统 数据存储
下载PDF
基于B/S模式和分布式数据库技术的物流信息系统 被引量：9
5
作者 康瑞华 尹帆 薛胜军 《武汉理工大学学报（交通科学与工程版）》 北大核心 2003年第6期860-863,共4页
介绍了分布式数据库、物流系统、B/ S模式的概念 ,分布式数据库的设计步骤和原则 ,描述了分布式数据库在物流系统的体系结构中的体现 .最后以 ASP.NET和 SQL Server2 0 0 0为开发环境 ,列举了 B/ S模式下的分布式数据库应用程序开发和... 介绍了分布式数据库、物流系统、B/ S模式的概念 ,分布式数据库的设计步骤和原则 ,描述了分布式数据库在物流系统的体系结构中的体现 .最后以 ASP.NET和 SQL Server2 0 0 0为开发环境 ,列举了 B/ S模式下的分布式数据库应用程序开发和应用程序中客户端与服务器端的数据库的连接和访问方法 . 展开更多
关键词 B/S 分布式数据库 数据分片 数据存取 ASP.NET DTC 数据同步 分布式查询
下载PDF
基于Scrapy的分布式爬虫系统的设计与实现 被引量：17
6
作者 李代祎 谢丽艳 +1 位作者 钱慎一 吴怀广 《湖北民族学院学报（自然科学版）》 CAS 2017年第3期317-322,共6页
随着互联网的快速发展,其信息量和相关服务也随之快速增长.如何从海量的信息中快速、准确地抓取所需要的信息变得越来越重要,因此负责互联网信息收集工作的网络爬虫将面临着巨大的机遇和挑战.目前国内外一些大型搜索引擎只给用户提供不... 随着互联网的快速发展,其信息量和相关服务也随之快速增长.如何从海量的信息中快速、准确地抓取所需要的信息变得越来越重要,因此负责互联网信息收集工作的网络爬虫将面临着巨大的机遇和挑战.目前国内外一些大型搜索引擎只给用户提供不可制定的搜索服务,而单机的网络爬虫又难当重任,因此可定制性强、信息采集速度快和规模大的分布式网络爬虫便应运而生.通过对原有Scrapy框架的学习和研究,将Scrapy和Redis结合改进原有的爬虫框架,设计并实现了一个基于Scrapy框架下的分布式网络爬虫系统,然后将从安居客、58同城、搜房等网站抓取的二手房信息存入MongoDB中,便于对数据进行进一步的处理和分析.结果表明基于Scrapy框架下的分布式网络爬虫系统同单机网络爬虫系统相比效率更高且更稳定. 展开更多
关键词 Scrapy 分布式 Scrapy-Reids 网络爬虫 Mongo DB 数据存储
下载PDF
基于大数据技术的水情云数据中心设计与研究 被引量：14
7
作者 邱超 许金涛 元晓华 《浙江大学学报（理学版）》 CAS CSCD 北大核心 2019年第1期92-100,共9页
随着浙江省水情信息化的不断推进,水情数据种类、结构和数据量不断丰富和发展,传统的单结构化数据存储管理方式已不适合当前信息化社会的应用和服务需求。本研究采用先进的分布式数据采集、智能数据过滤、大数据存储等技术,构建基于大... 随着浙江省水情信息化的不断推进,水情数据种类、结构和数据量不断丰富和发展,传统的单结构化数据存储管理方式已不适合当前信息化社会的应用和服务需求。本研究采用先进的分布式数据采集、智能数据过滤、大数据存储等技术,构建基于大数据云平台技术的浙江省水情云数据中心,对各类分散的多源异构数据进行全面整合。实现了水情大数据的质量管控、深度挖掘和高效共享,丰富了水情信息的资源样本,拓展了服务深度和广度,提升了数据挖掘的服务效率和能力,为水利业务和事务的现代化发展奠定了坚实的基础。 展开更多
关键词 分布式数据采集 智能数据过滤 大数据存储
下载PDF
一种基于信息分散算法的分布式数据存储方案 被引量：13
8
作者 屈志毅 苏文洲 赵玲 《计算机应用》 CSCD 北大核心 2006年第5期1102-1105,共4页
针对分布式数据存储方案中,基于复制的方法和基于秘密共享的方法存在存储开销过大的问题,提出了分布式系统中一种基于IDA码的客户服务器工作模式的数据存储方案。该方案在数据写入过程中通过构造编码后数据分块的Hash值级连,即所谓的数... 针对分布式数据存储方案中,基于复制的方法和基于秘密共享的方法存在存储开销过大的问题,提出了分布式系统中一种基于IDA码的客户服务器工作模式的数据存储方案。该方案在数据写入过程中通过构造编码后数据分块的Hash值级连,即所谓的数字指纹,可实现Byzantine环境数据的完整性保护。 展开更多
关键词 分布式数据存储 信息分割算法 Hash值级连
下载PDF
一种分布式大数据管理系统的设计与实现 被引量：10
9
作者 陈海燕 《计算机科学》 CSCD 北大核心 2014年第B11期393-395,共3页
随着云计算、物联网、移动互联网等技术的飞速发展,海量数据在这些崭新的领域迅猛地生长着,大数据作为一项颠覆性技术,为处理海量数据提供了无限可能。而传统的关系型数据库的不再适用,导致了分布式数据库NoSQL的应运而生。针对大数据... 随着云计算、物联网、移动互联网等技术的飞速发展,海量数据在这些崭新的领域迅猛地生长着,大数据作为一项颠覆性技术,为处理海量数据提供了无限可能。而传统的关系型数据库的不再适用,导致了分布式数据库NoSQL的应运而生。针对大数据领域面临的种种现实难题,设计并实现了一种基于Hadoop和NoSQL的新型分布式大数据管理系统(DBDMS),其提供大数据的实时采集、检索以及永久存储的功能。实验表明,DBDMS可以显著提高大数据处理能力,适用于海量日志备份和检索、海量网络报文抓取和分析等领域。 展开更多
关键词 大数据 分布式 数据存储 数据检索 HADOOP NOSQL
下载PDF
基于.NET Core架构的PLC数据采集和监控系统 被引量：10
10
作者 禹鑫燚 唐权瑞 +3 位作者 殷慧武 施甜峰 王煦焱 欧林林 《高技术通讯》 EI CAS 2021年第1期93-101,共9页
为了解决工厂设备品牌多样化、通讯协议各不相同、采集难度大等问题,研究了基于.NET Core架构的远程数据采集和监控系统。该系统借鉴了异构的数据存储方式、分布式网络模型和数据分析模型,使用.NET Core框架开发完成。首先将嵌入式工控... 为了解决工厂设备品牌多样化、通讯协议各不相同、采集难度大等问题,研究了基于.NET Core架构的远程数据采集和监控系统。该系统借鉴了异构的数据存储方式、分布式网络模型和数据分析模型,使用.NET Core框架开发完成。首先将嵌入式工控机和PLC设备通过工业以太网连到同一局域网并进行通信,对可编程逻辑控制器(PLC)设备的运行状态进行实时数据采集,并上传到云端服务器,Web端可以远程查看PLC设备的实时数据,以及对PLC设备的工作参数进行数据分析,当分析结果显示设备出现故障时,云端服务器通过短信通知现场工程师PLC设备出现故障,当现场工程师无法调试设备时,远程工程师还可以通过Open VPN对设备进行远程调试。最后通过实验验证了系统的可行性。 展开更多
关键词 可编程逻辑控制器(PLC) .NET Core 监控 数据采集 分布式 异构数据存储
下载PDF
基于K-距离拓扑的分布式数据存储方法 被引量：8
11
作者 郎登何 《沈阳工业大学学报》 EI CAS 北大核心 2021年第1期67-71,共5页
针对分布式数据存储算法通常需要较长的等待时间、且对海量数据加密时严重浪费计算资源和时间的问题,提出了一种基于K-距离拓扑的分布式数据存储方法.通过寻找K-距离拓扑子图来实现数据的安全放置,优先选择存取速度更快的节点和自身保... 针对分布式数据存储算法通常需要较长的等待时间、且对海量数据加密时严重浪费计算资源和时间的问题,提出了一种基于K-距离拓扑的分布式数据存储方法.通过寻找K-距离拓扑子图来实现数据的安全放置,优先选择存取速度更快的节点和自身保护能力强的节点实现总体性能的提升.在Internet 2拓扑图与随机拓扑图下的仿真测试结果表明,所提出的方法能在满足安全距离约束的条件下选择到最优的数据存储节点,从而减小数据存取时间. 展开更多
关键词 分布式 数据存储 数据安全 高效 Internet 2拓扑 随机拓扑 K-距离 节点
下载PDF
分布式异构系统中数据融合与存储的实现方法 被引量：5
12
作者 段长明 刘载文 《测控技术》 CSCD 2005年第2期5-9,共5页
介绍了在 Visual C++环境下,运用多线程技术实现分布式异构系统中数据融合与存储的方法。包括使用 RS-485 总线串行通信方式和公共电话网通信方式来实现监测数据的融合;以内存实时数据库和 SQLServer2000 关系数据库作为存储介质,使用 A... 介绍了在 Visual C++环境下,运用多线程技术实现分布式异构系统中数据融合与存储的方法。包括使用 RS-485 总线串行通信方式和公共电话网通信方式来实现监测数据的融合;以内存实时数据库和 SQLServer2000 关系数据库作为存储介质,使用 ADO 技术实现对数据的存储管理。实践证明该方法弥补了组态软件的不足,设计灵活,系统运行稳定、可靠。 展开更多
关键词 分布式异构系统 VISUAL C++ 多线程 串行通信 数据存储与管理
下载PDF
基于大数据技术的非关系型数据库分布式存储方法研究
13
作者 韩烨 《信息与电脑》 2024年第4期166-168,共3页
在当今信息时代,数据的复杂性不断增加,传统的关系型数据库在大规模数据存储和处理方面面临着挑战。非关系型数据库(Not Only SQL,NoSQL)作为一种新的存储和处理数据的方法,受到了广泛关注,并在分布式存储领域取得了显著的成就。文章重... 在当今信息时代,数据的复杂性不断增加,传统的关系型数据库在大规模数据存储和处理方面面临着挑战。非关系型数据库(Not Only SQL,NoSQL)作为一种新的存储和处理数据的方法,受到了广泛关注,并在分布式存储领域取得了显著的成就。文章重点探讨基于大数据技术的非关系型数据库分布式存储方法,并通过实验进行评估,发现其在可扩展性和安全性方面具有优势,可以为相关研究提供参考。 展开更多
关键词 大数据技术 非关系型数据库 分布式存储 数据存储方法 数据处理
下载PDF
云计算技术在图书馆中的应用研究 被引量：6
14
作者 黄胜国 《现代情报》 CSSCI 2012年第2期107-110,共4页
云计算是一种新型的基于互联网的商业计算模型,它是分布式处理、并行处理和网格计算的发展,具有安全可靠、海量信息存储、快速方便等特点。云计算以其独特的优势被各个国际著名厂商重视,并在各领域都起到一定的影响,同样它也将对图书馆... 云计算是一种新型的基于互联网的商业计算模型,它是分布式处理、并行处理和网格计算的发展,具有安全可靠、海量信息存储、快速方便等特点。云计算以其独特的优势被各个国际著名厂商重视,并在各领域都起到一定的影响,同样它也将对图书馆的发展产生深远影响。现今,图书馆应该思考的是如何运用云计算来调整服务模式,以便更加有效地适应读者与图书馆之间的互动,并解决好云计算运用过程中出现的数据安全、标准和版权等方面问题。 展开更多
关键词 云计算 分布式处理 并行处理 网格计算 海量信息存储
下载PDF
基于数据库标签感知分片的制造过程测量数据分布式存储
15
作者 王佺珅 张爱梅 《机电工程》 北大核心 2024年第1期149-157,共9页
针对零件在线测量过程中多种测量仪器无法协同存储、仪器内数据查询聚合困难等问题,对多工序测量仪器集群的数据分布式存储和共享方法进行了研究。首先,在多个嵌入式测量仪器中,移植非关系型数据库集群对零件数据进行了分布式存储,简化... 针对零件在线测量过程中多种测量仪器无法协同存储、仪器内数据查询聚合困难等问题,对多工序测量仪器集群的数据分布式存储和共享方法进行了研究。首先,在多个嵌入式测量仪器中,移植非关系型数据库集群对零件数据进行了分布式存储,简化了零件数据存储模型;然后,引入标签感知分片(tag-aware sharding),实现了零件不同工序测量数据的分类存储目的;最后,使用多个搭载嵌入式Linux系统的树莓派3B+开发板作为测量仪器系统平台,搭建了基于MongoDB数据库的在线测量分布式存储集群,通过大量测试数据验证了该集群在多节点存储时数据分布均匀、性能稳定;将存储集群与企业制造执行系统(MES)进行了对接,其可以实时监控分析零件测量数据,快速汇总所有测量节点内的工序数据并生成报表。研究结果表明:当集群中数据量达到7.2×10^(5)条时,单节点查询响应速度稳定在125 ms~208 ms范围内,相比哈希分片,其最高提升了88.15%;多节点协同查询响应速度为1308 ms,相比“升序键+搜索键”方案,其提升了了61.64%;多个测量节点内,1×10^(5)个零件数据聚合统计仅需5 s左右。该存储集群可以监控零件生产情况,在减少零件制造误差、提高制造效率和质量方面具有重要作用。 展开更多
关键词 零件在线测量 分布式数据存储 标签感知分片 MONGODB 嵌入式测量仪器 制造执行系统
下载PDF
使用中间件TongLINK/Q实现应用级数据复制 被引量：4
16
作者 傅新奇 《电力系统自动化》 EI CSCD 北大核心 2003年第16期81-83,共3页
规划电力营销管理信息系统的总体结构 ,必然涉及数据是集中还是分布存放的问题 ,采用何种方案需要对主机、系统软件、通道等各项费用进行综合考虑。在选定数据分布存放的方案后 ,必须解决上下级系统间的数据复制问题。不同于复制数据本... 规划电力营销管理信息系统的总体结构 ,必然涉及数据是集中还是分布存放的问题 ,采用何种方案需要对主机、系统软件、通道等各项费用进行综合考虑。在选定数据分布存放的方案后 ,必须解决上下级系统间的数据复制问题。不同于复制数据本身这种传统的复制方式 ,文中使用中间件和交易复制技术实现了应用级的数据复制 。 展开更多
关键词 管理信息系统 分布式系统 数据存放 交易复制 中间件
下载PDF
一种基于网络磁盘阵列的高性能海量存储系统 被引量：6
17
作者 李洁琼 冯丹 《小型微型计算机系统》 CSCD 北大核心 2006年第12期2326-2330,共5页
网络磁盘阵列将传统的以服务器为中心的存储转发改变为以数据为中心的直接传输,从而消除了传统模式下的服务器I/O瓶颈.本文基于网络磁盘阵列构建出一种高性能的海量存储系统,其文件集中管理和数据分布存储的体系结构不仅加快了数据传输... 网络磁盘阵列将传统的以服务器为中心的存储转发改变为以数据为中心的直接传输,从而消除了传统模式下的服务器I/O瓶颈.本文基于网络磁盘阵列构建出一种高性能的海量存储系统,其文件集中管理和数据分布存储的体系结构不仅加快了数据传输速度、降低了存储管理开销,同时也实现了命令与数据分流、扩容与增速同步的目标,从而大大提高的整个存储系统的性能. 展开更多
关键词 网络磁盘阵列 海量存储 文件集中管理 数据分布存储
下载PDF
基于密度划分的数字电网分布式数据存储研究 被引量：4
18
作者 颜清 曹璐 +2 位作者 李金讯 张蓓蕾 王鹏 《自动化与仪器仪表》 2022年第7期185-188,共4页
现有的数据存储方法在压缩数据时无法获取准确的密度峰值,导致数据负载均衡性较差,为提高数据分段均衡性,基于密度划分算法设计数字电网分布式数据存储方法。建立节点存储数据索引指针,通过节点递增顺序确定数据元区间;计算数据索引区... 现有的数据存储方法在压缩数据时无法获取准确的密度峰值,导致数据负载均衡性较差,为提高数据分段均衡性,基于密度划分算法设计数字电网分布式数据存储方法。建立节点存储数据索引指针,通过节点递增顺序确定数据元区间;计算数据索引区域面积,计算面积与向量乘积;基于密度划分算法获取数据压缩密度峰值,以目标函数计算数据流目标长度;建立数字电网分布式数据存储模型,计算分布式数据库不同层级误差。在对比实验中,测试不同数据存储方法下分段数据负载均衡性。实验结果表明,将数据分为3-6段分别存储,只有密度划分算法在分段存储过程中,各数据节点数据量分割最均匀,数据负载均衡性最好。 展开更多
关键词 密度划分 数字电网 分布式数据 数据存储 密度峰值
原文传递
工业园区固废数据管理与应用平台的设计与实现 被引量：1
19
作者 陈盛龙 夏诏杰 +5 位作者 石靖靖 李强 李晓霞 龚伟 甘万贵 张丽 《工业控制计算机》 2023年第12期124-126,129,共4页
针对工业园区渣、尘、泥等典型固废资源化和污染溯源信息分析管理的需求,建立了工业园区固废数据管理与应用平台(ISWBDS),该平台基于MVVM模式的Vue.js框架开发,采用Python开发的RESTful接口提供数据服务,实现了园区、企业和生产线三个... 针对工业园区渣、尘、泥等典型固废资源化和污染溯源信息分析管理的需求,建立了工业园区固废数据管理与应用平台(ISWBDS),该平台基于MVVM模式的Vue.js框架开发,采用Python开发的RESTful接口提供数据服务,实现了园区、企业和生产线三个层级的信息管理;ISWBDS平台针对固废数据多源、异构的特点,建立了固废数据分布式采集系统,采集的数据包括不同公司的报表类数据、DCS现场数据和视频数据等;为了满足多源异构数据的存储,运用实时数据库Redis、关系型数据库MySQL和分布式文件存储等多种数据存储技术,建立了固废数据混合存储系统。ISWBDS平台实现了包括园区/企业/生产线层级资源环境效率分析和生产线运行状态评估等管理功能,为园区/企业提供了方便的管理工具。 展开更多
关键词 数据管理 固体废物 MVVM 分布式数据采集 数据混合存储
下载PDF
基于分布式文件电力异构数据存储综述 被引量：5
20
作者 张琦 陈艳 +1 位作者 张春平 刘铭 《计算机系统应用》 2017年第2期30-36,共7页
随着国网公司信息化建设的不断推进,在整个电网的运检和管理的过程中都会产生海量的数据,这些数据中包含各场景产生的视频、图片、传感器数据和一些企业档案信息等非结构(异构)化数据.在面对如此大规模非结构化的数据存储要求时,传统关... 随着国网公司信息化建设的不断推进,在整个电网的运检和管理的过程中都会产生海量的数据,这些数据中包含各场景产生的视频、图片、传感器数据和一些企业档案信息等非结构(异构)化数据.在面对如此大规模非结构化的数据存储要求时,传统关系型数据库已经表现的力不从心了.如何对此类数据进行高效地、廉价地和安全可靠地存储,并且可以快速检索与分析,是当下研究的重要热点课题之一.本文首先分析了电网大数据的产生及特征,然后综述了工业界大数据分布式文件存储技术,最后分析适合国网非结构化数据的分布式文件存储策略. 展开更多
关键词 大数据 非结构化 分布式文件 数据存储
下载PDF
已选择0条
导出题录 引用分析
参考文献
引证文献
 统计分析
检索结果
已选文献
上一页 1 2 … 4 下一页 到第 页
使用帮助 返回顶部