期刊文献+
共找到732篇文章
< 1 2 37 >
每页显示 20 50 100
大数据的一个重要方面:数据可用性 被引量:259
1
作者 李建中 刘显敏 《计算机研究与发展》 EI CSCD 北大核心 2013年第6期1147-1162,共16页
随着信息技术的发展,特别是物理信息系统、互联网、云计算和社交网络等技术的突飞猛进,大数据普遍存在,正在成为信息社会的重要财富,同时也带来了巨大的挑战.数据可用性问题就是大数据的重要挑战之一.随着数据的爆炸性增长,劣质数据也... 随着信息技术的发展,特别是物理信息系统、互联网、云计算和社交网络等技术的突飞猛进,大数据普遍存在,正在成为信息社会的重要财富,同时也带来了巨大的挑战.数据可用性问题就是大数据的重要挑战之一.随着数据的爆炸性增长,劣质数据也随之而来,数据可用性受到严重影响,对信息社会形成严重威胁,引起了学术界和工业界的共同关注.近年来,学术界和工业界开始研究数据可用性问题,取得了一些的研究成果,但是针对大数据可用性问题的研究工作还很少.介绍了大数据可用性的基本概念,讨论大数据可用性的挑战,探讨大数据可用性方面的研究问题,并综述数据可用性方面的研究成果. 展开更多
关键词 大数据 数据可用性 数据一致性 数据完整性 数据精确性 数据时效性 实体同一性
下载PDF
云平台下输变电设备状态监测大数据存储优化与并行处理 被引量:95
2
作者 宋亚奇 周国亮 +3 位作者 朱永利 李莉 王刘旺 王德文 《中国电机工程学报》 EI CSCD 北大核心 2015年第2期255-267,共13页
结合大数据技术提升输变电设备状态评价的广度和深度,并解决实际应用问题成为目前电力行业新的挑战。针对输变电设备状态监测大数据可靠存储和快速访问两方面大数据处理核心问题,基于开源的Hadoop云计算实验平台进行了数据分布策略、数... 结合大数据技术提升输变电设备状态评价的广度和深度,并解决实际应用问题成为目前电力行业新的挑战。针对输变电设备状态监测大数据可靠存储和快速访问两方面大数据处理核心问题,基于开源的Hadoop云计算实验平台进行了数据分布策略、数据块尺寸调优、集群网络拓扑规划三方面的存储优化研究和大数据并行分析的研究。提出计及数据相关性的多副本一致哈希数据存储算法,能将具有相关性的数据在集群中聚集,提升数据处理执行效率。基于数据相关性多副本一致哈希数据分布,应用Map Reduce并行编程模型设计实现了多数据源并行连接查询算法和多通道数据融合并行特征提取算法。将两种算法在实验室搭建的集群上测试运行,结果表明,多数据源并行连接查询的执行时间仅为标准Hadoop方案的32%,多通道数据融合并行特征提取算法执行时间仅为标准Hadoop方案的35%。 展开更多
关键词 大数据 输变电设备 状态监测 一致哈希 云计算
下载PDF
工作流数据的一致性保护框架 被引量:16
3
作者 罗海滨 范玉顺 吴澄 《计算机集成制造系统-CIMS》 EI CSCD 北大核心 2002年第4期320-325,共6页
目前的工作流系统普遍缺乏保证工作流事务特性的措施 ,这是影响工作流系统进一步普及与实用化的一个重要原因。本文提出了一种以工作流数据为核心的数据一致性保护框架 ,包括对工作流控制数据的失败处理模式、对工作流相关数据的多版本... 目前的工作流系统普遍缺乏保证工作流事务特性的措施 ,这是影响工作流系统进一步普及与实用化的一个重要原因。本文提出了一种以工作流数据为核心的数据一致性保护框架 ,包括对工作流控制数据的失败处理模式、对工作流相关数据的多版本管理机制和对工作流应用数据的加锁协议等 ,从而全面保证各类工作流数据的一致性 ,使工作流系统具备较为实用的事务处理能力。 展开更多
关键词 工作流数据 一致性保护 事务处理 数据库系统 数据一致性
下载PDF
分布式数据库系统中数据一致性维护方法研究 被引量:32
4
作者 陈珉 喻丹丹 涂国庆 《国防科技大学学报》 EI CAS CSCD 北大核心 2002年第3期76-80,共5页
分布式数据库系统是数据库领域中的一个主要研究方向 ,数据一致性维护是分布式数据库系统中的一个非常关键的技术问题。在深入分析和比较各种维护数据一致性方法的基础上 ,提出了一种较为有效的维护数据一致性的方法 ,详细论述了该方法... 分布式数据库系统是数据库领域中的一个主要研究方向 ,数据一致性维护是分布式数据库系统中的一个非常关键的技术问题。在深入分析和比较各种维护数据一致性方法的基础上 ,提出了一种较为有效的维护数据一致性的方法 ,详细论述了该方法如何解决并发执行引起的冲突问题 。 展开更多
关键词 维护方法 分布式数据库 数据一致性 消息队列 数据库管理 数据副本
下载PDF
分布式数据库系统中数据一致性维护方法 被引量:32
5
作者 潘群华 吴秋云 陈宏盛 《计算机工程》 CAS CSCD 北大核心 2002年第9期255-257,共3页
讨论了在分布式数据库系统中,对于各个数据库副本维护数据一致性的问题,介绍了Oracle8i数据库系统中数据复制的基本概念、基本原理、复制配置以及数据复制的基本配置和实现方法。
关键词 分布式数据库系统 数据一致性 纵方法 数据复制 复制环境 计算机
下载PDF
基于关联数据的一致性和时效性清洗方法 被引量:42
6
作者 杜岳峰 申德荣 +2 位作者 聂铁铮 寇月 于戈 《计算机学报》 EI CSCD 北大核心 2017年第1期92-106,共15页
数据一致性和数据时效性是大数据质量管理所关注的两个重要内容.条件函数依赖(CFDs)和时效约束(CCs)分别是用于分析数据一致性和数据时效性的有效技术手段.现实生活中的数据会夹杂一些关于一致性和时效性的潜在错误,这些错误又无法为CFD... 数据一致性和数据时效性是大数据质量管理所关注的两个重要内容.条件函数依赖(CFDs)和时效约束(CCs)分别是用于分析数据一致性和数据时效性的有效技术手段.现实生活中的数据会夹杂一些关于一致性和时效性的潜在错误,这些错误又无法为CFDs和CCs检测和修复,最终影响数据的整体质量.值得一提的是,这些数据通常是相互关联的,这种关联关系可以用来发现数据中的潜在错误.文中使用了一种条件合并的函数依赖(CCFDs)将关联数据放在一起进行处理.基于此,该文提出了一种基于关联数据的一致性和时效性清洗方法.在数据清洗过程中,数据的检测和修复是两个相互影响的过程.所以,该文设计了一种新的自动清洗框架,迭代地进行数据检测和数据修复.其次,该文对关联数据的一致性和时效性清洗的相关问题进行了分析,并且证明了关于CCFDs和CCs的最小代价修复问题是一个Σ~p_2完全(NP^(NP))问题.进而,该文采用一种启发式的修复方法对错误进行修复.为了提高修复的准确性,该文还提出了一种修复序列图的概念.最后,通过在两组真实数据上进行实验,验证了方法的实用性和高效性. 展开更多
关键词 数据一致性 数据时效性 大数据质量 关联数据 数据清洗
下载PDF
气象观测资料的四方位空间一致性检验 被引量:41
7
作者 何志军 封秀燕 +1 位作者 何利德 王荷平 《气象》 CSCD 北大核心 2010年第5期118-122,共5页
将一定范围内的邻近气象站按四方位进行分组,然后将被检站的气象资料与各组分别进行比较分析,并根据大气规律进行判断。在冷空气或雷暴等天气系统影响下,当气象资料的水平分布出现明显的不连续现象时,使用该方法可以降低误检率。利用该... 将一定范围内的邻近气象站按四方位进行分组,然后将被检站的气象资料与各组分别进行比较分析,并根据大气规律进行判断。在冷空气或雷暴等天气系统影响下,当气象资料的水平分布出现明显的不连续现象时,使用该方法可以降低误检率。利用该方法,对浙江省76个自动气象站的气温和降水资料进行实时质量控制,经过3个月的试验,效果明显。 展开更多
关键词 自动站 资料 空间一致性分析 质量控制
下载PDF
数据复制与一致性 被引量:25
8
作者 林怀忠 陈纯 吴震华 《计算机工程与应用》 CSCD 北大核心 2001年第20期107-108,171,共3页
数据复制是分布式数据库和数据仓库中常用的方法,以提高数据的可用性和系统的性能。文中介绍了在数据库系统中广泛使用的数据复制方法,分析了其优缺点和适用的范围,重点讨论了异步复制方法中的一致性恢复、一致性偏离的度量和数据存取... 数据复制是分布式数据库和数据仓库中常用的方法,以提高数据的可用性和系统的性能。文中介绍了在数据库系统中广泛使用的数据复制方法,分析了其优缺点和适用的范围,重点讨论了异步复制方法中的一致性恢复、一致性偏离的度量和数据存取的限制等问题,给出了数据复制策略的评价目标。 展开更多
关键词 分布式数据库 数据复制 一致性 数据仓库
下载PDF
基于事务的工作流异常处理模型及方法 被引量:11
9
作者 朱锦泉 苑森淼 《吉林大学学报(工学版)》 EI CAS CSCD 北大核心 2003年第3期46-50,共5页
针对工作流系统中存在的异常问题,提出了一个基于事务的工作流异常处理模型,建立了异常监测、分析、处理机制,增加了触发和向后恢复的方法。以ECA规则形式建立了异常事件库,实现了对异常的监测、分析和处理,并给出了监测算法。在此基础... 针对工作流系统中存在的异常问题,提出了一个基于事务的工作流异常处理模型,建立了异常监测、分析、处理机制,增加了触发和向后恢复的方法。以ECA规则形式建立了异常事件库,实现了对异常的监测、分析和处理,并给出了监测算法。在此基础上,讨论了工作流静态和动态修改的方法和算法,保证了工作流修改后数据的一致性和正确性。 展开更多
关键词 工作流 异常处理 事务 数据一致性
下载PDF
Linux平台远程逻辑卷复制系统的设计 被引量:27
10
作者 董欢庆 李战怀 +1 位作者 林伟 王明钟 《计算机工程与应用》 CSCD 北大核心 2004年第18期109-112,共4页
提出了一种Linux平台上远程逻辑卷复制系统的设计方案,论述了它的系统结构及实现方法。该系统不依赖于特殊的存储设备或网络,在复制过程中通过保持主、从两端逻辑卷上数据块的更新顺序来保证数据一致性。系统支持同步和异步两种复制模式... 提出了一种Linux平台上远程逻辑卷复制系统的设计方案,论述了它的系统结构及实现方法。该系统不依赖于特殊的存储设备或网络,在复制过程中通过保持主、从两端逻辑卷上数据块的更新顺序来保证数据一致性。系统支持同步和异步两种复制模式,可以适合不同的应用环境,为实现通用、经济的远程数据容灾系统提供了可能。 展开更多
关键词 逻辑卷 复制 数据一致性
下载PDF
基于Oracle高级复制的分布式数据库系统应用研究 被引量:24
11
作者 葛卫民 张钢 舒炎泰 《计算机工程与应用》 CSCD 北大核心 2003年第21期186-188,191,共4页
该文以CIMS工程应用为背景,介绍了一种运用Oracle高级复制技术实现企业远程信息分布式处理的方案;详细讨论了实现中的数据一致性问题,并提出了通过设置手动复制、合理设置自动复制周期解决数据弱一致性和处理时间滞后问题的方法,以及基... 该文以CIMS工程应用为背景,介绍了一种运用Oracle高级复制技术实现企业远程信息分布式处理的方案;详细讨论了实现中的数据一致性问题,并提出了通过设置手动复制、合理设置自动复制周期解决数据弱一致性和处理时间滞后问题的方法,以及基于分组方法解决各种数据冲突的实现策略。 展开更多
关键词 分布式数据库 数据库复制 数据一致性 数据冲突 CIMS工程 ORACLE高级复制技术
下载PDF
分布式系统中异地数据库的数据一致性维护 被引量:16
12
作者 张华伟 熊璋 欧阳元新 《计算机工程与应用》 CSCD 北大核心 2004年第23期172-175,共4页
大型分布式系统通常需要在异地的数据库中存储同一数据的不同副本,不同副本之间需要维护数据的一致性。文章讨论了维护数据一致性的两种方法:消息队列法和复制控制法,并分别介绍了使用IBMMQSeries消息队列和MicrosoftSQLServer复制机制... 大型分布式系统通常需要在异地的数据库中存储同一数据的不同副本,不同副本之间需要维护数据的一致性。文章讨论了维护数据一致性的两种方法:消息队列法和复制控制法,并分别介绍了使用IBMMQSeries消息队列和MicrosoftSQLServer复制机制来维护数据一致的实现过程,对比分析了二者在实际应用中各自的特点,以及在理论上的技术差异。 展开更多
关键词 分布式系统 数据一致性 MQ Series 消息队列 SQL Server 数据复制 复制控制法
下载PDF
Web大数据环境下的不一致跨源数据发现 被引量:24
13
作者 余伟 李石君 +4 位作者 杨莎 胡亚慧 刘晶 丁永刚 王骞 《计算机研究与发展》 EI CSCD 北大核心 2015年第2期295-308,共14页
Web中不同数据源之间的数据不一致是一个普遍存在的问题,严重影响了互联网的可信度和质量.目前数据不一致的研究主要集中在传统数据库应用中,对于种类多样、结构复杂、快速变化、数量庞大的跨源Web大数据的一致性研究还很少.针对跨源We... Web中不同数据源之间的数据不一致是一个普遍存在的问题,严重影响了互联网的可信度和质量.目前数据不一致的研究主要集中在传统数据库应用中,对于种类多样、结构复杂、快速变化、数量庞大的跨源Web大数据的一致性研究还很少.针对跨源Web数据的多源异构特性和Web大数据的5V特征,将从站点结构、特征数据和知识规则3个方面建立统一数据抽取算法和Web对象数据模型;研究不同类型的Web数据不一致特征,建立不一致分类模型、一致性约束机制和不一致推理代数运算系统;从而在跨源Web数据一致性理论体系的基础上,实现通过约束规则检测、统计偏移分析的Web不一致数据自动发现方法,并结合这两种方法的特点,基于Hadoop MapReduce架构提出了基于层次概率判定的Web不一致数据的自动发现算法.该框架在Hadoop平台上对多个B2C电子商务大数据进行实验,并与传统架构和其他方法进行了比较,实验结果证明该方法具有良好的精确性和高效性. 展开更多
关键词 Web大数据 WEB数据挖掘 数据一致性 Web数据管理 数据质量评估 跨源数据分析
下载PDF
应用于食品追溯体系的区块链架构设计 被引量:25
14
作者 仵冀颖 杜聪 +1 位作者 马志远 郑刚 《计算机应用与软件》 北大核心 2019年第12期46-50,86,共6页
在互联网+、大数据等冲击下,传统的食品安全监管手段面临着产品信息来源广、产品数据可靠性差、可用数据鉴别困难等问题,急需新的信息化手段为有效监管提供技术支撑。重点研究区块链技术在构建食品安全监管追溯体系中的应用。利用区块... 在互联网+、大数据等冲击下,传统的食品安全监管手段面临着产品信息来源广、产品数据可靠性差、可用数据鉴别困难等问题,急需新的信息化手段为有效监管提供技术支撑。重点研究区块链技术在构建食品安全监管追溯体系中的应用。利用区块链网络的特点,有效整合涉及食品安全的各个参与主体数据,为监管机构提供实时、可靠、不可篡改的产品信息。针对食品追溯体系的特点,具体分析用户层、应用系统层、接入层以及区块链平台技术特点,探讨全量数据与上链数据、数据一致性维护机制、接入层监听和轮询机制、区块链共识算法和智能合约等问题。最后对当前技术条件下在食品追溯体系中推广应用区块链存在的问题进行了探讨。 展开更多
关键词 区块链 食品追溯 市场监管 数据一致性 轮询机制
下载PDF
实时数据库并发控制 被引量:10
15
作者 李国徽 刘云生 《小型微型计算机系统》 CSCD 北大核心 2001年第12期1501-1503,共3页
可串行化的并发控制对传统应用是合适的 ,它旨在确保数据库的一致性 ,提高系统的吞吐量及减小事务平均响应时间 .而在实时数据库中 ,一方面系统追求的主要目标是单个事务定时限制 (典型地为截止期 )的满足 ,另一方面 ,系统中的数据库是... 可串行化的并发控制对传统应用是合适的 ,它旨在确保数据库的一致性 ,提高系统的吞吐量及减小事务平均响应时间 .而在实时数据库中 ,一方面系统追求的主要目标是单个事务定时限制 (典型地为截止期 )的满足 ,另一方面 ,系统中的数据库是外部环境在逻辑世界中的映射 ,局部的数据库不一致能够随下一次数据采样恢复而不会大规模扩散 .这些都为有别于传统严格一致的可串化并发控制的并发控制协议的采用提供了必要性和可能性 .本文首先给出了数据库“相似性”的形式化定义 ,接着提出了“视图一致性”的概念 .然后提出了一种新的并发控制协议 ,它考虑了数据的相似性 ,并使只读事务之间并不满足传统的严格可串行化的标准 ,但并没有破坏数据库的一致性 ,事务执行的并发度有了提高 ,有利于实时事务定时限制的满足 .最后我们将这种并发控制协议的性能与有名的 H2 展开更多
关键词 实时数据库 并发控制 数据状态 数据相似性 视图一致性
下载PDF
主流区块链共识算法对比研究 被引量:23
16
作者 邓小鸿 王智强 +2 位作者 李娟 王俊彬 黎康婷 《计算机应用研究》 CSCD 北大核心 2022年第1期1-8,共8页
共识算法是区块链中的核心技术,直接决定了整个区块链系统的运行效率。对现有的共识算法进行了总结,将其分为基于节点某种属性值证明的共识算法、基于节点投票机制的共识算法和类Paxos共识算法三类。详细介绍了三类共识算法的实现细节,... 共识算法是区块链中的核心技术,直接决定了整个区块链系统的运行效率。对现有的共识算法进行了总结,将其分为基于节点某种属性值证明的共识算法、基于节点投票机制的共识算法和类Paxos共识算法三类。详细介绍了三类共识算法的实现细节,并依据蒙代尔不可能三角理论进行对比研究,给出了共识算法的发展方向,为区块链共识算法的深入研究提供借鉴。 展开更多
关键词 区块链 共识算法 数据一致性 蒙代尔不可能三角理论
下载PDF
移动数据库事务处理模型研究 被引量:13
17
作者 徐进辉 徐明 《计算机工程与科学》 CSCD 2004年第4期62-65,109,共5页
移动数据库系统必须提供移动事务处理能力,以满足移动应用的需求。但是,移动计算环境的特点以及一些新型移动应用的出现,使得传统的ACID特性已不足以描述移动事务。本文在分析移动事务与传统数据库中事务的不同之处的基础上,重点讨论移... 移动数据库系统必须提供移动事务处理能力,以满足移动应用的需求。但是,移动计算环境的特点以及一些新型移动应用的出现,使得传统的ACID特性已不足以描述移动事务。本文在分析移动事务与传统数据库中事务的不同之处的基础上,重点讨论移动数据库事务处理模型,包括移动事务处理模型基本要素、特性、分类以及未来发展方向。 展开更多
关键词 移动数据库 事务处理模型 计算模式 数据访问 数据库管理系统
下载PDF
基于多传感器的数据融合算法研究 被引量:22
18
作者 敬如雪 高玉琢 《现代电子技术》 北大核心 2020年第10期10-13,共4页
文中提出基于多传感器的数据融合算法,该融合方法先对数据进行一致性检验,剔除传感器测量的异常数据,得到最优数据集;其次以支持度与自适应加权估计理论为基础,提高融合数据的精确度,该算法不需要提前知道任何先验条件。实际应用结果验... 文中提出基于多传感器的数据融合算法,该融合方法先对数据进行一致性检验,剔除传感器测量的异常数据,得到最优数据集;其次以支持度与自适应加权估计理论为基础,提高融合数据的精确度,该算法不需要提前知道任何先验条件。实际应用结果验证了算法的准确性,并进行了Matlab仿真。仿真结果表明,此方法计算简便,可以获得比有限个传感器的算术平均值与传统的自适应加权算法融合值更精确的估计结果,具有较高的可靠性和抗干扰性,可用于测量结果具有正态分布特性的多传感器测量系统。 展开更多
关键词 多传感器 数据融合 数据一致性 支持度 自适应加权算法 仿真分析
下载PDF
配网抢修移动应用系统的设计与实现 被引量:22
19
作者 胡扬波 王成现 袁杰 《江苏电机工程》 2014年第3期49-52,共4页
配网抢修效率与供电可靠性直接相关,设计并实现了一种配网抢修移动应用系统。基于移动互联技术,该系统能实现抢修人员移动客户端与主站端的数据实时共享和同步,从而克服传统管理系统的缺点。试用情况表明该系统能有效提高故障抢修效率... 配网抢修效率与供电可靠性直接相关,设计并实现了一种配网抢修移动应用系统。基于移动互联技术,该系统能实现抢修人员移动客户端与主站端的数据实时共享和同步,从而克服传统管理系统的缺点。试用情况表明该系统能有效提高故障抢修效率和保证数据的正确性。 展开更多
关键词 配网抢修 移动互联 数据完整性 数据一致性 供电可靠性
下载PDF
面向海量数据的数据一致性研究 被引量:18
20
作者 周婧 王意洁 +1 位作者 阮炜 李思昆 《计算机科学》 CSCD 北大核心 2006年第4期137-140,161,共5页
复制是实现海量数据管理的关键技术之一,多副本之间的数据一致性维护是提高分布式系统的容错能力与性能的重要保证。强一致性确保并发的修改操作不会发生冲突,但是限制了系统的可用性、连通性以及副本数量;弱一致性确保副本的最终一致,... 复制是实现海量数据管理的关键技术之一,多副本之间的数据一致性维护是提高分布式系统的容错能力与性能的重要保证。强一致性确保并发的修改操作不会发生冲突,但是限制了系统的可用性、连通性以及副本数量;弱一致性确保副本的最终一致,提高了系统的容错能力。本文从已有的一致性维护方法出发,结合海量数据的特点,对一致性维护过程中所涉及的更新发布、更新传播方式、更新传播内容以及更新冲突解决等几个方面进行了分析,提出了相应的解决方法。 展开更多
关键词 海量数据 复制 数据一致性
下载PDF
上一页 1 2 37 下一页 到第
使用帮助 返回顶部