期刊导航
期刊开放获取
cqvip
退出
期刊文献
+
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
检索
高级检索
期刊导航
共找到
3,275
篇文章
<
1
2
…
164
>
每页显示
20
50
100
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
显示方式:
文摘
详细
列表
相关度排序
被引量排序
时效性排序
面向智能电网应用的电力大数据关键技术
被引量:
523
1
作者
彭小圣
邓迪元
+3 位作者
程时杰
文劲宇
李朝晖
牛林
《中国电机工程学报》
EI
CSCD
北大核心
2015年第3期503-511,共9页
大数据为智能电网的发展注入新的活力,掌握电力大数据的关键技术对电力行业的可持续发展和坚强智能电网的建立具有重要意义。在分析大数据、云计算、智能电网三者关系的基础上,给出具有通用性的电力大数据平台总体架构,并从电力大数据...
大数据为智能电网的发展注入新的活力,掌握电力大数据的关键技术对电力行业的可持续发展和坚强智能电网的建立具有重要意义。在分析大数据、云计算、智能电网三者关系的基础上,给出具有通用性的电力大数据平台总体架构,并从电力大数据的集成管理技术、数据分析技术、数据处理技术、数据展现技术4个方面深入探讨符合电力企业发展需求的大数据关键技术的选择。最后通过3个典型案例,分析了电力大数据关键技术在新能源并网、风电机组安全评估、电网灾难预警上的应用。大数据关键技术在电力行业的广泛应用必将带来行业的变革,将智能电网的发展推向新的阶段。
展开更多
关键词
大
数据
云计算
智能电网
数据集成
数据
分析
数据
处理
数据
展现
下载PDF
职称材料
数据质量和数据清洗研究综述
被引量:
266
2
作者
郭志懋
周傲英
《软件学报》
EI
CSCD
北大核心
2002年第11期2076-2082,共7页
对数据质量,尤其是数据清洗的研究进行了综述.首先说明数据质量的重要性和衡量指标,定义了数据清洗问题.然后对数据清洗问题进行分类,并分析了解决这些问题的途径.最后说明数据清洗研究与其他技术的结合情况,分析了几种数据清洗框架.最...
对数据质量,尤其是数据清洗的研究进行了综述.首先说明数据质量的重要性和衡量指标,定义了数据清洗问题.然后对数据清洗问题进行分类,并分析了解决这些问题的途径.最后说明数据清洗研究与其他技术的结合情况,分析了几种数据清洗框架.最后对将来数据清洗领域的研究问题作了展望.
展开更多
关键词
数据
质量
数据
清洗
数据
库系统
数据集成
相似重复记录
下载PDF
职称材料
数据集成综述
被引量:
139
3
作者
陈跃国
王京春
《计算机科学》
CSCD
北大核心
2004年第5期48-51,共4页
介绍了数据集成的基本概念及其难点,讨论并比较了模式集成方法、数据复制方法以及综合数据集成方法,详细阐述了数据集成的主要难点——数据源的异构性,最后对数据集成的研究前景做出了展望。
关键词
数据集成
模式
集成
数据
复制
数据
源
异构性
联邦
数据
库
中间件
集成
下载PDF
职称材料
不确定性数据管理技术研究综述
被引量:
185
4
作者
周傲英
金澈清
+1 位作者
王国仁
李建中
《计算机学报》
EI
CSCD
北大核心
2009年第1期1-16,共16页
随着数据采集和处理技术的进步,人们对数据的不确定性的认识也逐步深入.在诸如经济、军事、物流、金融、电信等领域的具体应用中,数据的不确定性普遍存在.不确定性数据的表现形式多种多样,它们可以以关系型数据、半结构化数据、流数据...
随着数据采集和处理技术的进步,人们对数据的不确定性的认识也逐步深入.在诸如经济、军事、物流、金融、电信等领域的具体应用中,数据的不确定性普遍存在.不确定性数据的表现形式多种多样,它们可以以关系型数据、半结构化数据、流数据或移动对象数据等形式出现.目前,根据应用特点与数据形式差异,研究者已经提出了多种针对不确定数据的数据模型.这些不确定性数据模型的核心思想都源自于可能世界模型.可能世界模型从一个或多个不确定的数据源演化出诸多确定的数据库实例,称为可能世界实例,而且所有实例的概率之和等于1.尽管可以首先分别为各个实例计算查询结果,然后合并中间结果以生成最终查询结果,但由于可能世界实例的数量远大于不确定性数据库的规模,这种方法并不可行.因此,必须运用排序、剪枝等启发式技术设计新型算法,以提高效率.文中介绍了不确定性数据管理技术的概念、特点与挑战,综述了数据模型、数据预处理与集成、存储与索引、查询处理等方面的工作.
展开更多
关键词
不确定性
数据
可能世界模型
数据集成
世系
不确定
数据
流
下载PDF
职称材料
数据治理技术
被引量:
163
5
作者
吴信东
董丙冰
+1 位作者
堵新政
杨威
《软件学报》
EI
CSCD
北大核心
2019年第9期2830-2856,共27页
随着信息技术的普及,人类产生的数据量正在以指数级的速度增长,如此海量的数据就要求利用新的方法来管理.数据治理是将一个机构(企业或政府部门)的数据作为战略资产来管理,需要从数据收集到处理应用的一套管理机制,以期提高数据质量,实...
随着信息技术的普及,人类产生的数据量正在以指数级的速度增长,如此海量的数据就要求利用新的方法来管理.数据治理是将一个机构(企业或政府部门)的数据作为战略资产来管理,需要从数据收集到处理应用的一套管理机制,以期提高数据质量,实现广泛的数据共享,最终实现数据价值最大化.目前,各行各业对大数据的研究比较火热,但对于大数据治理的研究还处于起步阶段,一个组织的正确决策离不开良好的数据治理.首先介绍数据治理和大数据治理的概念、发展以及应用的必要性;其次,对已有的数据治理技术数据规范、数据清洗、数据交换和数据集成进行具体的分析,并介绍了数据治理成熟度和数据治理框架设计;在此基础上,提出了大数据 HAO 治理模型.该模型以支持人类智能(HI)、人工智能(AI)和组织智能(OI)的三者协同为目标,再以公安的数据治理为例介绍HAO 治理的应用;最后是对数据治理的总结和展望.
展开更多
关键词
数据
治理
数据
规范
数据
清洗
数据
交换
数据集成
下载PDF
职称材料
异构数据源集成系统查询分解和优化的实现
被引量:
66
6
作者
王宁
王能斌
《软件学报》
EI
CSCD
北大核心
2000年第2期222-228,共7页
通用异构数据源集成系统需要集成包括 WWW在内的各种数据源 ,有些数据源既无规则的模式结构 ,又无强有力的查询功能 ,给全局查询的分解和优化造成一定的困难 .异构数据源集成系统 Versatile一方面利用局部动态字典的模板操作构造集成系...
通用异构数据源集成系统需要集成包括 WWW在内的各种数据源 ,有些数据源既无规则的模式结构 ,又无强有力的查询功能 ,给全局查询的分解和优化造成一定的困难 .异构数据源集成系统 Versatile一方面利用局部动态字典的模板操作构造集成系统全局动态字典 ,作为查询分解和优化的依据 .一方面采用基于缓存和数据源能力的查询分解和优化策略 ,以便充分利用数据源的查询能力 ,简化包装器的设计 ,并取得较高的查询效率 .
展开更多
关键词
异构
数据
源
数据集成
查询分解
查询优化
数据
库
下载PDF
职称材料
大数据融合研究:问题与挑战
被引量:
131
7
作者
孟小峰
杜治娟
《计算机研究与发展》
EI
CSCD
北大核心
2016年第2期231-246,共16页
随着大规模数据的关联和交叉,数据特征和现实需求都发生了变化.以大规模、多源异构、跨领域、跨媒体、跨语言、动态演化、普适化为主要特征的数据发挥着更重要的作用,相应的数据存储、分析和理解也面临着重大挑战.当下亟待解决的问题是...
随着大规模数据的关联和交叉,数据特征和现实需求都发生了变化.以大规模、多源异构、跨领域、跨媒体、跨语言、动态演化、普适化为主要特征的数据发挥着更重要的作用,相应的数据存储、分析和理解也面临着重大挑战.当下亟待解决的问题是如何利用数据的关联、交叉和融合实现大数据的价值最大化.认为解决这一问题的关键在于数据的融合,所以提出了大数据融合的概念.首先以Web数据、科学数据和商业数据的融合作为案例分析了大数据融合的需求和必要性,并提出了大数据融合的新任务;然后,总结分析了现有融合技术;最后针对大数据融合问题可能面临的挑战和大数据融合带来的问题进行了分析.
展开更多
关键词
大
数据
数据集成
数据
融合
知识融合
数据
管理
下载PDF
职称材料
一个基于CORBA的异构数据源集成系统的设计
被引量:
48
8
作者
王宁
陈滢
+2 位作者
俞本权
徐宏炳
王能斌
《软件学报》
EI
CSCD
北大核心
1998年第5期378-382,共5页
提出一个基于CORBA(commonobjectrequestbrokerarchitecture)的即插即用的异构多数据源集成系统的设计方案.由于采用具有较强描述能力的OIM(objectmodelforinteg...
提出一个基于CORBA(commonobjectrequestbrokerarchitecture)的即插即用的异构多数据源集成系统的设计方案.由于采用具有较强描述能力的OIM(objectmodelforintegration)对象模型作为集成系统的公共数据模型,该系统不仅能集成各种异构数据源,包括数据库系统、文件系统、WWW上HTML文件中的数据,而且能集成随时插入的新数据源中的数据.着重讨论系统的总体结构、OIM对象模型。
展开更多
关键词
异构
数据
系统
数据集成
CORBA
设计
数据
库
下载PDF
职称材料
数据挖掘中数据预处理技术综述
被引量:
41
9
作者
刘莉
徐玉生
马志新
《甘肃科学学报》
2003年第1期117-119,共3页
数据挖掘是数据库系统和信息决策领域的前沿研究方向.论述了数据预处理在数据挖掘中的重要地位,介绍了数据预处理所包含的内容和采用的方法.
关键词
数据
挖掘
数据
预处理
数据
清理
数据集成
数据
归约
数据
库系统
下载PDF
职称材料
多源地理空间矢量数据集成与融合方法探讨
被引量:
60
10
作者
崔铁军
郭黎
《测绘科学技术学报》
北大核心
2007年第1期1-4,共4页
针对人们对地理空间数据迫切需求,介绍了多源地理空间矢量数据产生的管理与技术原因及其5种表现形式,提出了多源地理空间矢量数据集成与融合的概念及其相互关系。论述了地理数据模型的融合、地理要素语义的融合和地理数据投影和坐标系...
针对人们对地理空间数据迫切需求,介绍了多源地理空间矢量数据产生的管理与技术原因及其5种表现形式,提出了多源地理空间矢量数据集成与融合的概念及其相互关系。论述了地理数据模型的融合、地理要素语义的融合和地理数据投影和坐标系的统一是多源地理空间矢量数据集成与融合基本理论与方法。给出了实现多源数据集成的数据格式转换、数据互操作和直接数据访问方法。最后,讨论了地理要素几何位置的融合,以及通过地理要素语义融合消除地理要素数据描述和属性差异的矢量数据融合方法。
展开更多
关键词
多源空间
数据
数据集成
数据
融合
地理空间
数据
模型
下载PDF
职称材料
地球空间数据集成研究概况
被引量:
46
11
作者
李军
费川云
《地理科学进展》
CSCD
2000年第3期203-211,共9页
数字地球空间数据的集成研究及应用始于本世纪 60年代 ,地理信息系统的出现及应用、多元数据的使用推动了地球空间数据集成研究及其应用。本文首先对地球空间数据概念进行描述 ,然后对地球空间数据集成研究状况及存在的问题进行了详细...
数字地球空间数据的集成研究及应用始于本世纪 60年代 ,地理信息系统的出现及应用、多元数据的使用推动了地球空间数据集成研究及其应用。本文首先对地球空间数据概念进行描述 ,然后对地球空间数据集成研究状况及存在的问题进行了详细的分析。结合数据集成需求及存在的问题 ,论文分析了数据集成的发展方向。
展开更多
关键词
地球空间
数据
数据集成
GIS
网络化
集成
机理
下载PDF
职称材料
数据世系管理技术研究综述
被引量:
66
12
作者
高明
金澈清
+2 位作者
王晓玲
田秀霞
周傲英
《计算机学报》
EI
CSCD
北大核心
2010年第3期373-389,共17页
世系描述了数据产生、并随时间推移而演变的整个过程,它的应用领域很广,包括数据质量评价、数据核查、数据恢复和数据引用等.数据世系大致可分为不同数据源之间的数据演化过程和同一数据源内部的数据演化过程,即模式级和实例级数据演化...
世系描述了数据产生、并随时间推移而演变的整个过程,它的应用领域很广,包括数据质量评价、数据核查、数据恢复和数据引用等.数据世系大致可分为不同数据源之间的数据演化过程和同一数据源内部的数据演化过程,即模式级和实例级数据演化过程.文中以模式级和实例级数据世系的表示、查询为主线综述数据世系的研究进展.模式级世系部分主要介绍了查询重写和模式映射的世系追踪技术,实例级世系部分则从关系型数据、XML数据、流数据三方面总结了新近的研究进展.文中还综述了跟踪不确定性数据及其演化过程的研究进展.最后,列举了数据世系管理的应用,并讨论了世系分析研究面临的挑战及未来的研究方向.
展开更多
关键词
数据
世系
世系半环
数据集成
数据
空间
不确定
数据
下载PDF
职称材料
基于XML的异构数据库集成系统构架与开发
被引量:
44
13
作者
甄玉钢
刘璐莹
康建初
《计算机工程》
EI
CAS
CSCD
北大核心
2006年第2期85-87,共3页
分析了XML在解决异构数据库集成问题中的优势,并在此基础上提出了基于XML的异构数据库集成方案,实现了分布式异构数据库的透明访问和联合查询。对于架构中的主要环节给出了具体实现方法,并着重研究和验证了架构中XML与数据库模式映射、...
分析了XML在解决异构数据库集成问题中的优势,并在此基础上提出了基于XML的异构数据库集成方案,实现了分布式异构数据库的透明访问和联合查询。对于架构中的主要环节给出了具体实现方法,并着重研究和验证了架构中XML与数据库模式映射、数据透明访问、联合查询处理等关键问题。
展开更多
关键词
XML
异构
数据
库
数据集成
元
数据
XQUERY
下载PDF
职称材料
联邦式异构数据库应用系统的集成框架和实现技术的研究
被引量:
27
14
作者
李俊
李勇
《计算机应用研究》
CSCD
北大核心
2001年第4期19-22,共4页
现代的企事业单位,由于种种原因,往往并存有多个基于数据库的异构应用系统,从而造成企事业单位难以共享信息资源.为了解决企事业面临的这一问题,从信息集成的角度出发,提出了一种基于集成框架的数据集成新方法。并论述了数据映射...
现代的企事业单位,由于种种原因,往往并存有多个基于数据库的异构应用系统,从而造成企事业单位难以共享信息资源.为了解决企事业面临的这一问题,从信息集成的角度出发,提出了一种基于集成框架的数据集成新方法。并论述了数据映射、公共数据库接口及分布对象计算等数据集成的关键技术。
展开更多
关键词
集成
框架
数据集成
数据
映射
联邦式异构
数据
库
应用系统
下载PDF
职称材料
透明化矿山管控平台的设计与关键技术
被引量:
63
15
作者
毛善君
崔建军
+3 位作者
令狐建设
李梅
孙振明
陈华州
《煤炭学报》
EI
CAS
CSCD
北大核心
2018年第12期3539-3548,共10页
在分析国内外研究现状的基础上,提出了透明化矿山的概念和核心内容以及构建透明化矿山需要遵循的5个原则,并基于空间信息技术的最新发展,阐述了包括三维引擎层、智能煤矿平台层和生产操作层的透明化矿山系统构建的体系架构,并针对煤矿...
在分析国内外研究现状的基础上,提出了透明化矿山的概念和核心内容以及构建透明化矿山需要遵循的5个原则,并基于空间信息技术的最新发展,阐述了包括三维引擎层、智能煤矿平台层和生产操作层的透明化矿山系统构建的体系架构,并针对煤矿井上下空间对象的建模规范、多源时空数据的存储与集成、高精度地质体模型的构建和动态修正、海量数据三维可视化、机电设备模型构建与仿真以及自动化远程可视化控制等关键技术问题提出了解决方案,为矿山的透明化远程管控提供参考。部分技术已在阳泉煤业(集团)有限责任公司得到实际应用。
展开更多
关键词
透明化矿山
TGIS
体系结构
模型动态修正
数据集成
可视化控制
下载PDF
职称材料
数据ETL工具通用框架设计
被引量:
26
16
作者
周宏广
周继承
+1 位作者
彭银桥
龙思锐
《计算机应用》
CSCD
北大核心
2003年第12期96-98,共3页
异构多数据源集成和数据清洗是将操作数据导入数据仓库过程中面临的两大挑战。从实践角度设计了数据ETL工具的整体框架,使用通用数据访问接口来屏蔽各种数据源之间的差异,并以数据清洗为主要目的,为消除多数据源的模式冲突和数据冲突提...
异构多数据源集成和数据清洗是将操作数据导入数据仓库过程中面临的两大挑战。从实践角度设计了数据ETL工具的整体框架,使用通用数据访问接口来屏蔽各种数据源之间的差异,并以数据清洗为主要目的,为消除多数据源的模式冲突和数据冲突提供了通用而有效的解决方案。
展开更多
关键词
数据
ETL
数据集成
数据
清洗
下载PDF
职称材料
分布式异构数据集成系统的研究与实现
被引量:
30
17
作者
李冠宇
刘军
张俊
《计算机应用研究》
CSCD
北大核心
2004年第3期96-98,共3页
探讨了异构数据集成系统的特点和所面临的问题,结合CORBA分布对象技术提出了一个集成企业异构数据源的解决方案;详细介绍了集成平台中异构数据源包装器的设计和实现。
关键词
数据集成
数据
模型
包装器
CORBA
分布式系统
下载PDF
职称材料
异构数据源的集成技术
被引量:
17
18
作者
谢鸿强
董逸生
《工业控制计算机》
2001年第6期1-6,共6页
本文综述了异构数据源集成技术的发展必然性、发展历史、现状和将来。按照集成技术出现时间的顺序首先介绍了最通用的 ODBC方案,然后介绍了两种对关系数据库进行集成的传统方法:有全局模式的集成策略和无全局模式的集成策略,最后着...
本文综述了异构数据源集成技术的发展必然性、发展历史、现状和将来。按照集成技术出现时间的顺序首先介绍了最通用的 ODBC方案,然后介绍了两种对关系数据库进行集成的传统方法:有全局模式的集成策略和无全局模式的集成策略,最后着重叙述了新时期出现的几种有代表性的数据集成方法。
展开更多
关键词
联邦
数据
库
异构
数据
源
关系型
数据
库
数据集成
数据
处理
ODBC
下载PDF
职称材料
Web信息集成技术研究
被引量:
13
19
作者
孟小峰
《计算机应用与软件》
CSCD
北大核心
2003年第11期32-36,63,共6页
信息系统集成技术已经历了二十多年的发展,研究者已提出了很多信息集成的体系结构和实现方案,然而这些方法研究的主要集成对象是传统的异构数据库系统。随着Internet的飞速发展,网络迅速成为一种重要的信息传播和交换的手段,尤其是Web上...
信息系统集成技术已经历了二十多年的发展,研究者已提出了很多信息集成的体系结构和实现方案,然而这些方法研究的主要集成对象是传统的异构数据库系统。随着Internet的飞速发展,网络迅速成为一种重要的信息传播和交换的手段,尤其是Web上,有着及其丰富的数据来源。如何获取Web上的有用数据并加以综合利用,即构建Web信息集成系统,成为一个引起广泛关注的研究领域。本文结合自己的研究工作,对这一领域的研究做了简单的综述,对有关的研究问题给出了分析。
展开更多
关键词
Web
Internet
信息
集成
数据集成
信息资源
数据
源
数据
库系统
数据
仓库
下载PDF
职称材料
基于本体的水资源数据集成研究
被引量:
55
20
作者
赵菊华
《中国水能及电气化》
2007年第10期31-33,共3页
水资源数据集成是水资源信息共享的核心问题。在分析目前异构数据集成技术的基础上,结合本体技术,探讨了本体在水资源数据集成中的应用。最后给出了基于本体的水资源数据集成的实现框架,为用户提供一个透明的统一的接口,为实现水资源信...
水资源数据集成是水资源信息共享的核心问题。在分析目前异构数据集成技术的基础上,结合本体技术,探讨了本体在水资源数据集成中的应用。最后给出了基于本体的水资源数据集成的实现框架,为用户提供一个透明的统一的接口,为实现水资源信息共享提供了良好的基础。
展开更多
关键词
本体
水资源信息
数据集成
下载PDF
职称材料
题名
面向智能电网应用的电力大数据关键技术
被引量:
523
1
作者
彭小圣
邓迪元
程时杰
文劲宇
李朝晖
牛林
机构
华中科技大学电气与电子工程学院
国网技术学院
出处
《中国电机工程学报》
EI
CSCD
北大核心
2015年第3期503-511,共9页
基金
国家自然科学基金项目(51228701)~~
文摘
大数据为智能电网的发展注入新的活力,掌握电力大数据的关键技术对电力行业的可持续发展和坚强智能电网的建立具有重要意义。在分析大数据、云计算、智能电网三者关系的基础上,给出具有通用性的电力大数据平台总体架构,并从电力大数据的集成管理技术、数据分析技术、数据处理技术、数据展现技术4个方面深入探讨符合电力企业发展需求的大数据关键技术的选择。最后通过3个典型案例,分析了电力大数据关键技术在新能源并网、风电机组安全评估、电网灾难预警上的应用。大数据关键技术在电力行业的广泛应用必将带来行业的变革,将智能电网的发展推向新的阶段。
关键词
大
数据
云计算
智能电网
数据集成
数据
分析
数据
处理
数据
展现
Keywords
big data
cloud computing
smart grid
data integration
data analysis
data processing
data visualization
分类号
TM711 [电气工程—电力系统及自动化]
下载PDF
职称材料
题名
数据质量和数据清洗研究综述
被引量:
266
2
作者
郭志懋
周傲英
机构
复旦大学计算机科学与工程系
复旦大学智能信息处理开放实验室
出处
《软件学报》
EI
CSCD
北大核心
2002年第11期2076-2082,共7页
基金
国家自然科学基金资助项目(60003016)
霍英东教育基金青年教师基金资助项目
教育部跨世纪优秀人才培养计划资助项目~~
文摘
对数据质量,尤其是数据清洗的研究进行了综述.首先说明数据质量的重要性和衡量指标,定义了数据清洗问题.然后对数据清洗问题进行分类,并分析了解决这些问题的途径.最后说明数据清洗研究与其他技术的结合情况,分析了几种数据清洗框架.最后对将来数据清洗领域的研究问题作了展望.
关键词
数据
质量
数据
清洗
数据
库系统
数据集成
相似重复记录
Keywords
data quality
data cleaning
data integration
duplicate record
data cleaning framework
分类号
TP311.13 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
数据集成综述
被引量:
139
3
作者
陈跃国
王京春
机构
清华大学自动化系
出处
《计算机科学》
CSCD
北大核心
2004年第5期48-51,共4页
文摘
介绍了数据集成的基本概念及其难点,讨论并比较了模式集成方法、数据复制方法以及综合数据集成方法,详细阐述了数据集成的主要难点——数据源的异构性,最后对数据集成的研究前景做出了展望。
关键词
数据集成
模式
集成
数据
复制
数据
源
异构性
联邦
数据
库
中间件
集成
Keywords
Data integration, Schema integration, Data replication, Heterogeneity
分类号
TP311.13 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
不确定性数据管理技术研究综述
被引量:
185
4
作者
周傲英
金澈清
王国仁
李建中
机构
华东师范大学软件学院上海市高可信计算重点实验室
东北大学信息科学与工程学院
哈尔滨工业大学计算机科学与技术学院
出处
《计算机学报》
EI
CSCD
北大核心
2009年第1期1-16,共16页
基金
国家自然科学基金(60803020)
上海市重点学科建设项目(B412)资助
文摘
随着数据采集和处理技术的进步,人们对数据的不确定性的认识也逐步深入.在诸如经济、军事、物流、金融、电信等领域的具体应用中,数据的不确定性普遍存在.不确定性数据的表现形式多种多样,它们可以以关系型数据、半结构化数据、流数据或移动对象数据等形式出现.目前,根据应用特点与数据形式差异,研究者已经提出了多种针对不确定数据的数据模型.这些不确定性数据模型的核心思想都源自于可能世界模型.可能世界模型从一个或多个不确定的数据源演化出诸多确定的数据库实例,称为可能世界实例,而且所有实例的概率之和等于1.尽管可以首先分别为各个实例计算查询结果,然后合并中间结果以生成最终查询结果,但由于可能世界实例的数量远大于不确定性数据库的规模,这种方法并不可行.因此,必须运用排序、剪枝等启发式技术设计新型算法,以提高效率.文中介绍了不确定性数据管理技术的概念、特点与挑战,综述了数据模型、数据预处理与集成、存储与索引、查询处理等方面的工作.
关键词
不确定性
数据
可能世界模型
数据集成
世系
不确定
数据
流
Keywords
uncertain data
possible world model
data integration
lineage
uncertain stream
分类号
TP393 [自动化与计算机技术—计算机应用技术]
下载PDF
职称材料
题名
数据治理技术
被引量:
163
5
作者
吴信东
董丙冰
堵新政
杨威
机构
明略科技集团
合肥工业大学大知识科学研究院
大数据知识工程教育部重点实验室(合肥工业大学)
合肥工业大学计算机与信息学院
出处
《软件学报》
EI
CSCD
北大核心
2019年第9期2830-2856,共27页
基金
国家重点研发计划(2016YFB1000901)
国家自然科学基金(91746209)
教育部创新团队项目(IRT17R3)~~
文摘
随着信息技术的普及,人类产生的数据量正在以指数级的速度增长,如此海量的数据就要求利用新的方法来管理.数据治理是将一个机构(企业或政府部门)的数据作为战略资产来管理,需要从数据收集到处理应用的一套管理机制,以期提高数据质量,实现广泛的数据共享,最终实现数据价值最大化.目前,各行各业对大数据的研究比较火热,但对于大数据治理的研究还处于起步阶段,一个组织的正确决策离不开良好的数据治理.首先介绍数据治理和大数据治理的概念、发展以及应用的必要性;其次,对已有的数据治理技术数据规范、数据清洗、数据交换和数据集成进行具体的分析,并介绍了数据治理成熟度和数据治理框架设计;在此基础上,提出了大数据 HAO 治理模型.该模型以支持人类智能(HI)、人工智能(AI)和组织智能(OI)的三者协同为目标,再以公安的数据治理为例介绍HAO 治理的应用;最后是对数据治理的总结和展望.
关键词
数据
治理
数据
规范
数据
清洗
数据
交换
数据集成
Keywords
data governance
data specification
data cleaning
data exchange
data integration
分类号
TP311 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
异构数据源集成系统查询分解和优化的实现
被引量:
66
6
作者
王宁
王能斌
机构
南京电力自动化研究院电网研究所
南京东南大学计算机科学与工程系
出处
《软件学报》
EI
CSCD
北大核心
2000年第2期222-228,共7页
基金
国家自然科学基金
文摘
通用异构数据源集成系统需要集成包括 WWW在内的各种数据源 ,有些数据源既无规则的模式结构 ,又无强有力的查询功能 ,给全局查询的分解和优化造成一定的困难 .异构数据源集成系统 Versatile一方面利用局部动态字典的模板操作构造集成系统全局动态字典 ,作为查询分解和优化的依据 .一方面采用基于缓存和数据源能力的查询分解和优化策略 ,以便充分利用数据源的查询能力 ,简化包装器的设计 ,并取得较高的查询效率 .
关键词
异构
数据
源
数据集成
查询分解
查询优化
数据
库
Keywords
Heterogeneous data source, data integration, dynamic dictionary, query decomposition, query optimization, query capability, cache.
分类号
TP311.13 [自动化与计算机技术—计算机软件与理论]
G354.4 [自动化与计算机技术—计算机科学与技术]
下载PDF
职称材料
题名
大数据融合研究:问题与挑战
被引量:
131
7
作者
孟小峰
杜治娟
机构
中国人民大学信息学院
出处
《计算机研究与发展》
EI
CSCD
北大核心
2016年第2期231-246,共16页
基金
国家自然科学基金项目(61532010
61379050
+3 种基金
91224008)
国家"八六三"高技术研究发展计划基金项目(2013AA013204)
教育部高等学校博士学科点专项科研基金项目(20130004130001)
中国人民大学科学研究基金项目(11XNL010)~~
文摘
随着大规模数据的关联和交叉,数据特征和现实需求都发生了变化.以大规模、多源异构、跨领域、跨媒体、跨语言、动态演化、普适化为主要特征的数据发挥着更重要的作用,相应的数据存储、分析和理解也面临着重大挑战.当下亟待解决的问题是如何利用数据的关联、交叉和融合实现大数据的价值最大化.认为解决这一问题的关键在于数据的融合,所以提出了大数据融合的概念.首先以Web数据、科学数据和商业数据的融合作为案例分析了大数据融合的需求和必要性,并提出了大数据融合的新任务;然后,总结分析了现有融合技术;最后针对大数据融合问题可能面临的挑战和大数据融合带来的问题进行了分析.
关键词
大
数据
数据集成
数据
融合
知识融合
数据
管理
Keywords
big data
data integration
data fusion
knowledge fusion
data management
分类号
TP391 [自动化与计算机技术—计算机应用技术]
下载PDF
职称材料
题名
一个基于CORBA的异构数据源集成系统的设计
被引量:
48
8
作者
王宁
陈滢
俞本权
徐宏炳
王能斌
机构
东南大学计算机系
出处
《软件学报》
EI
CSCD
北大核心
1998年第5期378-382,共5页
基金
国家自然科学基金
文摘
提出一个基于CORBA(commonobjectrequestbrokerarchitecture)的即插即用的异构多数据源集成系统的设计方案.由于采用具有较强描述能力的OIM(objectmodelforintegration)对象模型作为集成系统的公共数据模型,该系统不仅能集成各种异构数据源,包括数据库系统、文件系统、WWW上HTML文件中的数据,而且能集成随时插入的新数据源中的数据.着重讨论系统的总体结构、OIM对象模型。
关键词
异构
数据
系统
数据集成
CORBA
设计
数据
库
Keywords
Heterogeneous data sources, data integration, semistructured data, interoperability, object model, query language.
分类号
TP311.13 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
数据挖掘中数据预处理技术综述
被引量:
41
9
作者
刘莉
徐玉生
马志新
机构
兰州大学信息科学与工程学院
出处
《甘肃科学学报》
2003年第1期117-119,共3页
文摘
数据挖掘是数据库系统和信息决策领域的前沿研究方向.论述了数据预处理在数据挖掘中的重要地位,介绍了数据预处理所包含的内容和采用的方法.
关键词
数据
挖掘
数据
预处理
数据
清理
数据集成
数据
归约
数据
库系统
Keywords
data mining
data preprocessing
data cleaning
data integration
data reduction
分类号
TP311.13 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
多源地理空间矢量数据集成与融合方法探讨
被引量:
60
10
作者
崔铁军
郭黎
机构
信息工程大学测绘学院
出处
《测绘科学技术学报》
北大核心
2007年第1期1-4,共4页
文摘
针对人们对地理空间数据迫切需求,介绍了多源地理空间矢量数据产生的管理与技术原因及其5种表现形式,提出了多源地理空间矢量数据集成与融合的概念及其相互关系。论述了地理数据模型的融合、地理要素语义的融合和地理数据投影和坐标系的统一是多源地理空间矢量数据集成与融合基本理论与方法。给出了实现多源数据集成的数据格式转换、数据互操作和直接数据访问方法。最后,讨论了地理要素几何位置的融合,以及通过地理要素语义融合消除地理要素数据描述和属性差异的矢量数据融合方法。
关键词
多源空间
数据
数据集成
数据
融合
地理空间
数据
模型
Keywords
multisource geospatial data
data integration
data fusion
geospatial data model
分类号
P208 [天文地球—地图制图学与地理信息工程]
下载PDF
职称材料
题名
地球空间数据集成研究概况
被引量:
46
11
作者
李军
费川云
机构
中国科学院遥感应用研究所
中国科学院地理科学与资源研究所
中国科学院地理科学与资源研究所
出处
《地理科学进展》
CSCD
2000年第3期203-211,共9页
基金
"九五"重中之重攻关项目!(96- B0 2 - 0 2 - 0 2 )"重大自然灾害评估系统研究"资助
文摘
数字地球空间数据的集成研究及应用始于本世纪 60年代 ,地理信息系统的出现及应用、多元数据的使用推动了地球空间数据集成研究及其应用。本文首先对地球空间数据概念进行描述 ,然后对地球空间数据集成研究状况及存在的问题进行了详细的分析。结合数据集成需求及存在的问题 ,论文分析了数据集成的发展方向。
关键词
地球空间
数据
数据集成
GIS
网络化
集成
机理
Keywords
geo spatial data
data integration
seamless dataset
分类号
P208 [天文地球—地图制图学与地理信息工程]
下载PDF
职称材料
题名
数据世系管理技术研究综述
被引量:
66
12
作者
高明
金澈清
王晓玲
田秀霞
周傲英
机构
复旦大学计算机科学技术学院上海市智能信息处理重点实验室
华东师范大学软件学院上海市高可信计算重点实验室
上海电力学院计算机与信息工程学院
出处
《计算机学报》
EI
CSCD
北大核心
2010年第3期373-389,共17页
基金
国家自然科学基金重点项目(60933001)
国家杰出青年基金(60925008)
+1 种基金
国家自然科学基金(60803020)
上海市重点学科建设项目(B412)资助
文摘
世系描述了数据产生、并随时间推移而演变的整个过程,它的应用领域很广,包括数据质量评价、数据核查、数据恢复和数据引用等.数据世系大致可分为不同数据源之间的数据演化过程和同一数据源内部的数据演化过程,即模式级和实例级数据演化过程.文中以模式级和实例级数据世系的表示、查询为主线综述数据世系的研究进展.模式级世系部分主要介绍了查询重写和模式映射的世系追踪技术,实例级世系部分则从关系型数据、XML数据、流数据三方面总结了新近的研究进展.文中还综述了跟踪不确定性数据及其演化过程的研究进展.最后,列举了数据世系管理的应用,并讨论了世系分析研究面临的挑战及未来的研究方向.
关键词
数据
世系
世系半环
数据集成
数据
空间
不确定
数据
Keywords
data provenance
provenance semiring
data integration
data space
uncertain data
分类号
TP311 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
基于XML的异构数据库集成系统构架与开发
被引量:
44
13
作者
甄玉钢
刘璐莹
康建初
机构
北京航空航天大学计算机学院
出处
《计算机工程》
EI
CAS
CSCD
北大核心
2006年第2期85-87,共3页
基金
国家"863"计划基金资助项目"网络环境的系统软件核心技术及运行平台"(2001AA113030)
文摘
分析了XML在解决异构数据库集成问题中的优势,并在此基础上提出了基于XML的异构数据库集成方案,实现了分布式异构数据库的透明访问和联合查询。对于架构中的主要环节给出了具体实现方法,并着重研究和验证了架构中XML与数据库模式映射、数据透明访问、联合查询处理等关键问题。
关键词
XML
异构
数据
库
数据集成
元
数据
XQUERY
Keywords
XML
Heterogeneous database
Data integration
Metadata
XQuery
分类号
TP311.13 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
联邦式异构数据库应用系统的集成框架和实现技术的研究
被引量:
27
14
作者
李俊
李勇
机构
东南大学计算机网络和信息集成教育部重点实验室
南京航空航天大学计算中心
出处
《计算机应用研究》
CSCD
北大核心
2001年第4期19-22,共4页
基金
高等学校重点实验室访问学者基金资助课题
文摘
现代的企事业单位,由于种种原因,往往并存有多个基于数据库的异构应用系统,从而造成企事业单位难以共享信息资源.为了解决企事业面临的这一问题,从信息集成的角度出发,提出了一种基于集成框架的数据集成新方法。并论述了数据映射、公共数据库接口及分布对象计算等数据集成的关键技术。
关键词
集成
框架
数据集成
数据
映射
联邦式异构
数据
库
应用系统
Keywords
Heterogeneous
Integrated frame
Federated
Data integration
Data mapping
分类号
TP311.13 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
透明化矿山管控平台的设计与关键技术
被引量:
63
15
作者
毛善君
崔建军
令狐建设
李梅
孙振明
陈华州
机构
北京大学地球与空间科学学院
山西阳泉煤业(集团)有限责任公司
中国矿业大学(北京)资源与安全工程学院
北京龙软科技股份有限公司
出处
《煤炭学报》
EI
CAS
CSCD
北大核心
2018年第12期3539-3548,共10页
基金
国家重点研发计划资助项目(2017YFC0804300)
文摘
在分析国内外研究现状的基础上,提出了透明化矿山的概念和核心内容以及构建透明化矿山需要遵循的5个原则,并基于空间信息技术的最新发展,阐述了包括三维引擎层、智能煤矿平台层和生产操作层的透明化矿山系统构建的体系架构,并针对煤矿井上下空间对象的建模规范、多源时空数据的存储与集成、高精度地质体模型的构建和动态修正、海量数据三维可视化、机电设备模型构建与仿真以及自动化远程可视化控制等关键技术问题提出了解决方案,为矿山的透明化远程管控提供参考。部分技术已在阳泉煤业(集团)有限责任公司得到实际应用。
关键词
透明化矿山
TGIS
体系结构
模型动态修正
数据集成
可视化控制
Keywords
transparent Mine
TGIS
system framework
model modification
data integration
visual control
分类号
TD67 [矿业工程—矿山机电]
下载PDF
职称材料
题名
数据ETL工具通用框架设计
被引量:
26
16
作者
周宏广
周继承
彭银桥
龙思锐
机构
中南大学信息材料与计算科学研究所
出处
《计算机应用》
CSCD
北大核心
2003年第12期96-98,共3页
基金
国家自然科学基金项目 (6 9971 0 0 7
6 0 1 71 0 43 )
文摘
异构多数据源集成和数据清洗是将操作数据导入数据仓库过程中面临的两大挑战。从实践角度设计了数据ETL工具的整体框架,使用通用数据访问接口来屏蔽各种数据源之间的差异,并以数据清洗为主要目的,为消除多数据源的模式冲突和数据冲突提供了通用而有效的解决方案。
关键词
数据
ETL
数据集成
数据
清洗
Keywords
ETL process
data integration
data cleaning
分类号
TP311 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
分布式异构数据集成系统的研究与实现
被引量:
30
17
作者
李冠宇
刘军
张俊
机构
大连理工大学
大连海事大学
出处
《计算机应用研究》
CSCD
北大核心
2004年第3期96-98,共3页
基金
国家自然科学基金资助项目(60172043)
辽宁省自然科学基金资助项目(002055)
文摘
探讨了异构数据集成系统的特点和所面临的问题,结合CORBA分布对象技术提出了一个集成企业异构数据源的解决方案;详细介绍了集成平台中异构数据源包装器的设计和实现。
关键词
数据集成
数据
模型
包装器
CORBA
分布式系统
Keywords
Data Integration
Data Model
Wrapper
CORBA
Distributed System
分类号
TP311.12 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
异构数据源的集成技术
被引量:
17
18
作者
谢鸿强
董逸生
机构
东南大学计算机系数据库组
出处
《工业控制计算机》
2001年第6期1-6,共6页
文摘
本文综述了异构数据源集成技术的发展必然性、发展历史、现状和将来。按照集成技术出现时间的顺序首先介绍了最通用的 ODBC方案,然后介绍了两种对关系数据库进行集成的传统方法:有全局模式的集成策略和无全局模式的集成策略,最后着重叙述了新时期出现的几种有代表性的数据集成方法。
关键词
联邦
数据
库
异构
数据
源
关系型
数据
库
数据集成
数据
处理
ODBC
Keywords
heterogeneous, federal databases, integration
分类号
TP311.131 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
Web信息集成技术研究
被引量:
13
19
作者
孟小峰
机构
中国人民大学信息学院
出处
《计算机应用与软件》
CSCD
北大核心
2003年第11期32-36,63,共6页
基金
国家863计划项目(编号:2002AA116030)
国家自然科学基金项目(60073014
+2 种基金
60273018)
教育部科学技术重点项目(03044)
教育部优秀青年教师资助计划项目的资助
文摘
信息系统集成技术已经历了二十多年的发展,研究者已提出了很多信息集成的体系结构和实现方案,然而这些方法研究的主要集成对象是传统的异构数据库系统。随着Internet的飞速发展,网络迅速成为一种重要的信息传播和交换的手段,尤其是Web上,有着及其丰富的数据来源。如何获取Web上的有用数据并加以综合利用,即构建Web信息集成系统,成为一个引起广泛关注的研究领域。本文结合自己的研究工作,对这一领域的研究做了简单的综述,对有关的研究问题给出了分析。
关键词
Web
Internet
信息
集成
数据集成
信息资源
数据
源
数据
库系统
数据
仓库
Keywords
Information system Data integration Wrapper Web service
分类号
TP393.4 [自动化与计算机技术—计算机应用技术]
TP311.13 [自动化与计算机技术—计算机科学与技术]
下载PDF
职称材料
题名
基于本体的水资源数据集成研究
被引量:
55
20
作者
赵菊华
机构
河海大学
出处
《中国水能及电气化》
2007年第10期31-33,共3页
文摘
水资源数据集成是水资源信息共享的核心问题。在分析目前异构数据集成技术的基础上,结合本体技术,探讨了本体在水资源数据集成中的应用。最后给出了基于本体的水资源数据集成的实现框架,为用户提供一个透明的统一的接口,为实现水资源信息共享提供了良好的基础。
关键词
本体
水资源信息
数据集成
Keywords
Noumenon
water resources information
data collection
分类号
TV213.4 [水利工程—水文学及水资源]
下载PDF
职称材料
题名
作者
出处
发文年
被引量
操作
1
面向智能电网应用的电力大数据关键技术
彭小圣
邓迪元
程时杰
文劲宇
李朝晖
牛林
《中国电机工程学报》
EI
CSCD
北大核心
2015
523
下载PDF
职称材料
2
数据质量和数据清洗研究综述
郭志懋
周傲英
《软件学报》
EI
CSCD
北大核心
2002
266
下载PDF
职称材料
3
数据集成综述
陈跃国
王京春
《计算机科学》
CSCD
北大核心
2004
139
下载PDF
职称材料
4
不确定性数据管理技术研究综述
周傲英
金澈清
王国仁
李建中
《计算机学报》
EI
CSCD
北大核心
2009
185
下载PDF
职称材料
5
数据治理技术
吴信东
董丙冰
堵新政
杨威
《软件学报》
EI
CSCD
北大核心
2019
163
下载PDF
职称材料
6
异构数据源集成系统查询分解和优化的实现
王宁
王能斌
《软件学报》
EI
CSCD
北大核心
2000
66
下载PDF
职称材料
7
大数据融合研究:问题与挑战
孟小峰
杜治娟
《计算机研究与发展》
EI
CSCD
北大核心
2016
131
下载PDF
职称材料
8
一个基于CORBA的异构数据源集成系统的设计
王宁
陈滢
俞本权
徐宏炳
王能斌
《软件学报》
EI
CSCD
北大核心
1998
48
下载PDF
职称材料
9
数据挖掘中数据预处理技术综述
刘莉
徐玉生
马志新
《甘肃科学学报》
2003
41
下载PDF
职称材料
10
多源地理空间矢量数据集成与融合方法探讨
崔铁军
郭黎
《测绘科学技术学报》
北大核心
2007
60
下载PDF
职称材料
11
地球空间数据集成研究概况
李军
费川云
《地理科学进展》
CSCD
2000
46
下载PDF
职称材料
12
数据世系管理技术研究综述
高明
金澈清
王晓玲
田秀霞
周傲英
《计算机学报》
EI
CSCD
北大核心
2010
66
下载PDF
职称材料
13
基于XML的异构数据库集成系统构架与开发
甄玉钢
刘璐莹
康建初
《计算机工程》
EI
CAS
CSCD
北大核心
2006
44
下载PDF
职称材料
14
联邦式异构数据库应用系统的集成框架和实现技术的研究
李俊
李勇
《计算机应用研究》
CSCD
北大核心
2001
27
下载PDF
职称材料
15
透明化矿山管控平台的设计与关键技术
毛善君
崔建军
令狐建设
李梅
孙振明
陈华州
《煤炭学报》
EI
CAS
CSCD
北大核心
2018
63
下载PDF
职称材料
16
数据ETL工具通用框架设计
周宏广
周继承
彭银桥
龙思锐
《计算机应用》
CSCD
北大核心
2003
26
下载PDF
职称材料
17
分布式异构数据集成系统的研究与实现
李冠宇
刘军
张俊
《计算机应用研究》
CSCD
北大核心
2004
30
下载PDF
职称材料
18
异构数据源的集成技术
谢鸿强
董逸生
《工业控制计算机》
2001
17
下载PDF
职称材料
19
Web信息集成技术研究
孟小峰
《计算机应用与软件》
CSCD
北大核心
2003
13
下载PDF
职称材料
20
基于本体的水资源数据集成研究
赵菊华
《中国水能及电气化》
2007
55
下载PDF
职称材料
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
上一页
1
2
…
164
下一页
到第
页
确定
用户登录
登录
IP登录
使用帮助
返回顶部