题名 数据仓库技术的研究现状及未来方向
被引量:36
1
作者
李子木
莫倩
周兴铭
机构
国防科技大学计算机系
出处
《计算机科学》
CSCD
北大核心
1998年第4期57-59,共3页
基金
九五预研项目基金
文摘
数据仓库和联机分析处理是决策支持系统的重要组成部分,与传统的联机事务处理不同,是对现有数据进行归纳、分析和推理,从而为决策提供支持。数据仓库是“面向主题的、集成的、稳定的和随时间变化的数据集合,主要用于决策制定”」。数据仓库的这些特点决定了它与传统的面向事务处理的数据库有着本质不同。
关键词
数据仓库
体系结构
数据集合
决策支持系统
Keywords
Data Warehouse,materialized view ,Multidimensional data,OLAP,Data cube
分类号
TP274.2
[自动化与计算机技术—检测技术与自动化装置]
TP399
[自动化与计算机技术—控制科学与工程]
题名 多维数据实视图的动态选择
被引量:35
2
作者
谭红星
周龙骧
机构
中国科学院数学与系统科学研究院数学研究所
出处
《软件学报》
EI
CSCD
北大核心
2002年第6期1090-1096,共7页
基金
国家自然科学基金资助项目(2008100)~~
文摘
提出了多维数据中实视图的动态选择方案.其基本思想是由系统跟踪查询的分布情况,并据此动态地调整实视图集合.具体实现了该方案,并证明了在一定条件下,单次选择算法的效果与最优效果的差具有一定的上限.实验结果表明,动态方案的效果优于已有的其他选择方案.
关键词
实视图
LCAP
多维数据
数据仓库
数据库
Keywords
materialized view
OLAP (online analytical processing)
multi-dimensional data
data warehousing
分类号
TP311.13
[自动化与计算机技术—计算机软件与理论]
题名 数据仓库的联机维护与下查
被引量:21
3
作者
李子木
李磊
徐明
周兴铭
机构
国防科学技术大学计算机学院
出处
《计算机学报》
EI
CSCD
北大核心
1999年第9期988-992,共5页
基金
九五预研基金
湖南省基金
文摘
提出了一种三层数据仓库体系结构,引入了“数据仓库基库”概念,不仅使得传统数据库能够更容易地融入数据仓库系统,而且增强了整个系统的伸缩性.在此基础上,提出了3VWQ(Three-Version WithoutQuiescing)算法来解决数据仓库的联机维护问题及其对下查的支持.该算法采用版本控制和补偿思想来协调数据库和数据仓库之间的数据更新。
关键词
数据仓库
联机维护
数据仓库基库
Keywords
Data warehouse,on line maintenance,data warehouse base,materialized view .
分类号
TP274.2
[自动化与计算机技术—检测技术与自动化装置]
题名 数据仓库技术的研究现状和未来方向
被引量:2
4
作者
伍小荣
伍庆华
机构
华中农业大学计算机系
中国地质大学研究生院
出处
《现代电子技术》
2002年第6期6-9,共4页
文摘
数据仓库 (Data Warehouse)和联机分析处理 (On- L ine Analytical Processing,OL AP)是信息技术新兴的研究领域。国际上对数据仓库体系结构、数据组织、视图维护、多维数据库建模、数据立方体计算等问题进行了广泛和深入的研究。阐述了斯坦福大学、IBM Almaden研究中心、威斯康辛大学以及微软和 AT& T公司在该领域近几年的研究 ,以此描述数据仓库技术的研究状况和发展方向。
关键词
数据仓库
实视图
多维数据库
联机分析处理
数据立方体
信息技术
Keywords
data warehouse, materialized view , multidimensional data, OLAP, data cube
分类号
G202
[文化科学—传播学]
题名 数据仓库联机维护中一致性问题的研究
被引量:8
5
作者
李子木
孙利民
周兴铭
机构
长沙工学院计算机科学系
出处
《软件学报》
EI
CSCD
北大核心
1999年第8期812-818,共7页
文摘
数据仓库是存储供查询和决策分析用的集成化信息仓库,它的信息来源于不同地点的数据库或其他信息源.实体化视图是数据仓库中存储的主要信息实体,当原始数据发生变化时,数据仓库中的实体化视图也必须作相应的更新维护.在数据仓库实体化视图的联机维护过程中,由于联机分析处理(On-lineAnalyticalProcess,简称OLAP)查询的介入,会产生数据不一致的问题.文章提出了一种MVCA(multiversioncompensatingalgorithm)算法来解决这一问题.MVCA采用版本控制方法,利用补偿思想和应答机制协调数据库和数据仓库之间的更新维护操作,达到保证数据一致的目的.最后,文章通过一个典型示例说明了该算法在实际中的具体应用.
关键词
数据仓库
实体化视图
联机维护
数据一致性
Keywords
Data warehouse, materialized view , on-line maintenance, data consistency, MVCA (multiversion compensating algorithm)
分类号
TP274.2
[自动化与计算机技术—检测技术与自动化装置]
题名 数据仓库中物化视图的选择
被引量:11
6
作者
杨少军
范金存
李庆忠
机构
山东省信息产业厅
山东大学计算机科学与技术学院
出处
《计算机应用》
CSCD
北大核心
2003年第9期58-60,共3页
文摘
物化视图是数据仓库中提高查询效率的有力方法,物化视图的选择一直是数据仓库领域的研究热点。通过对星型模型的研究,根据对数据仓库的常用查询及其执行概率,设计出一个候选视图的算法,并详细介绍了线性代价模型,在该模型和候选视图算法基础上,参照文献[4]提出一个改进的物化视图选择贪心算法。
关键词
数据仓库
物化视图
选择算法
Keywords
data warehouse
materialized view
selection algorithm
分类号
TP311.131
[自动化与计算机技术—计算机软件与理论]
题名 数据仓库中多视图环境下的联机维护
被引量:3
7
作者
李子木
莫倩
徐明
周兴铭
机构
国防科技大学并行与分布处理国家重点实验室
出处
《计算机研究与发展》
EI
CSCD
北大核心
1999年第8期966-972,共7页
文摘
数据仓库的视图联机维护是指数据仓库中的实体化视图实时地与信息源中的数据变化保持一致,同时不影响前端用户对数据仓库的正常使用.为了解决多视图环境中视图联机维护与下钻查询的一致性问题,文中在数据仓库体系结构中引入了“基库”模型,并提出了相应的视图维护算法3VPA(three-versionpaintingalgorithm).“基库”不仅增强了整个数据仓库系统的伸缩性,而且为下钻查询提供了更好的支持.3VPA采用补偿思想、同步等待机制和版本控制方法,通过与“基库”的联合控制,不但保证了数据仓库中多视图之间的数据一致性,而且还保证了下钻查询能够得到一致的结果.
关键词
数据仓库
视图
联机维护
数据处理
数据库
Keywords
data warehouse, materialized view , on line maintenance, drill down, consistency, DWbase, 3VPA
分类号
TP274.2
[自动化与计算机技术—检测技术与自动化装置]
TP311.13
[自动化与计算机技术—控制科学与工程]
题名 国产数据仓库管理系统DM_DW的设计
被引量:10
8
作者
陈长清
冯玉才
袁磊
机构
华中科技大学数据库与多媒体研究所
出处
《小型微型计算机系统》
CSCD
北大核心
2002年第5期596-599,共4页
文摘
数据仓库能集成多个异构数据源上的信息 ,以支持决策分析 .本文介绍了在国产数据库管理系统 DM3基础上设计的数据仓库管理系统 DM_ DW的三层体系结构、元数据的管理、抽取引擎的主要功能和采用的关键技术 :实化视图的内部表示、实化视图增量维护及优化。
关键词
数据库
数据仓库管理系统
DM-DW
设计
Keywords
data warehouse
materialized view
incremental view maintenance
分类号
TP311.13
[自动化与计算机技术—计算机软件与理论]
题名 Oracle数据库升级或迁移的方法探讨
被引量:17
9
作者
梁昌明
袁功智
秦占伟
陈彬
机构
解放军第
出处
《医疗卫生装备》
CAS
2008年第1期35-37,共3页
文摘
目的:"军卫一号"医院信息系统中Oracle数据库升级到Oracle10g第2版。方法:利用数据库升级助手、手工脚本升级、导入/导出工具、表空间传输特性、tablecopy、实体化视图等技术分别实现数据库的升级测试。结果:测试的结果表明,这些方法均可以实现Oracle数据库的升级。结论:虽然各种升级方法均可以实现Oracle数据库的升级,但是它们的操作步骤和效率还是有区别,实际工作中可以根据应用的具体情况选择合适的方法。
关键词
数据库升级
DBUA
导出/导入
表空间传输
实体化视图
Keywords
database upgrade
DBUA
export/import
tablespace transport
materialized view
分类号
TP311.13
[自动化与计算机技术—计算机软件与理论]
题名 实时主动数据仓库中多维数据实视图的选择
被引量:12
10
作者
林子雨
杨冬青
宋国杰
王腾蛟
唐世渭
机构
北京大学信息科学技术学院
北京大学视觉与听觉信息处理国家重点实验室
出处
《软件学报》
EI
CSCD
北大核心
2008年第2期301-313,共13页
基金
Supported by the National Natural Science Foundation of China under Grant No.60473051 (国家自然科学基金)
the China HP Co. and Peking University Joint Project (北京大学-惠普(中国)合作项目)
文摘
通过基于主动决策引擎日志的数据挖掘来找到分析规则的CUBE使用模式,从而为多维数据实视图选择算法提供重要依据;在此基础上设计了3A概率模型,并给出考虑CUBE受访概率分布的视图选择贪婪算法PGreedy(probability greedy),以及结合视图挽留原则的视图动态调整算法.实验结果表明,在实时主动数据仓库环境下,PGreedy算法比BPUS(benefit per unit space)算法具有更好的性能.
关键词
视图选择
实视图
数据仓库
主动决策引擎
分析规则
联机分析处理
Keywords
view selection
materialized view
data warehouse
active decision engine
analysis rule
OLAP (online analytical processing)
分类号
TP311
[自动化与计算机技术—计算机软件与理论]
题名 超市决策支持系统的数据仓库的设计与实现
被引量:5
11
作者
徐忠健
袁捷
陆菊康
陈毛狗
机构
上海大学计算机系
出处
《计算机工程与应用》
CSCD
北大核心
2003年第18期226-229,共4页
基金
上海市教委科技发展基金资助项目(编号:205043)
文摘
近年来,数据仓库理论和技术迅速发展,但国内,至少在商业销售行业,运用数据仓库理论和方法真正意义上建造面向决策支持系统(DSS)的数据仓库尚不多见。论文以某大型超市销售决策支持系统为背景,介绍了独立开发的面向超市销售决策支持系统的数据仓库的设计与实现方法,详述了数据仓库构建的几个关键技术。
关键词
数据仓库
决策支持系统
联机分析处理
实视图
超市
Keywords
Data Warehouse,DSS,OLAP,materialized view ,Supermarket
分类号
TP311
[自动化与计算机技术—计算机软件与理论]
题名 物化视图选择的预处理算法
被引量:8
12
作者
张柏礼
孙志挥
孙翔
机构
东南大学计算机科学与工程系
出处
《计算机研究与发展》
EI
CSCD
北大核心
2004年第10期1645-1651,共7页
基金
国家自然科学基金项目 ( 70 3 710 15 )
文摘
现有的静态物化视图选择算法的视图搜索代价较大 ,而导致算法的时间复杂度偏高 ,不能用于对物化视图进行在线动态调整 提出了一种物化视图选择的预处理算法———PMVS ,其中包括用户查询集动态调整算法QSDM、候选视图格构造算法CVLC和候选视图筛选算法CVF ,该算法可用做预处理过程对视图数量进行在线压缩 ,从而降低了静态算法的视图空间搜索代价和时间复杂度
关键词
物化视图
预处理算法
多维数据集
数据仓库
Keywords
materialized view
preprocessor
multi dimensional dataset
data warehouse
分类号
TP311.13
[自动化与计算机技术—计算机软件与理论]
题名 大型数据仓库实现技术的研究
被引量:7
13
作者
陈慧萍
陈岚峰
王建东
机构
河海大学计算机信息工程学院
南京航空航天大学信息工程学院
出处
《计算机工程与设计》
CSCD
北大核心
2006年第21期3956-3958,3961,共4页
基金
国家973重点基础研究发展计划基金项目(G1999032701)
文摘
大型数据仓库是实现海量数据存储的有效途径,但在大型数据仓库的实现中存在很多问题。在分析问题的基础上,对大型数据仓库的实现问题提出了一定的解决策略,对其中的几个关键技术即数据立方体的有效计算、增量式更新维护、索引优化、故障恢复、模式设计和查询优化的代价模型及元数据的定义和管理等作了研究。
关键词
数据仓库
联机分析处理
物化视图
数据立方体
索引
Keywords
data warehouse
OLAP (on line analytical processing)
materialized view
data cube
index
分类号
TP311
[自动化与计算机技术—计算机软件与理论]
题名 数据仓库中多数据源物化视图的一种有效更新算法
被引量:9
14
作者
王新军
洪晓光
王海洋
马绍汉
机构
山东大学计算机科学与技术学院
出处
《计算机研究与发展》
EI
CSCD
北大核心
2004年第5期874-879,共6页
基金
国家自然科学基金项目 ( 69973 0 2 8)
国家"八六三"高技术研究发展计划基金项目 ( 2 0 0 2AA4113 10 )
文摘
数据仓库中存储着大量的汇总数据以支持查询和相关决策的制定 ,这些汇总数据常常是定义在若干数据源上的物化视图 当数据源发生变化时 ,物化视图也需要相应的更新 ,这必然给数据仓库带来庞大的开销 ,因而如何有效地对物化视图进行更新成为一个非常重要的问题 利用BinPartition算法可以使计算费用达到最低 。
关键词
数据仓库
物化视图
基本关系
划分
Keywords
data warehouse
materialized view
base relation
partition
分类号
TP311
[自动化与计算机技术—计算机软件与理论]
题名 数据仓库中基于实体化辅助视图的视图增量维护
被引量:5
15
作者
胡孔法
董逸生
赵庆建
机构
东南大学计算机科学与工程系
东南大学经济管理学院
出处
《小型微型计算机系统》
CSCD
北大核心
2003年第2期251-254,共4页
基金
国家 8 63/CIMS项目基金 ( No.640 90 0 2 0 12 )资助
江苏省"九五"重点攻关课题资助 ( No.BG980 1)
江苏"十五"高科技项目 ( No:BG2 0 0 10 13)资助
文摘
为了加快对大量数据的查询处理速度 ,通常在数据仓库以实视图方式存储数据 .当基础数据发生变化时 ,这些实视图也必须随着更新 .因而视图自维护和一致性维护成为数据仓库的重要问题 .本文提出利用视图计算的中间结果创建辅助视图 ,在数据仓库中进行实体化 ,采用有效的增量维护算法计算实视图和辅助视图的精确变化 。
关键词
数据仓库
实体化辅助视图
视图增量维护
增量维护算法
数据源
数据库
Keywords
data warehouse
materialized view
auxiliary view
view self-maintainability
incremental maintenance algorithm
分类号
TP311.13
[自动化与计算机技术—计算机软件与理论]
题名 数据仓库技术概述
被引量:1
16
作者
刘静岩
王守茂
杨连贺
机构
天津大学管理学院
天津纺织工学院管理工程系
出处
《天津纺织工学院学报》
北大核心
2000年第4期84-86,共3页
文摘
分析数据仓库技术出现的社会环境 ,介绍数据仓库的主要内容 ,包括组成、基本结构和特征 .并简要介绍开发数据仓库的过程 .
关键词
数据仓库
元数据
数据集市
实视图
内容
结构
Keywords
data warehouse
metadata
data mart
materialized view
分类号
TP311.13
[自动化与计算机技术—计算机软件与理论]
题名 Oracle 9i高级复制技术及其应用
被引量:8
17
作者
徐秀华
文必龙
毕硕本
机构
大庆石油学院计算机工程与科学学院
南京师范大学地理信息科学学院
出处
《计算机应用研究》
CSCD
北大核心
2003年第11期107-109,共3页
文摘
Oracle9i针对分布式计算的需要,提供了一套功能强大的数据复制解决方案。概述了Oracle数据复制的分类、Oracle高级复制的发展及应用。介绍了Oracle9i高级复制技术中常用的基本概念、特点以及创建高级复制环境的过程,最后用一个实例说明了实体化视图复制并给出了部分脚本。Oracle9i高级复制技术支持多种应用,提高了应用系统的性能,并能更好地实现分布式计算。
关键词
ORACLE
9i
复制
主体
实体化视图
Keywords
Oracle 9i
Replication
Master
materialized view
分类号
TP311.3
[自动化与计算机技术—计算机软件与理论]
题名 数据仓库中的实视图的选取
被引量:2
18
作者
周丽娟
刘大昕
柳池
机构
哈尔滨工程大学计算机科学技术学院
哈尔滨理工大学计算机与控制学院
出处
《计算机工程与应用》
CSCD
北大核心
2003年第34期194-196,共3页
基金
黑龙江省教育厅科学技术研究项目(编号:9551104)
哈尔滨市科技攻关资助项目(编号:2002AA1CG059-2)
黑龙江省科技攻关资助项目(编号:GC03A126)
文摘
数据仓库设计中一个重要问题就是选取视图进行实体化。论文给出实视图代价估算模型,利用遗传规则,提出实视图选取的方法和策略。经实验证明,该算法达到了良好的效果,效率高。
关键词
数据仓库
实视图
视图选择
Keywords
data warehouse,materialized view ,view selection
分类号
TP311
[自动化与计算机技术—计算机软件与理论]
题名 一种数据仓库联机维护的集合刷新算法(英文)
被引量:6
19
作者
李子木
李磊
周兴铭
吴建平
机构
清华大学中国教育和科研计算机网络中心
清华大学公共管理学院
国防科技大学计算机学院
出处
《软件学报》
EI
CSCD
北大核心
2000年第12期1594-1597,共4页
基金
"九五"国防预研基金
文摘
提出了一种版本控制集合刷新算法 ( V SR A) .它采用增量维护、版本控制和批处理机制保证数据仓库的联机维护和数据一致性 .V SRA不仅减少了数据库和数据仓库之间的通信流量 ,而且提高了实体化视图的刷新效率 .用户可以随时使用 V SRA进行联机分析处理 。
关键词
数据仓库
联机维护
版本控制
集合刷新算法
Keywords
data warehouse
on line maintenance
materialized view
set
version controL
分类号
D923.41
[政治法律—民商法学]
TP274.2
[政治法律—法学]
题名 面向区块链的高效物化视图维护和可信查询
被引量:9
20
作者
蔡磊
朱燕超
郭庆兴
张召
金澈清
机构
华东师范大学数据科学与工程学院
出处
《软件学报》
EI
CSCD
北大核心
2020年第3期680-694,共15页
基金
国家自然科学基金(U1811264,U1911203,61972152,61532021)。
文摘
区块链具有去中心化、不可篡改和可追溯等特性,可应用于金融、物流等诸多行业.由于所有交易数据按照交易时间顺序存储在各个区块,相同类型的交易数据通常会散布在诸多区块之中,降低了面向历史区块的追溯查询的处理效率.索引构建和物化视图是提升查询性能的两种典型方法,但当待处理数据分布于多个区块时,使用索引无法改善I/O访问效率,而物化视图可有效应对这个问题.然而,由于区块链系统的特点明显区别于关系数据库,传统的面向关系数据库的物化视图技术无法被直接应用到区块链之中.鉴于此,首次提出一种面向区块链的高效物化视图机制,具有如下特征:(1)将视图维护操作与共识过程同时执行,降低该操作对系统性能的影响;(2)使用字典树加快以区块为单位的多物化视图维护进程;(3)以默克尔验证的方式确保物化结果不被恶意篡改,进而确保查询结果可信.所提出的物化视图维护机制已经被集成到一个区块链系统中,并通过实验来验证该机制的高效性.
关键词
物化视图
区块链
增量更新
视图维护
默克尔树
Keywords
materialized view
blockchain
incremental update
view maintenance
Merkle tree
分类号
TP18
[自动化与计算机技术—控制理论与控制工程]