基于数据仓库的辅助决策系统设计与实现 被引量：28

1

作者 袁林 《电力系统自动化》 EI CSCD 北大核心 2001年第21期25-27,共3页

分析了电力调度对数据分析与处理的新需求 ,提出利用多年积累的自动化系统采集的数据进行综合分析、处理 ,提供电力调度辅助决策的设计思想 ;给出基于数据挖掘技术的电力调度数据仓库的基本特征 ,采用最新的 Microsoft SQL Server2 0 0 ... 分析了电力调度对数据分析与处理的新需求 ,提出利用多年积累的自动化系统采集的数据进行综合分析、处理 ,提供电力调度辅助决策的设计思想 ;给出基于数据挖掘技术的电力调度数据仓库的基本特征 ,采用最新的 Microsoft SQL Server2 0 0 0建立了电力调度数据仓库 ,提供基于浏览器和电子表格的联机分析工具 ;并在电网线损分析、电力负荷与气象相关性分析方面进行了数据挖掘的初步尝试。 展开更多

关键词 电力系统 调度自动化系统 决策支持系统 数据仓库

下载PDF 职称材料

超大型压缩数据仓库上的CUBE算法 被引量：12

2

作者 高宏 李建中 《软件学报》 EI CSCD 北大核心 2001年第6期830-839,共10页

数据压缩是提高多维数据仓库性能的重要途径 ,联机分析处理是数据仓库上的主要应用 ,Cube操作是联机分析处理中最常用的操作之一 .压缩多维数据仓库上的 Cube算法的研究是数据库界面临的具有挑战性的重要任务 .近年来 ,人们在 Cube算法... 数据压缩是提高多维数据仓库性能的重要途径 ,联机分析处理是数据仓库上的主要应用 ,Cube操作是联机分析处理中最常用的操作之一 .压缩多维数据仓库上的 Cube算法的研究是数据库界面临的具有挑战性的重要任务 .近年来 ,人们在 Cube算法方面开展了大量工作 ,但却很少涉及多维数据仓库和压缩多维数据仓库 .到目前为止 ,只有一篇论文提出了一种压缩多维数据仓库上的 Cube算法 .在深入研究压缩数据仓库上的 Cube算法的基础上 ,提出了产生优化 Cube计算计划的启发式算法和 3个压缩多维数据仓库上的 Cube算法 .所提出的Cube算法直接在压缩数据上执行 Cube操作 ,无须反压缩 ,提高了 Cube的处理速度 .这些算法适用于一大类常用的数据压缩方法 .对这些算法的 I/ O时间复杂性和 CPU时间复杂性进行了细致分析 ,并对这 3种算法和其他Cube算法进行了大量的实验研究 ,对性能进行了分析比较 .理论分析和实验结果都表明 ,所提出的 Cube算法的性能高于目前所有的 展开更多

关键词 数据仓库 数据压缩 联机分析处理 CUBE算法 数据库

下载PDF 职称材料

一种通用的多数据库间数据抽取方法及应用 被引量：16

3

作者 刘如九 张振山 柴天佑 《北京交通大学学报》 EI CAS CSCD 北大核心 2008年第4期14-18,共5页

为方便从多个异构的数据源中抽取转换数据、并加载到目标数据库,提出一种较为通用的抽取方法,并开发了工具软件.该方法基于客户端的方案,使用数据库驱动程序屏蔽异构数据库间的差异;数据的抽取、转换和加载由数据抽取软件执行;数据的抽... 为方便从多个异构的数据源中抽取转换数据、并加载到目标数据库,提出一种较为通用的抽取方法,并开发了工具软件.该方法基于客户端的方案,使用数据库驱动程序屏蔽异构数据库间的差异;数据的抽取、转换和加载由数据抽取软件执行;数据的抽取转换基于抽取规则,抽取规则采用可视化方法编辑生成;抽取规则存储于规则库,供多次调用修改;多个抽取任务组成抽取任务队列.开发的抽取工具软件DbBridge,支持从Oracle,SQL Server,SAS,Access,Excel等数据源抽取数据.软件成功应用于某数据仓库的建立及数据迁移工作. 展开更多

关键词 数据仓库 数据的抽取转换加载 数据迁移 关系型数据库

下载PDF 职称材料

用于不同密度聚类的多阶段等密度线算法 被引量：14

4

作者 赵艳厂 宋梅 +1 位作者 谢帆 宋俊德 《北京邮电大学学报》 EI CAS CSCD 北大核心 2003年第2期42-47,共6页

多阶段等密度线算法是在基于网格的等密度线聚类算法的基础之上,采用多阶段的聚类方式来解决分布密度变化较大的数据集的聚类分析问题.该算法能够找出分布密度不同的各种类别,并能很快地处理高维数据集.此外,还能有效地对时间序列数据... 多阶段等密度线算法是在基于网格的等密度线聚类算法的基础之上,采用多阶段的聚类方式来解决分布密度变化较大的数据集的聚类分析问题.该算法能够找出分布密度不同的各种类别,并能很快地处理高维数据集.此外,还能有效地对时间序列数据集进行聚类. 展开更多

关键词 数据挖掘 聚类 时间序列 多阶段等密度线算法 数据集 网格

下载PDF 职称材料

国家级地质环境数据仓库的设计与实现 被引量：15

5

作者 张鸣之 喻孟良 +6 位作者 王勇 李振华 梅红波 吴湘宁 肖敦辉 胡光道 谭照华 《地球科学（中国地质大学学报）》 EI CAS CSCD 北大核心 2013年第6期1347-1355,共9页

目前由中国地质环境监测院具体实施的国家级地质环境信息化建设工作,以构建国家级地质环境数据中心,实现全国地质环境信息的大综合、大协作和大集成为总体目标.其数据来源多样、数据类型复杂,且体量巨大、结构性和非结构性数据并存.为... 目前由中国地质环境监测院具体实施的国家级地质环境信息化建设工作,以构建国家级地质环境数据中心,实现全国地质环境信息的大综合、大协作和大集成为总体目标.其数据来源多样、数据类型复杂,且体量巨大、结构性和非结构性数据并存.为实现快速、充分地挖掘提炼数据中蕴含的价值,基于大数据思想,运用数据仓库技术,将各类操作型数据面向业务分析整合,形成协同有序的数据中心,按业务进一步划分为地质灾害防治、地下水监测与保护、矿山地质环境监测评价等4个数据集市,每个集市下又包含若干主题或二级主题.应用该数据仓库横向打通了各业务系统的数据,实现了不同维、不同粒度、不同侧面查询和观察数据的功能,为业务分析和决策支持提供了数据保障,为捕获地质环境业务数据价值提出了新模式. 展开更多

关键词 大数据 数据仓库 数据集市 数据挖掘 地下水 地质环境评价 地质灾害

原文传递

智能决策支持系统的发展现状及应用展望 被引量：13

6

作者 李红良 《重庆工学院学报（自然科学版）》 2009年第10期140-144,共5页

分析了智能决策支持系统的发展现状、相关技术、分类以及现阶段存在的问题.结合实际科研项目,利用数据仓库技术,设计了数据库实现方法和系统算法实现流程.以实例分析出发,将数据仓库技术应用于火箭发射支持系统中,效果显著.最后对智能... 分析了智能决策支持系统的发展现状、相关技术、分类以及现阶段存在的问题.结合实际科研项目,利用数据仓库技术,设计了数据库实现方法和系统算法实现流程.以实例分析出发,将数据仓库技术应用于火箭发射支持系统中,效果显著.最后对智能决策系统的未来趋势进行了展望. 展开更多

关键词 智能决策支持系统 数据仓库 人工智能 知识表示

下载PDF 职称材料

基于GPS的实时机车运行信息传输系统 被引量：10

7

作者 彭春华 蒋新华 《交通运输工程学报》 EI CSCD 2004年第2期111-114,共4页

利用铁路既有的列车无线调度通信系统和铁路分组交换网络,结合GPS技术,提出了一种实现机车运行信息实时传输的方案。采用话音压缩/扩展和数据同传,使无线列调在原来只传输话音的基础上增加了数据传送,数据仓库又使得这些信息能在铁路相... 利用铁路既有的列车无线调度通信系统和铁路分组交换网络,结合GPS技术,提出了一种实现机车运行信息实时传输的方案。采用话音压缩/扩展和数据同传,使无线列调在原来只传输话音的基础上增加了数据传送,数据仓库又使得这些信息能在铁路相关部门实现共享,可实现机车中低速率的数据传输。 展开更多

关键词 无线通信系统 数话同传 铁路分组交换网 数据仓库 差分GPS

下载PDF 职称材料

基于数据仓库的 DSS 框架 被引量：3

8

作者 李亚非 夏安邦 《南京建筑工程学院学报》 1998年第4期1-6,27,共7页

数据库技术的发展产生了数据仓库技术，决策支持系统面对日益庞大的数据分析问题，两者有机地结合为决策支持系统提供了一条新的途径。本文描述了一种基于数据仓库的决策支持系统框架，并对这一系统框架的各个组成部分进行了探讨。

关键词 数据仓库 决策支持系统 数据分析

下载PDF 职称材料

智慧校园背景下地方高校数据治理体系研究 被引量：9

9

作者 何显文 曾乐兰 胡文玉 《赣南师范大学学报》 2021年第6期110-113,共4页

高校智慧校园建设投入逐年加大,数据治理是新时期智慧校园建设的重要基础,将为学校教学、科研、管理和服务提供更加高效、精准的数据支撑.地方高校因重视和投入不足,数据治理工作滞后,导致数据质量差,标准不一,数据无法共享.针对智慧校... 高校智慧校园建设投入逐年加大,数据治理是新时期智慧校园建设的重要基础,将为学校教学、科研、管理和服务提供更加高效、精准的数据支撑.地方高校因重视和投入不足,数据治理工作滞后,导致数据质量差,标准不一,数据无法共享.针对智慧校园的应用需求,必须尽早开展数据治理工作,建立数据标准、数据资源体系和多样化的数据服务,从而为全校师生提供优质而精准的信息化服务. 展开更多

关键词 数据治理 数据标准 数据仓库 数据集市 中台建设

下载PDF 职称材料

电网高峰负荷分析决策平台的设计与实现 被引量：6

10

作者 胡政 柳进 胡林献 《电网技术》 EI CSCD 北大核心 2005年第6期58-62,共5页

介绍了电力系统高峰负荷分析决策平台的设计方案。首先通过系统分析电网高峰负荷特征信息量建立分析决策平台的系统结构框架;然后采用数据仓库技术设计包括历史数据和知识库的数据库,建立电力系统运行模式,研究电网运行的大量历史数据,... 介绍了电力系统高峰负荷分析决策平台的设计方案。首先通过系统分析电网高峰负荷特征信息量建立分析决策平台的系统结构框架;然后采用数据仓库技术设计包括历史数据和知识库的数据库,建立电力系统运行模式,研究电网运行的大量历史数据,采用数据挖掘方法进行负荷高峰前沿的负荷预测和状态预估,为电压态势分析及考虑网损修正的机组调度提供输入数据,最终为高峰调度的紧急状态提供决策支持信息。对实际系统的模拟分析结果表明,此平台能为调度运行人员提供有效的决策支持信息。 展开更多

关键词 高峰负荷 电网运行 电力系统 负荷预测 网损 调度运行 历史数据 决策 平台 信息

下载PDF 职称材料

杭州电力信息集成发展规划 被引量：5

11

作者 冯永青 夏翔 +5 位作者 周昱甬 胡列翔 孙宏斌 张伯明 朱成骐 潘坚跃 《电网技术》 EI CSCD 北大核心 2004年第19期51-54,共4页

随着杭州电力信息集成工作的开展,如何合理利用信息集成平台已成为亟待解决的问题。文中指出信息集成平台应当是现代能量控制中心集成化工作的组成部分,其作用是为进一步实现控制中心的信息化、智能化和自动化而服务文章中介绍了为杭州... 随着杭州电力信息集成工作的开展,如何合理利用信息集成平台已成为亟待解决的问题。文中指出信息集成平台应当是现代能量控制中心集成化工作的组成部分,其作用是为进一步实现控制中心的信息化、智能化和自动化而服务文章中介绍了为杭州电力信息集成的发展所做的规划工作即在符合 IEC 61970 标准的规范化集成平台上建立数据中心:第一阶段将建设数据仓库、拓扑检错、故障诊断和负荷特征提取功能;第二阶段将建设基于信息理论的操作票专家系统、电力用户特征提取、输电元件故障预警以及元件可靠性统计功能;第三阶段将建设运行风险评估功能和参数估计功能。 展开更多

关键词 电力用户 杭州 运行风险 信息集成平台 发展规划 规划工作 建设 特征提取 故障预警 数据仓库

下载PDF 职称材料

大数据时代“数据信息引导侦查”模式研究 被引量：6

12

作者 王玉宝 魏延明 《安徽警官职业学院学报》 2016年第3期45-49,52,共6页

"数据信息引导侦查"模式是"信息引导侦查"模式在大数据时代的创新产物,具有坚实的理论与实践基础。但是,"数据信息引导侦查"模式具有典型的双面性,需要明确合法性、及时性、准确性、适度性的原则。在实... "数据信息引导侦查"模式是"信息引导侦查"模式在大数据时代的创新产物,具有坚实的理论与实践基础。但是,"数据信息引导侦查"模式具有典型的双面性,需要明确合法性、及时性、准确性、适度性的原则。在实践架构中,"数据信息引导侦查"模式首先在共享层面要加快构建数据仓库,其次在分析层面要提升基于云计算的OLAP与数据挖掘技术,最后在制度层面要完善一体化机制、信息化主体、保密性制度。 展开更多

关键词 数据信息引导侦查 基本原则 数据仓库 数据分析

下载PDF 职称材料

智能化城市防灾救灾应急处理支持系统的研究 被引量：5

13

作者 谷岩 冯华 《计算机工程与设计》 CSCD 北大核心 2005年第6期1503-1505,1513,共4页

采用基于数据仓库的决策支持系统(DSS)的体系结构,综合运用数据仓库、联机分析处理(OLAP)、数据挖掘、信息智能推拉等多种信息处理技术,利用数据仓库技术集成各领域异构数据库系统,通过对大量的相关信息进行提取、清理、转换,并按决策... 采用基于数据仓库的决策支持系统(DSS)的体系结构,综合运用数据仓库、联机分析处理(OLAP)、数据挖掘、信息智能推拉等多种信息处理技术,利用数据仓库技术集成各领域异构数据库系统,通过对大量的相关信息进行提取、清理、转换,并按决策主题的需要对数据重新组织及统计、分析和处理,以多种形式灵活地生成各种应急方案、多维数据分析报表以及各种可以旋转的三维图形,形成综合的、面向分析的决策支持操作平台,具有可操作性的、能辅助决策者进行应急处理决策的支持系统。 展开更多

关键词 数据仓库 决策支持系统 数据挖掘 城市防灾救灾 联机分析处理

下载PDF 职称材料

人工智能在电力物资辅助评标中的应用 被引量：2

14

作者 杨灿魁 《集成电路应用》 2023年第4期394-397,共4页

阐述人工智能辅助评审系统的应用,系统参与评标专家现场评审,提高评审质量,对专家异常打分现象识别与监测。探讨建立专家打分数据仓库,实现以大数据分析与评价模型为基础的专家动态考核评价体系,提高评标效率和透明度,利用信息化手段实... 阐述人工智能辅助评审系统的应用,系统参与评标专家现场评审,提高评审质量,对专家异常打分现象识别与监测。探讨建立专家打分数据仓库,实现以大数据分析与评价模型为基础的专家动态考核评价体系,提高评标效率和透明度,利用信息化手段实现评标质量的动态评价。 展开更多

关键词 大数据分析 人工智能 评审系统 评价模型 数据仓库

下载PDF 职称材料

数据湖研究综述 被引量：1

15

作者 郭利荣 童坤坤 《软件工程》 2023年第12期6-11,共6页

数据湖作为一种新兴的数据处理和分析技术,在处理大规模数据集方面表现出了显著的性能优势。国内外相关文献对数据湖的架构、关键技术和应用进行了全面而深入的研究,为相关研究人员提供了有价值的参考。文章首先对数据湖与数据仓库的概... 数据湖作为一种新兴的数据处理和分析技术,在处理大规模数据集方面表现出了显著的性能优势。国内外相关文献对数据湖的架构、关键技术和应用进行了全面而深入的研究,为相关研究人员提供了有价值的参考。文章首先对数据湖与数据仓库的概念进行了辨析,明确了两者的区别;其次概述了当前流行的数据湖框架和架构,并详细阐述了数据湖的核心功能,包括多源数据的集成、高效的数据存储和计算能力,以及有效的数据治理等;最后探讨了数据湖研究未来的发展方向,如存算分离技术和云原生应用等。 展开更多

关键词 数据湖 数据存储 数据仓库 数据分析

下载PDF 职称材料

序列中的一般化局部序列模式发现(英文) 被引量：4

16

作者 靳晓明 陆玉昌 石纯一 《软件学报》 EI CSCD 北大核心 2003年第5期970-975,共6页

已有的时序序列中的模式发现方法主要关注于发现全局的模式,该模式的频繁度量通过扫描序列的所有记录产生.然而,仅在某个时间段中频繁的局部模式在实际中是广泛存在的,对其有效的发现是有意义的.介绍了一种在时序序列中发现一般化局部... 已有的时序序列中的模式发现方法主要关注于发现全局的模式,该模式的频繁度量通过扫描序列的所有记录产生.然而,仅在某个时间段中频繁的局部模式在实际中是广泛存在的,对其有效的发现是有意义的.介绍了一种在时序序列中发现一般化局部序列模式的方法.发现的模式具有形式在子序列s中,如果A发生,则B在时间T内发生.提出的方法包括一个支持高效的模式实例定位与计数的索引结构和一个2段的局部模式挖 掘算法.试验结果符合问题的定义,并证明了提出方法的优越性. 展开更多

关键词 时序序列 数据挖掘算法 一般化局部序列模式 数据库

下载PDF 职称材料

数据仓库系统中组件的实现技术研究 被引量：4

17

作者 谷岩 冯华 《计算机工程与设计》 CSCD 北大核心 2005年第7期1849-1852,共4页

数据仓库作为一项数据管理领域的新技术,从系统实现角度到目前为止还没有成熟、可靠且能被广泛接受的系统中各组件的构建标准。为此根据数据仓库系统总体框架,提出数据仓库系统中各主要组件的实现技术和方法。以此为基础,并结合已有的... 数据仓库作为一项数据管理领域的新技术,从系统实现角度到目前为止还没有成熟、可靠且能被广泛接受的系统中各组件的构建标准。为此根据数据仓库系统总体框架,提出数据仓库系统中各主要组件的实现技术和方法。以此为基础,并结合已有的业务系统,企业可以逐步构建完整的、健壮的数据仓库系统。 展开更多

关键词 数据仓库 ELT组件 MOLAP ROLAP 元数据管理

下载PDF 职称材料

基于大数据云平台的深度学习预测模型研究 被引量：4

18

作者 陈亮亮 邵雄凯 高榕 《软件导刊》 2020年第5期42-47,共6页

近年来,随着云计算、大数据等技术的迅猛发展,如何快速、有效地从纷繁复杂的数据中获取有价值的信息成为当前大数据应用的关键问题。为此,对基于大数据云平台的深度学习预测模型进行研究,以对未来序列数据走势进行有效预测。首先对几种... 近年来,随着云计算、大数据等技术的迅猛发展,如何快速、有效地从纷繁复杂的数据中获取有价值的信息成为当前大数据应用的关键问题。为此,对基于大数据云平台的深度学习预测模型进行研究,以对未来序列数据走势进行有效预测。首先对几种基于深度学习的长短序列预测模型进行对比分析,分析其与传统预测模型的区别及优势,提出一种加入dropout的轻量级GRU预测模型。采用代表性天气数据作为实验对象,实验结果表明,该方法的实验预测指标MAE(平均绝对误差)的平均值相比传统预测方法有所提高,从而有效验证了轻量级GRU预测方法的正确性与有效性。 展开更多

关键词 大数据 云平台 深度学习 预测模型 数据仓库

下载PDF 职称材料

基于hive的日志仓库构建研究 被引量：4

19

作者 蒋焕亮 《计算机时代》 2016年第11期21-24,共4页

随着电商平台、门户网站的访问量越来越大,产生的日志信息也越来越多,传统的日志文件处理方法无法满足需求。通过分析Hadoop分布式文件系统(HDFS)、并行计算框架Map Reduce和数据仓库Hive技术特点,研究日志仓库的体系结构及关键技术并... 随着电商平台、门户网站的访问量越来越大,产生的日志信息也越来越多,传统的日志文件处理方法无法满足需求。通过分析Hadoop分布式文件系统(HDFS)、并行计算框架Map Reduce和数据仓库Hive技术特点,研究日志仓库的体系结构及关键技术并建立日志数据仓库。与数据库相比,数据处理效率显著提升。 展开更多

关键词 日志 数据仓库 MAPREDUCE Hive

下载PDF 职称材料

SCDDWS中的数据操纵以及查询优化 被引量：2

20

作者 高爱强 李庆忠 +1 位作者 杨少军 洪晓光 《计算机工程与应用》 CSCD 北大核心 2002年第16期250-253,共4页

研究和开发概念设计的CAD工具已经成为当今的热点,由于概念设计是一个不断决策的过程,而数据仓库和OLAP(OnLineAnalyticalProcessing)技术是开发决策支持系统的重要技术,因而笔者建立了一个数据仓库系统用以辅助概念设计决策,称该数据... 研究和开发概念设计的CAD工具已经成为当今的热点,由于概念设计是一个不断决策的过程,而数据仓库和OLAP(OnLineAnalyticalProcessing)技术是开发决策支持系统的重要技术,因而笔者建立了一个数据仓库系统用以辅助概念设计决策,称该数据仓库系统为SCDDWS。文章首先介绍该仓库系统中所提供的数据操作命令。其中,除已有的5种OLAP典型操作外,又提出了两个新的数据操作命令,使得用户能够方便和高效地获得所需的数据。然后介绍一种改进的优化算法,它用来建立和保存一些多维联合的链接以便得到较高的查询效率。 展开更多

关键词 SCDDWS 数据操纵 查询优化 数据仓库 多维链接 贪心算法 数据库管理系统

下载PDF 职称材料