基于关系数据库构造多维数据模型 被引量：7

1

作者 刘义 李亮 《计算机工程》 EI CAS CSCD 北大核心 2000年第9期21-22,114,共3页

该文重点研究基于关系型数据库如何组织数据以满足多维分析的需要，即如何对星形模式的维表进行分解，分解成多个具有层次关系的、标准化的、低粒度的维表，以易于实现由上而下（ｄｒｉｌｌ ｄｏｗｎ）及由下而上（ｒｏｌｌ ｕｈｐ）的... 该文重点研究基于关系型数据库如何组织数据以满足多维分析的需要，即如何对星形模式的维表进行分解，分解成多个具有层次关系的、标准化的、低粒度的维表，以易于实现由上而下（ｄｒｉｌｌ ｄｏｗｎ）及由下而上（ｒｏｌｌ ｕｈｐ）的数据挖掘（ｄａｔａ ｍｉｎｉｎｇ）． 展开更多

关键词 多维数据 关系数据库 数据模型

下载PDF 职称材料

基于HIS的医院数据仓库设计与实现 被引量：12

2

作者 叶明全 宋念东 《计算机工程与设计》 CSCD 北大核心 2008年第3期779-780,F0003,共3页

随着数字化医院建设的发展,医院信息系统得到了广泛应用。如何对医院信息系统产生海量数据进行科学的分析处理以便为决策者提供决策支持已经成为医疗领域面临的新课题。对医疗领域的数据仓库和联机分析处理的部分设计开发过程和关键技... 随着数字化医院建设的发展,医院信息系统得到了广泛应用。如何对医院信息系统产生海量数据进行科学的分析处理以便为决策者提供决策支持已经成为医疗领域面临的新课题。对医疗领域的数据仓库和联机分析处理的部分设计开发过程和关键技术进行了研究,提出采用需求驱动和数据驱动相结合的设计方法,对医院信息系统中数据进行提取、建模,并建立多维数据集。最后,设计并实现了一个医院数据仓库实例。 展开更多

关键词 数据仓库 联机分析处理 星型模型 医院信息系统 事实表 维表

下载PDF 职称材料

基于数据仓库的维度建模优化 被引量：4

3

作者 刘军 彭璐 《计算机与数字工程》 2008年第5期160-163,共4页

维度建模是个概念模型,星型架构可视为其逻辑模型,至于其物理实现的数据库可以是关系数据库、多维数据库或其他数据库。由于多维数据库发展的不成熟,目前,一般利用关系数据库使用星型模型来实现维度建模。

关键词 数据仓库 维度建模 星形模型 事实表 维表

下载PDF 职称材料

面向PHM的接触网数据仓库设计 被引量：4

4

作者 何冠霖 高仕斌 于龙 《电气化铁道》 2019年第5期6-11,16,共7页

电气化铁路接触网在日常运维过程中积累了海量的业务数据,这些数据能够为接触网PHM提供支持,但其通常具有多源、异构、种类繁多等特点。为了从全局出发对接触网业务数据进行综合分析研究,本文引入了数据仓库的概念,提出接触网数据仓库... 电气化铁路接触网在日常运维过程中积累了海量的业务数据,这些数据能够为接触网PHM提供支持,但其通常具有多源、异构、种类繁多等特点。为了从全局出发对接触网业务数据进行综合分析研究,本文引入了数据仓库的概念,提出接触网数据仓库的总体架构,并依据维度建模技术设计了接触网数据仓库,包括主题域、维度表、事实表和数据粒度的设计,最终形成了接触网数据仓库的星座数据模型。 展开更多

关键词 接触网 数据仓库 维度建模 PHM 事实表 维度表

下载PDF 职称材料

TPS SCADA系统中基于电能分析的数据仓库模型设计 被引量：4

5

作者 曾碧波 黄小红 +2 位作者 赵健伍 韩冬 卢国潇 《工业控制计算机》 2009年第9期37-39,共3页

主要是针对TPS SCADA系统的特点和不足,并结合高速铁路牵引供电的发展要求,研究了TPS SCADA系统中基于电能分析的数据仓库模型的设计。详细阐述了数据仓库的构建过程,说明了数据仓库技术如何将TPS SCADA系统中的操作型数据转换为分析型... 主要是针对TPS SCADA系统的特点和不足,并结合高速铁路牵引供电的发展要求,研究了TPS SCADA系统中基于电能分析的数据仓库模型的设计。详细阐述了数据仓库的构建过程,说明了数据仓库技术如何将TPS SCADA系统中的操作型数据转换为分析型数据,从而为充分利用TPS SCADA系统调度中心保存下来的大量数据筑下基础。对这些数据进行数据挖掘分析,能够为高速铁路牵引供电系统的安全和经济运行分析提供指导意见。 展开更多

关键词 SCADA系统 数据仓库 事实表 维度表

下载PDF 职称材料

数据仓库技术在税务征管业务中的应用 被引量：1

6

作者 王愚 邵后印 +2 位作者 陈勇孝 郎洪 段银田 《郑州工业大学学报》 2000年第4期70-73,共4页

分析了税务征管部门在计算机应用方面存在的问题 ,提出了在税务征收管理方面的数据仓库技术的解决方案 .根据计算机在税务征管部门应用的现状 ,规划了数据仓库的框架 ,建立了数据仓库的逻辑模型并作了物理实现 ,同时对于数据仓库的数据... 分析了税务征管部门在计算机应用方面存在的问题 ,提出了在税务征收管理方面的数据仓库技术的解决方案 .根据计算机在税务征管部门应用的现状 ,规划了数据仓库的框架 ,建立了数据仓库的逻辑模型并作了物理实现 ,同时对于数据仓库的数据迁移技术进行了一定的研究 .在税务征管部门建立数据仓库系统 。 展开更多

关键词 税务征管业务 数据仓库 主题 维度表 事实表 星形模式

下载PDF 职称材料

OLAP在联通经营分析系统中的应用 被引量：1

7

作者 王翔 杨开英 韩明 《电脑知识与技术》 2006年第3期10-10,64,共2页

OLAP是一种多维展示数据的技术,经常被用在数据仓库的前端报表展现。论文针对联通经营分析OLAP部分报表的需求,提出了一种由数据仓库到OLAP服务器的一套完整地解决方案,并对其中的关键技术的实现进行了阐述。详细讨论OLAP搭建的体系结构... OLAP是一种多维展示数据的技术,经常被用在数据仓库的前端报表展现。论文针对联通经营分析OLAP部分报表的需求,提出了一种由数据仓库到OLAP服务器的一套完整地解决方案,并对其中的关键技术的实现进行了阐述。详细讨论OLAP搭建的体系结构,以及与OLAP对应的数据仓库的分层结构,并就多维数据模型设计进行了一些探讨。 展开更多

关键词 OLAP DW 星型模型 事实表 维表

下载PDF 职称材料

数据挖掘在高职院校就业指导中的应用研究 被引量：3

8

作者 陈海宇 郭晓伟 《湖南工程学院学报（自然科学版）》 2011年第2期56-59,85,共5页

提高就业率是以培养应用型人才为宗旨的高职院校重要目标.将C45算法应用于就业信息统计分析中,通过对就业数据预处理、就业决策树的构建和剪枝,从其抽取分类规则,并指出决定就业单位类别的决策属性,得到一些较实用的预测毕业生就业动态... 提高就业率是以培养应用型人才为宗旨的高职院校重要目标.将C45算法应用于就业信息统计分析中,通过对就业数据预处理、就业决策树的构建和剪枝,从其抽取分类规则,并指出决定就业单位类别的决策属性,得到一些较实用的预测毕业生就业动态的规律,从而更好地服务于学生就业指导工作. 展开更多

关键词 决策树 数据挖掘 维度表 规则

下载PDF 职称材料

基于MDX及MOLAP实现多维数据分析 被引量：2

9

作者 张悦 赵永翼 刘燚 《沈阳航空工业学院学报》 2008年第1期70-73,共4页

传统的OLAP分析基于关系结构,过度依赖其数据源,影响分析效率。为此提出"独立型"数据分析的概念,采用MLOAP及父子维度等技术实现,并结合实际应用详细描述了整体解决方案,及其关键技术。该方案在实际应用中获得了理想的效果,... 传统的OLAP分析基于关系结构,过度依赖其数据源,影响分析效率。为此提出"独立型"数据分析的概念,采用MLOAP及父子维度等技术实现,并结合实际应用详细描述了整体解决方案,及其关键技术。该方案在实际应用中获得了理想的效果,不仅弥补了关系型OLAP分析存在的缺陷,而且实现了对宏观经济领域数据的多角度、多层次查询以及初步分析功能。 展开更多

关键词 多维数据分析 星型模式 事实表 维表 MDX

下载PDF 职称材料

地物波谱数据仓库系统设计研究

10

作者 帅艳民 朱启疆 +3 位作者 王培娟 王锦地 刘素红 白香花 《计算机工程与应用》 CSCD 北大核心 2003年第33期199-201,共3页

典型地物波谱特征是遥感仪器波段选择的依据,是遥感解译的基础。我国已经积累了大量的地物波谱数据,而且即将获得更多的地物波谱数据。如何有效地管理数据?从观测波谱数据中挖掘出观测间隙的波谱数据?该文按照参数配套原则,提出用树状... 典型地物波谱特征是遥感仪器波段选择的依据,是遥感解译的基础。我国已经积累了大量的地物波谱数据,而且即将获得更多的地物波谱数据。如何有效地管理数据?从观测波谱数据中挖掘出观测间隙的波谱数据?该文按照参数配套原则,提出用树状结构的事实表和分维表实现数据管理。基于相关作物模型和数据挖掘方法采掘观测间隙的光谱数据,并用北京顺义野外实验SE590波谱数据为实例介绍一种地物波谱数据仓库系统的设计。 展开更多

关键词 数据仓库 数据挖掘 数据库 分维表 事实表

下载PDF 职称材料

森林资源多维数据模型研究及应用

11

作者 陈艳 雷振宇 张旭 《林业科学》 EI CAS CSCD 北大核心 2006年第z1期127-132,共6页

针对目前森林资源规划设计调查数据管理与应用中存在的问题,将多维数据模型的理论和技术引入森林资源管理中,建立以森林资源二类调查数据为基础的包括空间、属性21个维度的多维森林资源数据模型。并在此基础上研究多维数据模型在林业管... 针对目前森林资源规划设计调查数据管理与应用中存在的问题,将多维数据模型的理论和技术引入森林资源管理中,建立以森林资源二类调查数据为基础的包括空间、属性21个维度的多维森林资源数据模型。并在此基础上研究多维数据模型在林业管理决策中的应用,实现了如下功能1)对资源数据的多级聚合、上卷/下钻、嵌套、旋转等操作;2)空间与属性数据的结合,通过维度的层次结构,建立面向国家、省、县等不同数据粒度的林业专题图;3)实现多层次、多角度组合进行数据分析的功能。 展开更多

关键词 森林资源规划设计调查数据 多维数据模型 维表 事实表 应用

下载PDF 职称材料

自动设计交互式、可执行的星型模型

12

作者 何宗刚 《辽宁师范大学学报（自然科学版）》 CAS 北大核心 2005年第2期187-188,共2页

自动设计交互式可执行的星型模型是一种基于Web用户界面的工具.用户可以根据现存的可操作的数据库的一些图表来设计生成数据仓库星型模型.本系统软件能帮助相关人员利用计算机,快速方便的对企业及相关部门所需的数据及信息进行管理、输... 自动设计交互式可执行的星型模型是一种基于Web用户界面的工具.用户可以根据现存的可操作的数据库的一些图表来设计生成数据仓库星型模型.本系统软件能帮助相关人员利用计算机,快速方便的对企业及相关部门所需的数据及信息进行管理、输入、输出、查找,使散乱的信息能够具体化、直观化、合理化. 展开更多

关键词 星型模型 自动设计 交互式 执行 基于Web 系统软件 数据仓库 用户界面 计算机 数据库 具体化 直观化 合理化 相关 信息 图表

下载PDF 职称材料

数据仓库中基于模糊数据的数据立方体设计

13

作者 常鑫 《计算机时代》 2010年第11期51-52,55,共3页

数据仓库中的维数据或度量数据都是确定的,其多维分析也是基于确定数据展开的。在现实中,由于环境的复杂与不确定性,常常需要对模糊数据进行多维分析。文章利用隶属度函数实现确定数据的模糊化,形成基于模糊数据的数据立方体,用以展开... 数据仓库中的维数据或度量数据都是确定的,其多维分析也是基于确定数据展开的。在现实中,由于环境的复杂与不确定性,常常需要对模糊数据进行多维分析。文章利用隶属度函数实现确定数据的模糊化,形成基于模糊数据的数据立方体,用以展开多维分析。 展开更多

关键词 数据仓库 数据立方体 模糊化 维表 多维分析

下载PDF 职称材料

基于元数据的维表标准化管理

14

作者 陈涛 《科技信息》 2012年第7期200-200,160,共2页

为了解决企业IT系统对维表缺乏统一管理的问题,提出了在各业务系统定义和使用的维表编码之上,借助元数据建立一套标准维表库,统一管理维度及维度映射关系,为目标系统解决了不同系统数据集中时维度映射带来的数据质量问题。并且本体系提... 为了解决企业IT系统对维表缺乏统一管理的问题,提出了在各业务系统定义和使用的维表编码之上,借助元数据建立一套标准维表库,统一管理维度及维度映射关系,为目标系统解决了不同系统数据集中时维度映射带来的数据质量问题。并且本体系提供了维表检索、维表影响分析、维表变更监控等应用,进一步提升了维护的便利性和数据质量问题发现的及时性。 展开更多

关键词 元数据 维表 标准化

下载PDF 职称材料

二维表快速排序的复杂度分析 被引量：17

15

作者 胡峰 王国胤 《计算机学报》 EI CSCD 北大核心 2007年第6期963-968,共6页

在假设二维表数据的排列服从均匀分布的条件下,分析了用快速排序方法对二维表进行排序的过程,给出了整个排序过程的时间复杂度和空间复杂度,得到的平均时间复杂度(O(n×(m+logn)))低于已有文献中对二维表排序的时间复杂度(O(m×... 在假设二维表数据的排列服从均匀分布的条件下,分析了用快速排序方法对二维表进行排序的过程,给出了整个排序过程的时间复杂度和空间复杂度,得到的平均时间复杂度(O(n×(m+logn)))低于已有文献中对二维表排序的时间复杂度(O(m×n×logn)),其中,m是二维表的关键字个数,n是二维表的记录数.仿真实验说明了文中结论的正确性.这一结果,将有助于进一步设计高效的海量数据分析方法. 展开更多

关键词 二维表 快速排序 时间复杂度 空间复杂度

下载PDF 职称材料

京东零售基于ClickHouse的增量刷岗方法

16

作者 季健 洪帅 +2 位作者 陈洪健 钱叶 刘传耀 《计算机应用》 CSCD 北大核心 2024年第S01期199-203,共5页

刷岗是对某个最小存货单位(SKU)对应的岗位等维度字段发生变更,按照最新的SKU岗位等维度数据回溯、覆写的过程,刷岗这一行为在典型的电商企业(京东(JD)、淘宝)较为常见。针对京东零售业务场景下明细表和维表数据量庞大导致刷岗操作的运... 刷岗是对某个最小存货单位(SKU)对应的岗位等维度字段发生变更,按照最新的SKU岗位等维度数据回溯、覆写的过程,刷岗这一行为在典型的电商企业(京东(JD)、淘宝)较为常见。针对京东零售业务场景下明细表和维表数据量庞大导致刷岗操作的运行时间过长的问题,提出一种基于ClickHouse的增量刷岗方法。首先,将维度表加载为ClickHouse字典表,采用明细表关联ClickHouse字典表的方法进行刷岗;其次,采用增量刷岗方法取代传统全量刷岗的形式,不仅提升刷岗效率,同时减少刷岗带来的集群资源消耗;最后,加入验数逻辑和并发控制机制保证数据准确性和集群的稳定。将该技术与传统的刷岗技术在实际业务生产场景中进行亿级数据的刷岗测试对比,实验结果表明,在硬件设备相同的情况下,提出的增量刷岗方法刷岗时间缩短80%,集群资源(CPU、内存)的使用减少50%,显著提高刷海量数据岗效率。 展开更多

关键词 ClickHouse 岗位维表 增量刷岗方法 版本化数据迁移 验数机制

下载PDF 职称材料

分布式环境下大规模维表关联技术优化 被引量：2

17

作者 赵恒泰 赵宇海 +3 位作者 袁野 季航旭 乔百友 王国仁 《计算机科学与探索》 CSCD 北大核心 2022年第2期337-347,共11页

分布式环境下大规模维表关联技术是当前在线大数据分析的关键技术之一,其广泛应用于实时推荐、实时分析等领域。维表关联是指将流数据和离线存储的维表数据进行关联,并根据这种关联进行数据处理。首先,对已有的维表连接技术方案进行了研... 分布式环境下大规模维表关联技术是当前在线大数据分析的关键技术之一,其广泛应用于实时推荐、实时分析等领域。维表关联是指将流数据和离线存储的维表数据进行关联,并根据这种关联进行数据处理。首先,对已有的维表连接技术方案进行了研究,调研了相关的优化技术和主流分布式引擎的设计路线,主要通过优化维表数据查询提高性能,但传统的优化方式受到维表规模和数据流速的限制。其次,针对已有优化技术在分布式环境下对集群整体考虑使用的不足,提出了适用于对离线的批数据和实时的流数据进行混合计算的计算模型,然后提出了一种单点读取维表数据,切分后进行分发和计算的维表关联数据方式,并优化了维表关联计算逻辑,使之能适应更高的维表规模,且不再局限于对数据的连接。最后,在流计算引擎Apache Flink上实现了提出的维表关联技术和传统维表关联技术,通过实验在阿里巴巴“双十一”产生的数据上对吞吐量和延迟进行了对比,证明了对面向分布式流计算的维表关联技术的优化的有效性。 展开更多

关键词 分布式计算 维表关联 缓存技术 Apache Flink

下载PDF 职称材料

一种构建StreamCube的超大维表连接算法 被引量：2

18

作者 甘亮 贾焰 +1 位作者 李爱平 金鑫 《计算机研究与发展》 EI CSCD 北大核心 2011年第1期55-67,共13页

表连接是关系数据库中最重要的操作之一,在数据流管理系统中同样重要.构建StreamCube的聚集查询时,数据流与超大维表(如IPaddress维表)作表连接将耗费大量有限的计算资源和内存.超大维表需划分为多个块,分块读入内存,造成磁盘I/O频繁.... 表连接是关系数据库中最重要的操作之一,在数据流管理系统中同样重要.构建StreamCube的聚集查询时,数据流与超大维表(如IPaddress维表)作表连接将耗费大量有限的计算资源和内存.超大维表需划分为多个块,分块读入内存,造成磁盘I/O频繁.根据维表及其连接键层的特性,降低维表与数据流连接的连接键冗余,将维表无损压缩为可装入内存的连接键范围维表(RJ-DT),引出数据流上非等值连接问题;并提出一种超大维表多表连接算法——多动态索引嵌套循环连接算法(multi dynamicindex nested-loopjoin),该算法实现数据流与压缩维表高效的非等值连接,并拓展为多表连接.理论分析及实验结果表明,该算法可使超大维表连接性能明显改善,最高可达到一个数量级的加速并具有很强的实用性. 展开更多

关键词 压缩维表 StreamCube 面向列的数据库 非等值连接 网络安全

下载PDF 职称材料

曲柄滑块机构和曲柄摇杆机构最小传动角等值线研究 被引量：1

19

作者 王允地 王帅 +3 位作者 董琦 王良文 石亚磊 王若澜 《机械设计与研究》 CSCD 北大核心 2022年第6期57-62,共6页

曲柄滑块机构和曲柄摇杆机构的传动角是机构传动的重要性能指标之一。当机构的传动角低于某一给定值时,则机构无法正常运动。研究了曲柄滑块机构和曲柄摇杆机构最小传动角等值线的简便绘制方法。详细推导了最小传动角等值线方程,绘制了... 曲柄滑块机构和曲柄摇杆机构的传动角是机构传动的重要性能指标之一。当机构的传动角低于某一给定值时,则机构无法正常运动。研究了曲柄滑块机构和曲柄摇杆机构最小传动角等值线的简便绘制方法。详细推导了最小传动角等值线方程,绘制了曲柄滑块机构和曲柄摇杆机构摆角分别为30°、60°、90°的最小传动角等值线图。给出了最小传动角为40°的曲柄摇杆机构设计域图。列出了结构紧凑的曲柄摇杆机构尺寸表。为按给定参数及传动性能设计四杆机构提供了一条新的重要途径。 展开更多

关键词 曲柄滑块机构 曲柄摇杆机构 最小传动角等值线 机构设计域图 紧凑机构尺寸表

原文传递

在VFP中跨平台实现与Excel数据的互相转换 被引量：1

20

作者 曹大林 丁浩 《交通与计算机》 2004年第5期118-121,共4页

讨论了 Excel工作表和 Visual Fox Pro二维表互相转换的理论基础及其实用意义 ,提出了在 Visual Fox Pro环境中使用跨平台编程来实现这两种数据格式互相转换的方法 。

关键词 跨平台 VFP 数据格式 EXCEL工作表 编程 使用 实用 二维表 优势 管理

下载PDF 职称材料