-
题名一种轻量级电网实时数据ETL系统的设计与实现
被引量：8
- 1
-
-
作者
段成
王增平
吴克河
-
机构
华北电力大学电气与电子工程学院
北京市电力信息技术工程研究中心
华北电力大学控制与计算机工程学院
-
出处
《电力系统保护与控制》
EI
CSCD
北大核心
2010年第18期174-177,182,共5页
-
文摘
以某省电网实时数据监测系统的数据中心建设项目为背景,提出了一种轻量级的,适合于电网实时数据迁移与同步更新的ETL系统解决方案。系统支持多种关系型数据库和数据文件,提供全量、增量、主细表等多种自定义模式数据迁移方案。系统利用JDBC数据库访问技术、JSR-166的Util.Concurrent并发线程包以及SWT技术,结合元数据的管理,解决了异构数据的快速抽取、清洗转换与加载、任务的调度和跨平台运行的问题,并在实际应用中表现出了实用性和稳定性。
-
关键词
etl系统
异构数据
增量
任务调度
跨平台
-
Keywords
etl system
heterogeneous data
incremental
task scheduling
cross-platform
-
分类号
TM769
[电气工程—电力系统及自动化]
-
-
题名基于云计算的数据仓库ETL系统研究与优化
被引量：4
- 2
-
-
作者
陈献辉
张治元
刘丽波
-
机构
湖南邮电职业技术学院计算机信息工程系
-
出处
《湘南学院学报》
2014年第2期26-30,56,共6页
-
基金
湖南省教育科学十二五规划课题(XJK013CXX002
XJK012CZJ037)
-
文摘
随着数据仓库中数据规模的日益膨胀和数据实时性需求的不断提高,如何改进ETL体系已经成为保障数据仓库数据质量的关键内容.本文通过借鉴云计算模式强大的计算能力和存储能力,拟构建一种基于云计算的数据仓库ETL系统,该系统的基本理念是在充分利用现有设备、资源和技术的基础上,通过利用云计算"低硬件成本、高综合利用率、可扩展性强、高可靠性"的特点,优化现有ETL工作流程,以提升数据仓库ETL性能和效率.
-
关键词
云计算
数据仓库
etl系统
架构
-
Keywords
cloud computing
data warehouse
etl system
construction
-
分类号
TP311.138
[自动化与计算机技术—计算机软件与理论]
-
-
题名Petrel建模成果ETL系统的设计与实现
- 3
-
-
作者
刘万伟
刘瑞超
富宇
-
机构
大庆油田勘探开发研究院
东北石油大学计算机学院
-
出处
《石油工业计算机应用》
2016年第1期25-27,3,共3页
-
文摘
随着油藏地质建模技术在油田得到了广泛的应用,大量的建模成果需要进行管理。利用Ocean将Petrel的建模成果提取出来,保存到数据库中,可以极大地提高建模成果的可复用性。通过对Petrel的构造模型、属性模型、速度模型采用不同的处理方法,实现了ETL系统,并采用多种优化措施提高成果信息的查询效率。
-
关键词
建模成果管理
Petrel建模软件
Ocean开发
etl系统
-
Keywords
modeling result management
Petrel modeling software
Ocean development
etl system
-
分类号
TP391
[自动化与计算机技术—计算机应用技术]
-
-
题名一线生产系统关联网信息仓库设计与研究
- 4
-
-
作者
袁秋华
安信卓
-
机构
中国农业银行数据中心
-
出处
《中国金融电脑》
2022年第3期75-78,共4页
-
文摘
一线生产系统关联网信息仓库的设计,旨在通过一体化视图展现运行系统涉及的业务、逻辑、运维信息,把一个个信息孤岛连接成一个整体网络,从应用系统层面出发,整合系统的业务、风险、运营时间、业务高峰期、客户范围、运行维护工具、运维质量、灾备质量、网络通道、机房部署、告警信息、批量关联等内容,形成一个信息网络,透视关联性的信息,整合所有可索取到的信息资源,并有效关联。
-
关键词
数据仓库
etl系统
数据模型
生产运行
数字化转型
决策支持
-
分类号
TP311.13
[自动化与计算机技术—计算机软件与理论]
-
-
题名基于CWM的商场数据仓库ETL系统架构研究
被引量：4
- 5
-
-
作者
雷启明
-
机构
乐山师范学院
-
出处
《商场现代化》
北大核心
2008年第26期39-40,共2页
-
文摘
在完成商场数据仓库数据模型的设计与构建后,数据的抽取、转换、加载成为建立数据仓库最重要的工作。针对商场数据仓库对ETL技术的要求,在研究CWM工作机制的基础上,提出了基于CWM的商场数据仓库ETL系统架构的设计。通过分析CWM对ETL提供的技术支持,论证了系统架构的可行性和科学性。
-
关键词
商场数据仓库
etl
元数据
CWM
etl系统架构
-
分类号
TP311.13
[自动化与计算机技术—计算机软件与理论]
TP393.4
[自动化与计算机技术—计算机科学与技术]
-
-
题名ETL国产服务器替代进口服务器的研究
被引量：1
- 6
-
-
作者
王琰
朱顺痣
-
机构
厦门理工学院计算机与信息工程学院
-
出处
《厦门理工学院学报》
2015年第1期79-85,共7页
-
基金
国家自然科学基金项目(61373147)
-
文摘
构建中国建设银行新疆分行将ETL应用从进口服务器迁移到国产服务器的迁移方案,搭建进口服务器环境和国产服务器环境的运行比较平台.根据工作流类型,比较典型工作流在两环境下的运行情况,发现虽然国产服务器基于内存处理的性价比要差于进口服务器,但若与生产环境中的进口服务器平台相比,无论从性能,还是从健壮性角度,国产服务器均可独立承担起银行ETL应用的工作.
-
关键词
银行etl系统
服务器国产化
健壮性
性能
数据迁移
-
Keywords
banking etl system
server localization, robustness
performance, data migration
-
分类号
TP368.5
[自动化与计算机技术—计算机系统结构]
-
-
题名浅析ETL系统在企业信息化中的使用
- 7
-
-
作者
成世明
-
机构
辽宁省大连市中山区大连测控技术研究所
-
出处
《经济与社会发展研究》
2020年第3期0134-0134,共1页
-
文摘
在企业管理中,信息是一项不可或缺的重要的资源,信息应当作为企业领导层决策的重要参考资料。在目前已经有许多企业开始构建自己的信息系统来实现对企业内部相关事务产生的信息进行记录和处理。有关数据表明,在短短几年内,企业信息系统产生的数据必然会呈现一种爆炸式的大幅度增长,而其中蕴含着的商业价值还需要进一步的开发和利用。据不完全统计,现在多数企业仅仅只能够利用企业内部整体数据的 2% ~ 4%,也就是说企业依然没有合适的渠道和方法来更合理地对内部信息资源加以利用,这样就导致企业的时间成本乃至资金成本会带来隐形的损失。
-
关键词
企业
etl系统
-
分类号
C
[社会学]
-
