-
题名一种关系数据库数据抽取模型研究
被引量：4
- 1
-
-
作者
刘赛
聂庆节
刘军
刘嘉华
姜建飞
付晨
-
机构
南京南瑞集团公司信息通信技术分公司
国网江西省电力公司信息通信分公司
-
出处
《电子设计工程》
2018年第6期16-21,共6页
-
基金
国家电网公司总部科技项目(0711-15OTL173)
-
文摘
在关系型数据库中数据库通过Redo日志来实现事物的快速提交,并记录事物的操作过程与操作内容。针对关系数据库数据抽取过程中问题经常发生复制中断问题,采用数据库在线Redo日志增量数据快速定位于解析技术,设计一种Redo日志数据抽取模型,给出了INSERT、DELETE、UPDATE 3种DML操作日志数据捕获方法。,通过与OGG抽取软件进行比对测试,验证了该Redo日志数据抽取技术的可行性与可靠性。最后展望了下一步的研究方向。
-
关键词
redo日志抽取
日志定位
日志解析
SQL合成
数据交互
-
Keywords
redo log extraction
log location
log analysis
SQL synthesis
data exchange
-
分类号
TN02
[电子电信—物理电子学]
-
-
题名多源数据库数据复制模型
被引量：3
- 2
-
-
作者
刘赛
聂庆节
岳峻松
刘军
姜建飞
-
机构
南京南瑞集团公司
-
出处
《计算机与现代化》
2017年第9期45-49,共5页
-
基金
国家电网公司经费支持项目
-
文摘
针对跨数据库平台、跨操作系统平台、跨硬件平台数据交互需求,提出一种基于日志解析的数据交互复制模型。该模型通过对数据库Redo日志的分析与定位,从中抽取增量变化日志数据,然后采用并行同步传输的方式将抽取的日志数据传输到预处理端,在预处理端进行原始数据的事务合并处理,然后在装载发布端通过数据订阅的形式获取预处理端的队列数据,数据内容放入本地缓存队列文件,最后对本地缓存队列文件进行数据转换、数据装载入库,从而实现数据交互复制。通过测试对比分析,验证了该模型不但可以保证两端数据一致性,而且还具有较低的数据复制延时。
-
关键词
redo日志抽取
数据预处理
数据订阅
数据装载
数据一致性
复制延时
-
Keywords
redo log extraction
data preprocessing
data subscription
data loading
data consistency
replication delay
-
分类号
TP311.13
[自动化与计算机技术—计算机软件与理论]
-
