基于数据库日志的变化数据捕获研究

被引:21
作者
邹先霞 [1 ,2 ]
贾维嘉 [1 ,3 ]
潘久辉 [2 ]
机构
[1] 中南大学信息科学与工程学院
[2] 暨南大学计算机系
[3] 香港城市大学计算机系
基金
中央高校基本科研业务费专项资金资助;
关键词
变化数据捕获; 数据库日志; 日志扫描; 可靠性;
D O I
暂无
中图分类号
TP311.13 [];
学科分类号
1201 ;
摘要
变化数据捕获方法是数据集成基础设施的战略组成部分,不断推动ETL、EAI等技术的发展.许多数据库厂商都提供了自己的CDC(Change data capture)产品,但只限于针对本身的数据库系统,价格也比较昂贵.虽然通过扫描数据库日志文件可以捕获变化数据,但大多数数据库系统都不提供日志文件的内部格式而只是提供日志访问的程序接口,如Oracle,SQL Server和DB2等.这些提供的接口有的访问活动日志,有的访问稳定日志,有的访问归档日志,因此很难保证读取日志文件的可靠性.现有的研究主要是如何利用程序应用接口读取日志文件,忽略了对可靠性的分析.本文针对读取不同类型的日志文件的可靠性条件进行了分析,提出了可靠读取规则及读取算法;并提出了从日志文件中有效抽取变化数据算法,实验证明了可靠性分析模型.
引用
收藏
页码:531 / 536
页数:6
相关论文
共 2 条
[1]   MS SQL Server 2000日志分析方法的研究与实现 [J].
张晓刚 ;
潘久辉 .
计算机工程与设计, 2006, (19) :3557-3560
[2]   基于Oracle的日志分析器 [J].
梁为 ;
凌怀新 ;
张晓刚 ;
潘久辉 .
计算机应用, 2003, (07) :121-123+126