小型微型计算机系统
小型微型計算機繫統
소형미형계산궤계통
MINI-MICRO SYSTEMS
2012年
3期
531-536
,共6页
变化数据捕获%数据库日志%日志扫描%可靠性
變化數據捕穫%數據庫日誌%日誌掃描%可靠性
변화수거포획%수거고일지%일지소묘%가고성
变化数据捕获方法是数据集成基础设施的战略组成部分,不断推动ETL、EAI等技术的发展.许多数据库厂商都提供了自己的CDC(Change data capture)产品,但只限于针对本身的数据库系统,价格也比较昂贵.虽然通过扫描数据库日志文件可以捕获变化数据,但大多数数据库系统都不提供日志文件的内部格式而只是提供日志访问的程序接口,如Oracle,SQL Server和DB2等.这些提供的接口有的访问活动日志,有的访问稳定日志,有的访问归档日志,因此很难保证读取日志文件的可靠性.现有的研究主要是如何利用程序应用接口读取日志文件,忽略了对可靠性的分析.本文针对读取不同类型的日志文件的可靠性条件进行了分析,提出了可靠读取规则及读取算法;并提出了从日志文件中有效抽取变化数据算法,实验证明了可靠性分析模型.
變化數據捕穫方法是數據集成基礎設施的戰略組成部分,不斷推動ETL、EAI等技術的髮展.許多數據庫廠商都提供瞭自己的CDC(Change data capture)產品,但隻限于針對本身的數據庫繫統,價格也比較昂貴.雖然通過掃描數據庫日誌文件可以捕穫變化數據,但大多數數據庫繫統都不提供日誌文件的內部格式而隻是提供日誌訪問的程序接口,如Oracle,SQL Server和DB2等.這些提供的接口有的訪問活動日誌,有的訪問穩定日誌,有的訪問歸檔日誌,因此很難保證讀取日誌文件的可靠性.現有的研究主要是如何利用程序應用接口讀取日誌文件,忽略瞭對可靠性的分析.本文針對讀取不同類型的日誌文件的可靠性條件進行瞭分析,提齣瞭可靠讀取規則及讀取算法;併提齣瞭從日誌文件中有效抽取變化數據算法,實驗證明瞭可靠性分析模型.
변화수거포획방법시수거집성기출설시적전략조성부분,불단추동ETL、EAI등기술적발전.허다수거고엄상도제공료자기적CDC(Change data capture)산품,단지한우침대본신적수거고계통,개격야비교앙귀.수연통과소묘수거고일지문건가이포획변화수거,단대다수수거고계통도불제공일지문건적내부격식이지시제공일지방문적정서접구,여Oracle,SQL Server화DB2등.저사제공적접구유적방문활동일지,유적방문은정일지,유적방문귀당일지,인차흔난보증독취일지문건적가고성.현유적연구주요시여하이용정서응용접구독취일지문건,홀략료대가고성적분석.본문침대독취불동류형적일지문건적가고성조건진행료분석,제출료가고독취규칙급독취산법;병제출료종일지문건중유효추취변화수거산법,실험증명료가고성분석모형.