计算机工程
計算機工程
계산궤공정
COMPUTER ENGINEERING
2015年
6期
56-60,65
,共6页
信息集成%增量检测%冗余信息%日志分析%日志抽取%净效应
信息集成%增量檢測%冗餘信息%日誌分析%日誌抽取%淨效應
신식집성%증량검측%용여신식%일지분석%일지추취%정효응
information integration%incremental detection%redundant information%log analysis%log extraction%net effect
通过扫描数据库日志文件可以捕获变化数据,但已有研究仅适应某种特定类型的数据库管理系统并且缺乏对冗余信息的消除。针对上述不足,提出一个基于日志分析的增量数据检测及其净效应处理通用模型,描述增量检测过程中的通用处理步骤,即日志抽取、日志分析和净效应处理3个模块。通过实验对净效应处理速度、冗余数据压缩率、网络传输速度等因素进行分析,结果表明,净效应处理可以有效地减少数据的网络传输时间和更新时间,提高运行效率。
通過掃描數據庫日誌文件可以捕穫變化數據,但已有研究僅適應某種特定類型的數據庫管理繫統併且缺乏對冗餘信息的消除。針對上述不足,提齣一箇基于日誌分析的增量數據檢測及其淨效應處理通用模型,描述增量檢測過程中的通用處理步驟,即日誌抽取、日誌分析和淨效應處理3箇模塊。通過實驗對淨效應處理速度、冗餘數據壓縮率、網絡傳輸速度等因素進行分析,結果錶明,淨效應處理可以有效地減少數據的網絡傳輸時間和更新時間,提高運行效率。
통과소묘수거고일지문건가이포획변화수거,단이유연구부괄응모충특정류형적수거고관리계통병차결핍대용여신식적소제。침대상술불족,제출일개기우일지분석적증량수거검측급기정효응처리통용모형,묘술증량검측과정중적통용처리보취,즉일지추취、일지분석화정효응처리3개모괴。통과실험대정효응처리속도、용여수거압축솔、망락전수속도등인소진행분석,결과표명,정효응처리가이유효지감소수거적망락전수시간화경신시간,제고운행효솔。
Change data can be captured by scanning log files in the database. However, methods proposed in most existing studies have many limitations and can only be applied to certain types of DBMS. Moreover, they have not provided effective ways of eliminating redundant information. This paper, while analyzing these limitations, proposes a universal model based on log analysis for incremental data detection and its net effect processing,and describes the typical procedures for incremental detection,which are log extraction,log analysis and net effect handling. Finally,experiments are also conducted to analyze the net effect handling speed,redundant data compression ratio,network transmission speed and other factors,through which show that the net effect handling helps to decrease the time of network transmission and data update,and improves operating efficiency.