电子测试
電子測試
전자측시
ELECTRONIC TEST
2015年
11期
46-48,41
,共4页
Hadoop%海量日志处理%查询%模型设计
Hadoop%海量日誌處理%查詢%模型設計
Hadoop%해량일지처리%사순%모형설계
Hadoop%log processing%query%model design
日志分析对于在用户搜索领域有着很重要的意义，目前的日志分析系统有着不少弊端，比如：海量数据无法处理、离线处理模式、处理时延长等。对日志数据采用分级归档，可以实现大数据的分级优化处理。本文通过提出在一种基于Hadoop的大数据日志分析模型，并对其业务处理流程以及功能架构进行深入分析，实验结果反映出该系统扩展性强、海量数据处理能力卓越、满足在线处理等，具有良好的可行性和有效性。
日誌分析對于在用戶搜索領域有著很重要的意義，目前的日誌分析繫統有著不少弊耑，比如：海量數據無法處理、離線處理模式、處理時延長等。對日誌數據採用分級歸檔，可以實現大數據的分級優化處理。本文通過提齣在一種基于Hadoop的大數據日誌分析模型，併對其業務處理流程以及功能架構進行深入分析，實驗結果反映齣該繫統擴展性彊、海量數據處理能力卓越、滿足在線處理等，具有良好的可行性和有效性。
일지분석대우재용호수색영역유착흔중요적의의，목전적일지분석계통유착불소폐단，비여：해량수거무법처리、리선처리모식、처리시연장등。대일지수거채용분급귀당，가이실현대수거적분급우화처리。본문통과제출재일충기우Hadoop적대수거일지분석모형，병대기업무처리류정이급공능가구진행심입분석，실험결과반영출해계통확전성강、해량수거처리능력탁월、만족재선처리등，구유량호적가행성화유효성。
Log analysis has a very important significance for the field in the user search,the current log analysis system has a lot of disadvantages,such as:massive data cannot be processed,off-line processing mode,processing delay and other. the classification of log data archiving, in order to achieve big data classification optimization of growing demand.It puts on a large Hadoop log data based on the analysis model,and the business processing process and functional structure of the in-depth analysis,experimental results show the system expansion and strong, massive data processing ability of excellence,online processing,with good feasibility and effectiveness.
