计算机与数字工程
計算機與數字工程
계산궤여수자공정
COMPUTER & DIGITAL ENGINEERING
2014年
12期
2373-2378
,共6页
大规模数据中心%监控数据%性能数据%storm%并发处理
大規模數據中心%鑑控數據%性能數據%storm%併髮處理
대규모수거중심%감공수거%성능수거%storm%병발처리
large scale data center%monitoring data%performance data%storm%concurrent processing
在大规模数据中心场景下,采集系统要实时并发处理大规模数据来保证监控数据的实时性。论文首先描述了大规模数据中心监控数据的规模,并指出监控数据的并发处理中存在的问题,然后针对问题提出关键技术和解决方案,进而基于上述研究结果进行架构设计。经过实验验证Storm应用于大规模数据中心监控数据的并发处理业务,可以保证监控数据的实时性,并且系统具备一定的扩展性。
在大規模數據中心場景下,採集繫統要實時併髮處理大規模數據來保證鑑控數據的實時性。論文首先描述瞭大規模數據中心鑑控數據的規模,併指齣鑑控數據的併髮處理中存在的問題,然後針對問題提齣關鍵技術和解決方案,進而基于上述研究結果進行架構設計。經過實驗驗證Storm應用于大規模數據中心鑑控數據的併髮處理業務,可以保證鑑控數據的實時性,併且繫統具備一定的擴展性。
재대규모수거중심장경하,채집계통요실시병발처리대규모수거래보증감공수거적실시성。논문수선묘술료대규모수거중심감공수거적규모,병지출감공수거적병발처리중존재적문제,연후침대문제제출관건기술화해결방안,진이기우상술연구결과진행가구설계。경과실험험증Storm응용우대규모수거중심감공수거적병발처리업무,가이보증감공수거적실시성,병차계통구비일정적확전성。
In large‐scale data center applications ,in order to ensure real‐time of business for the monitoring data ,the mass data should be concurrently processed in real time in the data acquisition system .In this paper ,at first ,the scale of the monitoring data is explained ,and the problems of concurrent processing for monitoring data are pointed out ,and then the key technologies and solutions are proposed .At last ,system architectures are designed based on the solutions .The experiments show that storm is efficient to guarantee the real‐time of monitoring data used in concurrent data processing for the large‐scale data center ,and the system is scalable .