计算机与数字工程
計算機與數字工程
계산궤여수자공정
COMPUTER & DIGITAL ENGINEERING
2014年
4期
678-684
,共7页
大数据%Hadoop%对象化并行计算%对象化并行计算框架
大數據%Hadoop%對象化併行計算%對象化併行計算框架
대수거%Hadoop%대상화병행계산%대상화병행계산광가
big data%Hadoop%objectification parallel computing%architecture of objectification parallel computing
大数据计算是物联网和云计算的研究热点之一.针对大数据中的结构化和非结构化数据,Hadoop技术在实时性要求不高的场景中应用效果较好,但在实时性要求高的场景中不能满足需求.针对这一问题,论文利用对象化并行计算提出了一种高效的实时性解决方案.对象化并行计算融合了对象化、Hadoop、内存计算等技术.在方案中,业务数据格式化成对象并分布式存储到集群计算机内存中,任务拆分成子任务通过并行计算来完成.对象化并行计算系统应用在国家电网公司电网资产质量监督管理系统中,应用效果表明该方案可大幅度提升系统性能,满足实时性需求.
大數據計算是物聯網和雲計算的研究熱點之一.針對大數據中的結構化和非結構化數據,Hadoop技術在實時性要求不高的場景中應用效果較好,但在實時性要求高的場景中不能滿足需求.針對這一問題,論文利用對象化併行計算提齣瞭一種高效的實時性解決方案.對象化併行計算融閤瞭對象化、Hadoop、內存計算等技術.在方案中,業務數據格式化成對象併分佈式存儲到集群計算機內存中,任務拆分成子任務通過併行計算來完成.對象化併行計算繫統應用在國傢電網公司電網資產質量鑑督管理繫統中,應用效果錶明該方案可大幅度提升繫統性能,滿足實時性需求.
대수거계산시물련망화운계산적연구열점지일.침대대수거중적결구화화비결구화수거,Hadoop기술재실시성요구불고적장경중응용효과교호,단재실시성요구고적장경중불능만족수구.침대저일문제,논문이용대상화병행계산제출료일충고효적실시성해결방안.대상화병행계산융합료대상화、Hadoop、내존계산등기술.재방안중,업무수거격식화성대상병분포식존저도집군계산궤내존중,임무탁분성자임무통과병행계산래완성.대상화병행계산계통응용재국가전망공사전망자산질량감독관리계통중,응용효과표명해방안가대폭도제승계통성능,만족실시성수구.
