微电子学与计算机
微電子學與計算機
미전자학여계산궤
MICROELECTRONICS & COMPUTER
2013年
3期
63-66
,共4页
夏上云%王旻超%张惠然%戴东波%谢江%李青%张武
夏上雲%王旻超%張惠然%戴東波%謝江%李青%張武
하상운%왕민초%장혜연%대동파%사강%리청%장무
大规模数据%Hadoop%虚拟化%并行计算
大規模數據%Hadoop%虛擬化%併行計算
대규모수거%Hadoop%허의화%병행계산
large-scale data%Hadoop%KVM%parallel computing
本文提出并实现了一种 Hadoop 与虚拟化技术相结合的模型.该模型将多核计算机虚拟成多节点集群,最大限度地利用计算资源.在实验测试的基础上,通过分析任务在 Hadoop 环境中的并行机制,弄清计算任务在节点中与核中的分配方式,以达到提高并行效率、降低硬件开销的目的,最后通过对典型应用问题进行计算,从而对本文所提出模型的正确性和有效性进行了验证.
本文提齣併實現瞭一種 Hadoop 與虛擬化技術相結閤的模型.該模型將多覈計算機虛擬成多節點集群,最大限度地利用計算資源.在實驗測試的基礎上,通過分析任務在 Hadoop 環境中的併行機製,弄清計算任務在節點中與覈中的分配方式,以達到提高併行效率、降低硬件開銷的目的,最後通過對典型應用問題進行計算,從而對本文所提齣模型的正確性和有效性進行瞭驗證.
본문제출병실현료일충 Hadoop 여허의화기술상결합적모형.해모형장다핵계산궤허의성다절점집군,최대한도지이용계산자원.재실험측시적기출상,통과분석임무재 Hadoop 배경중적병행궤제,롱청계산임무재절점중여핵중적분배방식,이체도제고병행효솔、강저경건개소적목적,최후통과대전형응용문제진행계산,종이대본문소제출모형적정학성화유효성진행료험증.
@@@@We propose a model which combines the Hadoop with the virtualization technology .In the model ,each processing core of multi - cores computer is virtualized as a computing node ,then the use of computing resources is maximized .Moreover ,parallel working mechanism of the Hadoop is discussed .Experiments are fulfilled by typical applications finally .