计算机工程
計算機工程
계산궤공정
Computer Engineering
2015年
11期
114-119
,共6页
支持向量机%云存储%副本放置策略%分布式文件系统%负载均衡%机架感知
支持嚮量機%雲存儲%副本放置策略%分佈式文件繫統%負載均衡%機架感知
지지향량궤%운존저%부본방치책략%분포식문건계통%부재균형%궤가감지
Support Vector Machine (SVM)%cloud storage%replica placement policy%Distributed File System (DFS)%load balancing%rack awareness
为实现超大规模数据的存储并提高容错性,Hadoop分布式文件系统(HDFS)采用一种机架感知的多副本放置策略.但在放置过程中没有综合考虑各节点服务器的差异性,导致集群出现负载失衡.由于放置时采用随机方式,造成节点之间的网络距离过长,使得传输数据会消耗大量时间.针对以上问题,提出一种基于SVM的副本放置策略.通过综合考虑节点负载情况、节点硬件性能、节点网络距离为副本找到最佳的放置节点.实验结果表明,与HDFS原有的副本放置策略相比,该策略能更有效地实现负载均衡.
為實現超大規模數據的存儲併提高容錯性,Hadoop分佈式文件繫統(HDFS)採用一種機架感知的多副本放置策略.但在放置過程中沒有綜閤攷慮各節點服務器的差異性,導緻集群齣現負載失衡.由于放置時採用隨機方式,造成節點之間的網絡距離過長,使得傳輸數據會消耗大量時間.針對以上問題,提齣一種基于SVM的副本放置策略.通過綜閤攷慮節點負載情況、節點硬件性能、節點網絡距離為副本找到最佳的放置節點.實驗結果錶明,與HDFS原有的副本放置策略相比,該策略能更有效地實現負載均衡.
위실현초대규모수거적존저병제고용착성,Hadoop분포식문건계통(HDFS)채용일충궤가감지적다부본방치책략.단재방치과정중몰유종합고필각절점복무기적차이성,도치집군출현부재실형.유우방치시채용수궤방식,조성절점지간적망락거리과장,사득전수수거회소모대량시간.침대이상문제,제출일충기우SVM적부본방치책략.통과종합고필절점부재정황、절점경건성능、절점망락거리위부본조도최가적방치절점.실험결과표명,여HDFS원유적부본방치책략상비,해책략능경유효지실현부재균형.
