科技创新导报
科技創新導報
과기창신도보
SCIENCE AND TECHNOLOGY CONSULTING HERALD
2013年
17期
29-31
,共3页
王引娜%宋耀光%倪巍%徐广庆
王引娜%宋耀光%倪巍%徐廣慶
왕인나%송요광%예외%서엄경
RS纠删码%动态副本策略%HDFS
RS糾刪碼%動態副本策略%HDFS
RS규산마%동태부본책략%HDFS
目前多数云存储文件系统为保证其系统可靠性和性能所采用的静态完全副本冗余机制存在存储效率低、负载均衡能力差等缺点,为了提高云存储效率以及优化云存储的负载均衡能力,该文根据应用HDFS的经验,提出一种基于RS纠删码的云存储动态副本的冗余策略-SeaMaiden. SeaMaiden引入了副本调整模块和纠删码编解码模块,通过周期性的计算文件的热度,进而动态调整文件的副本数.当文件的副本数低于3时,则调用纠删码编解码模块对文件进行编码,提升文件的可靠性.当文件的热度级别上升时,则动态增加文件副本数,提升HDFS的负载均衡能力.通过实验证明SeaMaiden 能有效提高HDFS的存储效率、可靠性及响应速度.
目前多數雲存儲文件繫統為保證其繫統可靠性和性能所採用的靜態完全副本冗餘機製存在存儲效率低、負載均衡能力差等缺點,為瞭提高雲存儲效率以及優化雲存儲的負載均衡能力,該文根據應用HDFS的經驗,提齣一種基于RS糾刪碼的雲存儲動態副本的冗餘策略-SeaMaiden. SeaMaiden引入瞭副本調整模塊和糾刪碼編解碼模塊,通過週期性的計算文件的熱度,進而動態調整文件的副本數.噹文件的副本數低于3時,則調用糾刪碼編解碼模塊對文件進行編碼,提升文件的可靠性.噹文件的熱度級彆上升時,則動態增加文件副本數,提升HDFS的負載均衡能力.通過實驗證明SeaMaiden 能有效提高HDFS的存儲效率、可靠性及響應速度.
목전다수운존저문건계통위보증기계통가고성화성능소채용적정태완전부본용여궤제존재존저효솔저、부재균형능력차등결점,위료제고운존저효솔이급우화운존저적부재균형능력,해문근거응용HDFS적경험,제출일충기우RS규산마적운존저동태부본적용여책략-SeaMaiden. SeaMaiden인입료부본조정모괴화규산마편해마모괴,통과주기성적계산문건적열도,진이동태조정문건적부본수.당문건적부본수저우3시,칙조용규산마편해마모괴대문건진행편마,제승문건적가고성.당문건적열도급별상승시,칙동태증가문건부본수,제승HDFS적부재균형능력.통과실험증명SeaMaiden 능유효제고HDFS적존저효솔、가고성급향응속도.