计算机工程与应用
計算機工程與應用
계산궤공정여응용
COMPUTER ENGINEERING AND APPLICATIONS
2015年
2期
71-75
,共5页
网络文件存储%负载均衡%重复数据删除
網絡文件存儲%負載均衡%重複數據刪除
망락문건존저%부재균형%중복수거산제
network file storage%load balance%data deduplication
基于多服务器架构、为多用户服务的网络文件存储系统普遍存在资源分配不均,重复文件多,存储空间浪费严重的问题。设计并实现了TNS网络文件存储系统,该系统基于多服务器存储架构,分别由用户服务器、索引服务器、数据服务器、共享服务器、管理服务器和登录服务器组成,为多用户服务,采用一致性Hash实现负载均衡,支持在客户端进行文件粒度的重复数据删除。经过实际生产环境运行测试,具有良好的负载均衡能力和重复数据删除功能,可以有效节省存储空间,提高存储设备利用率。
基于多服務器架構、為多用戶服務的網絡文件存儲繫統普遍存在資源分配不均,重複文件多,存儲空間浪費嚴重的問題。設計併實現瞭TNS網絡文件存儲繫統,該繫統基于多服務器存儲架構,分彆由用戶服務器、索引服務器、數據服務器、共享服務器、管理服務器和登錄服務器組成,為多用戶服務,採用一緻性Hash實現負載均衡,支持在客戶耑進行文件粒度的重複數據刪除。經過實際生產環境運行測試,具有良好的負載均衡能力和重複數據刪除功能,可以有效節省存儲空間,提高存儲設備利用率。
기우다복무기가구、위다용호복무적망락문건존저계통보편존재자원분배불균,중복문건다,존저공간낭비엄중적문제。설계병실현료TNS망락문건존저계통,해계통기우다복무기존저가구,분별유용호복무기、색인복무기、수거복무기、공향복무기、관리복무기화등록복무기조성,위다용호복무,채용일치성Hash실현부재균형,지지재객호단진행문건립도적중복수거산제。경과실제생산배경운행측시,구유량호적부재균형능력화중복수거산제공능,가이유효절성존저공간,제고존저설비이용솔。
The file storage system based on multi-server architecture with multi-user service often meets the challenge of unbalanced distribution of resources, files redundancy, which wastes large storage space. It designs and develops a net-work file storage system TNS, which is based on multi-server storage architecture, composed by user servers, index serv-ers, data servers, sharing server, management server and login server, provides multi-user service, with consistency hash algorithm for load balance, supporting data deduplication on client side with file granularity. The experiment in the real environment shows that TNS is good at load balancing and data deduplication, which saves large storage space and improves the utilization of storage devices.