网络新媒体技术
網絡新媒體技術
망락신매체기술
JOURNAL OF NETWORK NEW MEDIA
2015年
2期
16-23
,共8页
杨洪章%张军伟%齐颖%吴雪丽
楊洪章%張軍偉%齊穎%吳雪麗
양홍장%장군위%제영%오설려
海量小文件%低延迟%文件创建%缓存
海量小文件%低延遲%文件創建%緩存
해량소문건%저연지%문건창건%완존
海量小文件应用已经渗透到高性能计算、企业办公、互联网等多个领域.由于小文件主要存储在分布式文件系统中,海量小文件访问性能已经成为分布式文件系统亟待解决的难题.影响性能的关键因素是高比例高并发的元数据同步访问,尤其在高并发小粒度创建应用中,元数据同步网络交互增加了小文件访问延迟.本文以pNFS分布式文件系统为基础,研究降低海量小文件创建应用延迟的关键技术,设计并实现了一种基于目录可写授权的全异步客户端文件创建框架及其优化技术,测试表明,该技术可将分布式文件系统小文件创建性能提升近500倍.
海量小文件應用已經滲透到高性能計算、企業辦公、互聯網等多箇領域.由于小文件主要存儲在分佈式文件繫統中,海量小文件訪問性能已經成為分佈式文件繫統亟待解決的難題.影響性能的關鍵因素是高比例高併髮的元數據同步訪問,尤其在高併髮小粒度創建應用中,元數據同步網絡交互增加瞭小文件訪問延遲.本文以pNFS分佈式文件繫統為基礎,研究降低海量小文件創建應用延遲的關鍵技術,設計併實現瞭一種基于目錄可寫授權的全異步客戶耑文件創建框架及其優化技術,測試錶明,該技術可將分佈式文件繫統小文件創建性能提升近500倍.
해량소문건응용이경삼투도고성능계산、기업판공、호련망등다개영역.유우소문건주요존저재분포식문건계통중,해량소문건방문성능이경성위분포식문건계통극대해결적난제.영향성능적관건인소시고비례고병발적원수거동보방문,우기재고병발소립도창건응용중,원수거동보망락교호증가료소문건방문연지.본문이pNFS분포식문건계통위기출,연구강저해량소문건창건응용연지적관건기술,설계병실현료일충기우목록가사수권적전이보객호단문건창건광가급기우화기술,측시표명,해기술가장분포식문건계통소문건창건성능제승근500배.
