计算机工程与科学
計算機工程與科學
계산궤공정여과학
COMPUTER ENGINEERING & SCIENCE
2013年
12期
8-13
,共6页
周恩强%董勇%张伟%卢宇彤
週恩彊%董勇%張偉%盧宇彤
주은강%동용%장위%로우동
并行文件系统%缓存%对象存储%文件预取
併行文件繫統%緩存%對象存儲%文件預取
병행문건계통%완존%대상존저%문건예취
parallel file system%cache%object storage%prefetching
对象存储并行文件系统在高性能计算领域被广泛采用,虽然大文件访问性能优异,但其小文件访问存在局限性.通过分析典型对象存储并行文件系统下的小文件的访问开销,采用服务端小文件专用缓存和基于对象命名关联性预取的方法提高小文件的缓存命中率,降低对象存储架构下小文件的读取延迟.基于Lustre并行文件系统实现了该方法.实际系统测试表明,该方法可显著提高小文件访问性能,其中小文件打包性能提升最大可达88％.
對象存儲併行文件繫統在高性能計算領域被廣汎採用,雖然大文件訪問性能優異,但其小文件訪問存在跼限性.通過分析典型對象存儲併行文件繫統下的小文件的訪問開銷,採用服務耑小文件專用緩存和基于對象命名關聯性預取的方法提高小文件的緩存命中率,降低對象存儲架構下小文件的讀取延遲.基于Lustre併行文件繫統實現瞭該方法.實際繫統測試錶明,該方法可顯著提高小文件訪問性能,其中小文件打包性能提升最大可達88％.
대상존저병행문건계통재고성능계산영역피엄범채용,수연대문건방문성능우이,단기소문건방문존재국한성.통과분석전형대상존저병행문건계통하적소문건적방문개소,채용복무단소문건전용완존화기우대상명명관련성예취적방법제고소문건적완존명중솔,강저대상존저가구하소문건적독취연지.기우Lustre병행문건계통실현료해방법.실제계통측시표명,해방법가현저제고소문건방문성능,기중소문건타포성능제승최대가체88％.
