国防科技大学学报
國防科技大學學報
국방과기대학학보
JOURNAL OF NATIONAL UNIVERSITY OF DEFENSE TECHNOLOGY
2013年
2期
120-126
,共7页
付松龄%廖湘科%黄辰林%王蕾%李姗姗
付鬆齡%廖湘科%黃辰林%王蕾%李姍姍
부송령%료상과%황신림%왕뢰%리산산
分布式文件系统%海量小文件%ext文件系统%云计算
分佈式文件繫統%海量小文件%ext文件繫統%雲計算
분포식문건계통%해량소문건%ext문건계통%운계산
海量小文件的高效存储和访问是当前分布式文件系统面临的主要挑战之一.以GFS和HDFS为代表的分布式文件系统大多面向海量大文件的高效存储和访问设计,缺乏小文件处理的针对性优化,导致访问海量小文件时效率低下.针对分布式文件系统中海量小文件访问时的数据服务器优化问题,提出了一种采用扁平式数据存储方法的轻量级文件系统FlatLFS,取代传统文件系统对上层分布式文件系统提供数据存储和访问支持,提高了数据服务器处理小数据块时的Ⅰ/O性能,从而提升了整个分布式文件系统的性能.实验表明,当数据块大小设定为1M时,FlatLFS的随机读性能分别比ext3、ext4、reiserfs高135％、112％和122％.
海量小文件的高效存儲和訪問是噹前分佈式文件繫統麵臨的主要挑戰之一.以GFS和HDFS為代錶的分佈式文件繫統大多麵嚮海量大文件的高效存儲和訪問設計,缺乏小文件處理的針對性優化,導緻訪問海量小文件時效率低下.針對分佈式文件繫統中海量小文件訪問時的數據服務器優化問題,提齣瞭一種採用扁平式數據存儲方法的輕量級文件繫統FlatLFS,取代傳統文件繫統對上層分佈式文件繫統提供數據存儲和訪問支持,提高瞭數據服務器處理小數據塊時的Ⅰ/O性能,從而提升瞭整箇分佈式文件繫統的性能.實驗錶明,噹數據塊大小設定為1M時,FlatLFS的隨機讀性能分彆比ext3、ext4、reiserfs高135％、112％和122％.
해량소문건적고효존저화방문시당전분포식문건계통면림적주요도전지일.이GFS화HDFS위대표적분포식문건계통대다면향해량대문건적고효존저화방문설계,결핍소문건처리적침대성우화,도치방문해량소문건시효솔저하.침대분포식문건계통중해량소문건방문시적수거복무기우화문제,제출료일충채용편평식수거존저방법적경량급문건계통FlatLFS,취대전통문건계통대상층분포식문건계통제공수거존저화방문지지,제고료수거복무기처리소수거괴시적Ⅰ/O성능,종이제승료정개분포식문건계통적성능.실험표명,당수거괴대소설정위1M시,FlatLFS적수궤독성능분별비ext3、ext4、reiserfs고135％、112％화122％.
