集成技术
集成技術
집성기술
Journal of Integration Technology
2012年
4期
58-63
,共6页
分布式文件系统%性能测量%基准测试程序
分佈式文件繫統%性能測量%基準測試程序
분포식문건계통%성능측량%기준측시정서
distributed file system%performance measurement%benchmarks
近年来随着云计算市场规模不断增长,作为云计算平台基础设施的云存储系统也随之显得越来越重要.数以万计的互联网应用已经运行于云计算环境,同时大量不同的应用也即将从传统运行环境转移到云计算平台.不同的互联网应用的存储需求可能不一样.例如:应用中涉及的单个文件大小,文件数量,I0访问模式,读写比率等,都对底层存储系统提出了不同的要求.这说明在云计算环境中,单个文件系统可能无法满足全部应用的存储需求, 本文尝试通过在单一云计算平台中部署多个不同分布式文件系统来优化存储系统的总体性能.为了优化混合式文件系统的性能,首先需要分析不同文件系统的性能特征.本文通过量化方法分析了云计算环境下几个常用的分布式文件系统,这些文件系统分别是ceph,moosefs,glusterfs和hdfs.实验结果显示:即使针对同一文件的相同读写操作,不同分布式文件系统之间的性能也差异显著,当单个文件的大小小于256MB时,moosefs的平均写性能比其它几个文件系统高22.3％;当单个文件大小大于256KB时,glusterfs的平均读性能比其它几个文件系统高21.0％.这些结果为设计和实现一个基于以上几个分布式文件系统的混合式文件系统提供了基础.
近年來隨著雲計算市場規模不斷增長,作為雲計算平檯基礎設施的雲存儲繫統也隨之顯得越來越重要.數以萬計的互聯網應用已經運行于雲計算環境,同時大量不同的應用也即將從傳統運行環境轉移到雲計算平檯.不同的互聯網應用的存儲需求可能不一樣.例如:應用中涉及的單箇文件大小,文件數量,I0訪問模式,讀寫比率等,都對底層存儲繫統提齣瞭不同的要求.這說明在雲計算環境中,單箇文件繫統可能無法滿足全部應用的存儲需求, 本文嘗試通過在單一雲計算平檯中部署多箇不同分佈式文件繫統來優化存儲繫統的總體性能.為瞭優化混閤式文件繫統的性能,首先需要分析不同文件繫統的性能特徵.本文通過量化方法分析瞭雲計算環境下幾箇常用的分佈式文件繫統,這些文件繫統分彆是ceph,moosefs,glusterfs和hdfs.實驗結果顯示:即使針對同一文件的相同讀寫操作,不同分佈式文件繫統之間的性能也差異顯著,噹單箇文件的大小小于256MB時,moosefs的平均寫性能比其它幾箇文件繫統高22.3％;噹單箇文件大小大于256KB時,glusterfs的平均讀性能比其它幾箇文件繫統高21.0％.這些結果為設計和實現一箇基于以上幾箇分佈式文件繫統的混閤式文件繫統提供瞭基礎.
근년래수착운계산시장규모불단증장,작위운계산평태기출설시적운존저계통야수지현득월래월중요.수이만계적호련망응용이경운행우운계산배경,동시대량불동적응용야즉장종전통운행배경전이도운계산평태.불동적호련망응용적존저수구가능불일양.례여:응용중섭급적단개문건대소,문건수량,I0방문모식,독사비솔등,도대저층존저계통제출료불동적요구.저설명재운계산배경중,단개문건계통가능무법만족전부응용적존저수구, 본문상시통과재단일운계산평태중부서다개불동분포식문건계통래우화존저계통적총체성능.위료우화혼합식문건계통적성능,수선수요분석불동문건계통적성능특정.본문통과양화방법분석료운계산배경하궤개상용적분포식문건계통,저사문건계통분별시ceph,moosefs,glusterfs화hdfs.실험결과현시:즉사침대동일문건적상동독사조작,불동분포식문건계통지간적성능야차이현저,당단개문건적대소소우256MB시,moosefs적평균사성능비기타궤개문건계통고22.3％;당단개문건대소대우256KB시,glusterfs적평균독성능비기타궤개문건계통고21.0％.저사결과위설계화실현일개기우이상궤개분포식문건계통적혼합식문건계통제공료기출.
