华南理工大学学报（自然科学版）
華南理工大學學報（自然科學版）
화남리공대학학보（자연과학판）
JOURNAL OF SOUTH CHINA UNIVERSITY OF TECHNOLOGY(NATURAL SCIENCE EDITION)
2011年
4期
7-14
,共8页
搜索引擎%分布式文件系统%HDFS文件系统%Lustre文件系统%性能分析%性能优化
搜索引擎%分佈式文件繫統%HDFS文件繫統%Lustre文件繫統%性能分析%性能優化
수색인경%분포식문건계통%HDFS문건계통%Lustre문건계통%성능분석%성능우화
搜索引擎是一种数据密集型应用,其性能极大依赖于底层文件系统的性能.文中主要讨论分布式文件系统在搜索引擎应用环境下的性能评估和性能优化问题.首先概述了分布式文件系统的性能影响因素及相关研究进展;在此基础上提出基于Hadoop的开放架构,系统地评估HDFS和Lustre在搜索引擎应用场景下的性能;最后针对实验评估发现的HDFS在写性能及小文件数据处理方面的不足,提出改进方案,为搜索引擎的分布式文件系统优化提供参考.
搜索引擎是一種數據密集型應用,其性能極大依賴于底層文件繫統的性能.文中主要討論分佈式文件繫統在搜索引擎應用環境下的性能評估和性能優化問題.首先概述瞭分佈式文件繫統的性能影響因素及相關研究進展;在此基礎上提齣基于Hadoop的開放架構,繫統地評估HDFS和Lustre在搜索引擎應用場景下的性能;最後針對實驗評估髮現的HDFS在寫性能及小文件數據處理方麵的不足,提齣改進方案,為搜索引擎的分佈式文件繫統優化提供參攷.
수색인경시일충수거밀집형응용,기성능겁대의뢰우저층문건계통적성능.문중주요토론분포식문건계통재수색인경응용배경하적성능평고화성능우화문제.수선개술료분포식문건계통적성능영향인소급상관연구진전;재차기출상제출기우Hadoop적개방가구,계통지평고HDFS화Lustre재수색인경응용장경하적성능;최후침대실험평고발현적HDFS재사성능급소문건수거처리방면적불족,제출개진방안,위수색인경적분포식문건계통우화제공삼고.
