天文研究与技术－国家天文台台刊
天文研究與技術－國傢天文檯檯刊
천문연구여기술－국가천문태태간
ASTRONOMICAL RESEARCH & TECHNOLOGY-PUBLICATIONS OF NATIONAL ASTRONOMICAL OBSERVATORIES OF CHINA
2012年
2期
150-156
,共7页
宋烜%周薇%韩冀中%崔辰州
宋烜%週薇%韓冀中%崔辰州
송훤%주미%한기중%최신주
映射化简%中国虚拟天文台%交叉认证
映射化簡%中國虛擬天文檯%交扠認證
영사화간%중국허의천문태%교차인증
MapReduce是一种大规模分布式并行处理框架,最初被用于互联网服务中的海量数据处理,并逐渐扩展到各个行业领域.目前,虚拟天文台面临着越来越多的地面及空间望远镜观测到的海量天文数据.为了提高中国虚拟天文台数据节点处理海量天文数据的能力,首次提出基于MapReduce框架构建中国虚拟天文台数据节点的方法,并以批量星表交叉认证为例描述了具体实现过程,性能评估结果证明基于MapReduce框架构建虚拟天文台数据节点,可以在性能、扩展性与成本等多方面获得收益.
MapReduce是一種大規模分佈式併行處理框架,最初被用于互聯網服務中的海量數據處理,併逐漸擴展到各箇行業領域.目前,虛擬天文檯麵臨著越來越多的地麵及空間望遠鏡觀測到的海量天文數據.為瞭提高中國虛擬天文檯數據節點處理海量天文數據的能力,首次提齣基于MapReduce框架構建中國虛擬天文檯數據節點的方法,併以批量星錶交扠認證為例描述瞭具體實現過程,性能評估結果證明基于MapReduce框架構建虛擬天文檯數據節點,可以在性能、擴展性與成本等多方麵穫得收益.
MapReduce시일충대규모분포식병행처리광가,최초피용우호련망복무중적해량수거처리,병축점확전도각개행업영역.목전,허의천문태면림착월래월다적지면급공간망원경관측도적해량천문수거.위료제고중국허의천문태수거절점처리해량천문수거적능력,수차제출기우MapReduce광가구건중국허의천문태수거절점적방법,병이비량성표교차인증위례묘술료구체실현과정,성능평고결과증명기우MapReduce광가구건허의천문태수거절점,가이재성능、확전성여성본등다방면획득수익.
