通讯世界
通訊世界
통신세계
TELECOM WORLD
2015年
6期
59-60
,共2页
大数据%Hadoop%分析处理%性能优化
大數據%Hadoop%分析處理%性能優化
대수거%Hadoop%분석처리%성능우화
big data%Hadoop%analysis%performance optimization
面对数据量的不多增大真多,单台主机已不能够满足计算与存储的需求,所以,目前主要使用分布式的计算与存储方式去分析处理这些大量的数据,并从中挖掘潜在的价值。其中,Hadoop平台是使用最多的一种开源式计算与存储框架。本文首先介绍Hadoop平台的构架与原理,然后介绍基于Hadoop平台的大数据分析处理技术,最后介绍Hadoop平台的性能优化。可见,Hadoop平台在大数据中应用的优势。
麵對數據量的不多增大真多,單檯主機已不能夠滿足計算與存儲的需求,所以,目前主要使用分佈式的計算與存儲方式去分析處理這些大量的數據,併從中挖掘潛在的價值。其中,Hadoop平檯是使用最多的一種開源式計算與存儲框架。本文首先介紹Hadoop平檯的構架與原理,然後介紹基于Hadoop平檯的大數據分析處理技術,最後介紹Hadoop平檯的性能優化。可見,Hadoop平檯在大數據中應用的優勢。
면대수거량적불다증대진다,단태주궤이불능구만족계산여존저적수구,소이,목전주요사용분포식적계산여존저방식거분석처리저사대량적수거,병종중알굴잠재적개치。기중,Hadoop평태시사용최다적일충개원식계산여존저광가。본문수선개소Hadoop평태적구가여원리,연후개소기우Hadoop평태적대수거분석처리기술,최후개소Hadoop평태적성능우화。가견,Hadoop평태재대수거중응용적우세。
With increasing the amount of data,a single host has not been able to satisfy the demand of computing and storage, therefore, the dis-tributed calculation and storage methods currently are used mainly to analyze and manage the large amount of data, and excavate the potential value from data. Among them, the Hadoop platform is the most frequently used open source framework for computing and storage. This paper firstly intro-duces the structure and principle of Hadoop platform, and then introduces the technology of big data analysis based on the Hadoop platform, finally introduces the performance optimization of Hadoop platform. Therefore,The Hadoop platform has a great advantage in large data applications.