计算机系统应用
計算機繫統應用
계산궤계통응용
APPLICATIONS OF THE COMPUTER SYSTEMS
2015年
1期
60-64
,共5页
李安增%王宁%王常权%邱燕
李安增%王寧%王常權%邱燕
리안증%왕저%왕상권%구연
大数据%MapReduce%Hadoop%并行计算%分布式
大數據%MapReduce%Hadoop%併行計算%分佈式
대수거%MapReduce%Hadoop%병행계산%분포식
big data%MapReduce%Hadoop%parallel computing%distributed
在“辽河流域水环境管理技术综合示范”项目中,随着时间的累积,环境监测数据处理系统采集到的数据量越来越大.然而目前辽宁省环境监测数据处理系统无法有效处理日益增长的海量数据.研究运用大数据技术,改进环境监测数据处理系统中的数据中心.利用HDFS强大的数据存储、管理功能,以应对数据量的增长,利用MapReduce及Hadoop其他相关工具,快速处理海量数据,降低数据规模,最后将数据存储到数据库中.
在“遼河流域水環境管理技術綜閤示範”項目中,隨著時間的纍積,環境鑑測數據處理繫統採集到的數據量越來越大.然而目前遼寧省環境鑑測數據處理繫統無法有效處理日益增長的海量數據.研究運用大數據技術,改進環境鑑測數據處理繫統中的數據中心.利用HDFS彊大的數據存儲、管理功能,以應對數據量的增長,利用MapReduce及Hadoop其他相關工具,快速處理海量數據,降低數據規模,最後將數據存儲到數據庫中.
재“료하류역수배경관리기술종합시범”항목중,수착시간적루적,배경감측수거처리계통채집도적수거량월래월대.연이목전요녕성배경감측수거처리계통무법유효처리일익증장적해량수거.연구운용대수거기술,개진배경감측수거처리계통중적수거중심.이용HDFS강대적수거존저、관리공능,이응대수거량적증장,이용MapReduce급Hadoop기타상관공구,쾌속처리해량수거,강저수거규모,최후장수거존저도수거고중.
