CAJ | 학술논문

随着信息技术发展的日新月异，大数据已逐步应用于各行各业。其中在地震预测和分析方面，由于所产生的数据量也在大幅增长，大规模数据的处理问题给地震预测和分析行业带来严峻的挑战。Hadoop开源项目的日益成熟，给地震预测和分析行业带来了可行的解决方案，多家研究机构均已基于Hadoop进行各种尝试。本文重点针对数据的存储与分析两个方面，结合设备合理有效利用的需求，对Hadoop的存储和分析模型进行针对性优化，以达到成本的优化和性能的提升。通过采用磁盘阵列RAID技术，结合NFS文件共享技术，成功替代Hadoop的HDFS的三副本技术，使得数据存储的成本大幅度降低，数据可靠性得以提升；同时，通过对于Hadoop的数据布局的均衡处理和Map-Reduce流程中shuffle阶段的改进，使数据分析处理的性能得以提升。
수착신식기술발전적일신월이，대수거이축보응용우각행각업。기중재지진예측화분석방면，유우소산생적수거량야재대폭증장，대규모수거적처리문제급지진예측화분석행업대래엄준적도전。Hadoop개원항목적일익성숙，급지진예측화분석행업대래료가행적해결방안，다가연구궤구균이기우Hadoop진행각충상시。본문중점침대수거적존저여분석량개방면，결합설비합리유효이용적수구，대Hadoop적존저화분석모형진행침대성우화，이체도성본적우화화성능적제승。통과채용자반진렬RAID기술，결합NFS문건공향기술，성공체대Hadoop적HDFS적삼부본기술，사득수거존저적성본대폭도강저，수거가고성득이제승；동시，통과대우Hadoop적수거포국적균형처리화Map-Reduce류정중shuffle계단적개진，사수거분석처리적성능득이제승。