CAJ | 학술논문

为解决数据仓库中海量数据的处理效率问题，可以采用数据聚集预计算的方法，但是针对海量级别数据的聚集运算非常耗费计算资源，需要巨大的计算能力和存储能力，因此提出了一组基于MapReduce的面向海量数据的数据聚集运算算法，主要包括数据的选择、投影以及等值连接等，并在此基础上，实现了计数、求和和均值等聚集运算，形成了比较完整的面向海量数据的聚集运算算法。实验结果表明，该算法充分利用了集群系统的计算能力和存储能力，极大地提高了海量数据的聚集运算效率和基于聚集运算结果上的数据查询效率。
위해결수거창고중해량수거적처리효솔문제，가이채용수거취집예계산적방법，단시침대해량급별수거적취집운산비상모비계산자원，수요거대적계산능력화존저능력，인차제출료일조기우MapReduce적면향해량수거적수거취집운산산법，주요포괄수거적선택、투영이급등치련접등，병재차기출상，실현료계수、구화화균치등취집운산，형성료비교완정적면향해량수거적취집운산산법。실험결과표명，해산법충분이용료집군계통적계산능력화존저능력，겁대지제고료해량수거적취집운산효솔화기우취집운산결과상적수거사순효솔。