计算机与现代化
計算機與現代化
계산궤여현대화
COMPUTER AND MODERNIZATION
2014年
5期
127-130
,共4页
Hive%数据仓库%水利普查%模型优化%大规模数据处理
Hive%數據倉庫%水利普查%模型優化%大規模數據處理
Hive%수거창고%수리보사%모형우화%대규모수거처리
Hive%data warehouse%water census%model optimization%large data processing
针对水利普查数据海量、多维的特点,研究近年来在“大数据”概念下发展迅速的Hadoop与Hive,结合传统数据仓库在多维数据分析方面的成熟技术,提出基于Hive的水利普查数据仓库的构建方法,描述数据仓库系统的架构,并根据Hive的设计特点,通过分桶、消减维度表和冗余事实表的方法来改进传统的多维分析模型,最后搭建集群系统对水利普查数据集进行查询与分析测试.测试结果表明该数据仓库可以满足海量多维水利普查数据的存储与查询要求.
針對水利普查數據海量、多維的特點,研究近年來在“大數據”概唸下髮展迅速的Hadoop與Hive,結閤傳統數據倉庫在多維數據分析方麵的成熟技術,提齣基于Hive的水利普查數據倉庫的構建方法,描述數據倉庫繫統的架構,併根據Hive的設計特點,通過分桶、消減維度錶和冗餘事實錶的方法來改進傳統的多維分析模型,最後搭建集群繫統對水利普查數據集進行查詢與分析測試.測試結果錶明該數據倉庫可以滿足海量多維水利普查數據的存儲與查詢要求.
침대수리보사수거해량、다유적특점,연구근년래재“대수거”개념하발전신속적Hadoop여Hive,결합전통수거창고재다유수거분석방면적성숙기술,제출기우Hive적수리보사수거창고적구건방법,묘술수거창고계통적가구,병근거Hive적설계특점,통과분통、소감유도표화용여사실표적방법래개진전통적다유분석모형,최후탑건집군계통대수리보사수거집진행사순여분석측시.측시결과표명해수거창고가이만족해량다유수리보사수거적존저여사순요구.
