数字技术与应用
數字技術與應用
수자기술여응용
DIGITAL TECHNOLOGY AND APPLICATION
2010年
5期
174-176
,共3页
Pig平台%Pig Latin语言%海量数据%并行分析
Pig平檯%Pig Latin語言%海量數據%併行分析
Pig평태%Pig Latin어언%해량수거%병행분석
随着互联网的飞速发展,分析海量教据的需求变得十分迫切.针对分布式数据库昂贵及Map-Reduce计算框架中代码难以维护、重用等问题,雅虎研发了自己的海量教据分析平台Pig.Pig平台基于Hadoop的Map-Reduce计算框架并提供类SQL的命令式查询语言Pig Latin,该平台为复杂的海量数据并行计算提供了简易的操作和编程接口.本文对Pig Latin语言四种数据模型,常用表达式及关键操作符进行介绍,并结合实例对Pig Latin脚本程序进行分析.
隨著互聯網的飛速髮展,分析海量教據的需求變得十分迫切.針對分佈式數據庫昂貴及Map-Reduce計算框架中代碼難以維護、重用等問題,雅虎研髮瞭自己的海量教據分析平檯Pig.Pig平檯基于Hadoop的Map-Reduce計算框架併提供類SQL的命令式查詢語言Pig Latin,該平檯為複雜的海量數據併行計算提供瞭簡易的操作和編程接口.本文對Pig Latin語言四種數據模型,常用錶達式及關鍵操作符進行介紹,併結閤實例對Pig Latin腳本程序進行分析.
수착호련망적비속발전,분석해량교거적수구변득십분박절.침대분포식수거고앙귀급Map-Reduce계산광가중대마난이유호、중용등문제,아호연발료자기적해량교거분석평태Pig.Pig평태기우Hadoop적Map-Reduce계산광가병제공류SQL적명령식사순어언Pig Latin,해평태위복잡적해량수거병행계산제공료간역적조작화편정접구.본문대Pig Latin어언사충수거모형,상용표체식급관건조작부진행개소,병결합실례대Pig Latin각본정서진행분석.
