计算机科学与探索
計算機科學與探索
계산궤과학여탐색
JOURNAL OF FRONTIERS OF COMPUTER SCIENCE & TECHNOLOGY
2012年
1期
46-57
,共12页
余永红%向晓军%高阳%商琳%杨育彬
餘永紅%嚮曉軍%高暘%商琳%楊育彬
여영홍%향효군%고양%상림%양육빈
云计算%Hadoop%数据挖掘%面向服务的体系结构(SOA)
雲計算%Hadoop%數據挖掘%麵嚮服務的體繫結構(SOA)
운계산%Hadoop%수거알굴%면향복무적체계결구(SOA)
数据挖掘算法处理海量数据时,扩展性受到制约.在商业和科学研究的各个领域,知识发现的过程和需求差异较大,需要有效的机制来设计和运行各种类型的分布式数据挖掘应用.提出了一种面向服务的云数据挖掘引擎的框架CloudDM.不同于基于网格的分布式数据挖掘框架,CloudDM利用开源云计算平台Hadoop处理海量数据的能力,以面向服务的形式支持分布式数据挖掘应用的设计和运行,并描述面向服务的云数据挖掘引擎系统的关键部件和实现技术.依据面向服务的软件体系结构和基于云平台的数据挖掘引擎,可以有效解决海量数据挖掘中的海量数据存储、数据处理和数据挖掘算法互操作性等问题.
數據挖掘算法處理海量數據時,擴展性受到製約.在商業和科學研究的各箇領域,知識髮現的過程和需求差異較大,需要有效的機製來設計和運行各種類型的分佈式數據挖掘應用.提齣瞭一種麵嚮服務的雲數據挖掘引擎的框架CloudDM.不同于基于網格的分佈式數據挖掘框架,CloudDM利用開源雲計算平檯Hadoop處理海量數據的能力,以麵嚮服務的形式支持分佈式數據挖掘應用的設計和運行,併描述麵嚮服務的雲數據挖掘引擎繫統的關鍵部件和實現技術.依據麵嚮服務的軟件體繫結構和基于雲平檯的數據挖掘引擎,可以有效解決海量數據挖掘中的海量數據存儲、數據處理和數據挖掘算法互操作性等問題.
수거알굴산법처리해량수거시,확전성수도제약.재상업화과학연구적각개영역,지식발현적과정화수구차이교대,수요유효적궤제래설계화운행각충류형적분포식수거알굴응용.제출료일충면향복무적운수거알굴인경적광가CloudDM.불동우기우망격적분포식수거알굴광가,CloudDM이용개원운계산평태Hadoop처리해량수거적능력,이면향복무적형식지지분포식수거알굴응용적설계화운행,병묘술면향복무적운수거알굴인경계통적관건부건화실현기술.의거면향복무적연건체계결구화기우운평태적수거알굴인경,가이유효해결해량수거알굴중적해량수거존저、수거처리화수거알굴산법호조작성등문제.