计算机研究与发展
計算機研究與髮展
계산궤연구여발전
JOURNAL OF COMPUTER RESEARCH AND DEVELOPMENT
2011年
z1期
63-67
,共5页
马礼%李敬喆%葛根焰%杨银刚
馬禮%李敬喆%葛根燄%楊銀剛
마례%리경철%갈근염%양은강
海量数据%多核%快速读取%并行%负载均衡
海量數據%多覈%快速讀取%併行%負載均衡
해량수거%다핵%쾌속독취%병행%부재균형
随着多核计算机的发展,多核PC机已经可以完成许多大规模计算任务,然而面对海量数据的处理,存储器与辅助存储器内的数据读取往往会成为提高应用程序运行速度的瓶颈,从而不能很好运用多核系统带来的优越硬件性能.基于多核环境的海量数据快速提取方法,以内存映射文件方法为基础并运用基于视图映射粒度的划分方式和动态与静态结合的负载均衡策略,实现了在多核平台下针对海量数据的高速并行提取.实验表明,此种方法充分发挥了多核环境的特点,并在数据量增大的情况下有良好的适应性.
隨著多覈計算機的髮展,多覈PC機已經可以完成許多大規模計算任務,然而麵對海量數據的處理,存儲器與輔助存儲器內的數據讀取往往會成為提高應用程序運行速度的瓶頸,從而不能很好運用多覈繫統帶來的優越硬件性能.基于多覈環境的海量數據快速提取方法,以內存映射文件方法為基礎併運用基于視圖映射粒度的劃分方式和動態與靜態結閤的負載均衡策略,實現瞭在多覈平檯下針對海量數據的高速併行提取.實驗錶明,此種方法充分髮揮瞭多覈環境的特點,併在數據量增大的情況下有良好的適應性.
수착다핵계산궤적발전,다핵PC궤이경가이완성허다대규모계산임무,연이면대해량수거적처리,존저기여보조존저기내적수거독취왕왕회성위제고응용정서운행속도적병경,종이불능흔호운용다핵계통대래적우월경건성능.기우다핵배경적해량수거쾌속제취방법,이내존영사문건방법위기출병운용기우시도영사립도적화분방식화동태여정태결합적부재균형책략,실현료재다핵평태하침대해량수거적고속병행제취.실험표명,차충방법충분발휘료다핵배경적특점,병재수거량증대적정황하유량호적괄응성.