计算机应用与软件
計算機應用與軟件
계산궤응용여연건
COMPUTER APPLICATIONS AND SOFTWARE
2013年
12期
207-210,261
,共5页
柯何杨%杨群%王立松%朱快快
柯何楊%楊群%王立鬆%硃快快
가하양%양군%왕립송%주쾌쾌
延迟调度%延迟时间间隔%本地化%期望本地化概率
延遲調度%延遲時間間隔%本地化%期望本地化概率
연지조도%연지시간간격%본지화%기망본지화개솔
Delay scheduling%Delay time interval%Localisation%Expected localisation probability
基于Hadoop框架的云计算中,为减少数据迁移提高程序执行效率,延迟调度算法允许作业花费一定的延迟时间间隔等待某计算资源包含该作业待处理数据,而延迟时间间隔的选择往往是一个经验值。在分析了作业待处理数据在文件系统中的分布情况如何影响作业本地化调度的基础上,引入参数用户期望本地化概率,推导出等待时间的计算公式。该公式区分不同的作业,设置不同的等待时间,并且用户可以根据期望本地化概率这一参数来调控作业预期的本地化程度。对上述方法进行实验验证,结果表明:通过公式计算出的延迟时间能够使得作业达到用户预期的本地化效果。
基于Hadoop框架的雲計算中,為減少數據遷移提高程序執行效率,延遲調度算法允許作業花費一定的延遲時間間隔等待某計算資源包含該作業待處理數據,而延遲時間間隔的選擇往往是一箇經驗值。在分析瞭作業待處理數據在文件繫統中的分佈情況如何影響作業本地化調度的基礎上,引入參數用戶期望本地化概率,推導齣等待時間的計算公式。該公式區分不同的作業,設置不同的等待時間,併且用戶可以根據期望本地化概率這一參數來調控作業預期的本地化程度。對上述方法進行實驗驗證,結果錶明:通過公式計算齣的延遲時間能夠使得作業達到用戶預期的本地化效果。
기우Hadoop광가적운계산중,위감소수거천이제고정서집행효솔,연지조도산법윤허작업화비일정적연지시간간격등대모계산자원포함해작업대처리수거,이연지시간간격적선택왕왕시일개경험치。재분석료작업대처리수거재문건계통중적분포정황여하영향작업본지화조도적기출상,인입삼수용호기망본지화개솔,추도출등대시간적계산공식。해공식구분불동적작업,설치불동적등대시간,병차용호가이근거기망본지화개솔저일삼수래조공작업예기적본지화정도。대상술방법진행실험험증,결과표명:통과공식계산출적연지시간능구사득작업체도용호예기적본지화효과。
In Hadoop framework-based cloud computing , in order to reduce data transfer and improve program efficiency , the delay scheduling algorithm allows job to spend a certain amount of delay time interval to wait the data to be processed in the operation to be contained in certain computing resource , but the delaying time interval selected is often an experience value .In this paper we introduce the probability of parameter users expected localisation and derive the calculation formula of waiting time based on the analysis of how the operating data to be processed in the file system affects the localised job scheduling .The formula distinguishes different jobs and sets different waiting time, and the users can control the localisation degree the job expected based on the parameter of desired localisation probability . Experiment is conducted to verify the above method , the results show that the delay time computed by the above formula can make the operation reach the localisation effect that the users expected .