微型电脑应用
微型電腦應用
미형전뇌응용
MICROCOMPUTER APPLICATIONS
2015年
8期
19-21,25
,共4页
Hadoop%作业调度%三队列%作业优先级%资源抢占
Hadoop%作業調度%三隊列%作業優先級%資源搶佔
Hadoop%작업조도%삼대렬%작업우선급%자원창점
@@
针对Hadoop平台的作业调度问题,提出支持作业优先级、作业类型区分和资源抢占的三队列作业调度算法(TJSA).为更好地满足用户需求,通过设置作业优先级细化作业差别,并按照优先级的高低依次进入等待队列;进而对作业类型进行区分,设置CPU密集型作业队列和I/O密集型作业队列,以提高作业的并行执行效率;当队列资源不足时可以基于节点特征对资源进行回收,从而提高平台的整体性能和节点资源利用率.实验结果表明:TJSA算法在作业运行时间和集群运行稳定性上都表现出较好的性能.
針對Hadoop平檯的作業調度問題,提齣支持作業優先級、作業類型區分和資源搶佔的三隊列作業調度算法(TJSA).為更好地滿足用戶需求,通過設置作業優先級細化作業差彆,併按照優先級的高低依次進入等待隊列;進而對作業類型進行區分,設置CPU密集型作業隊列和I/O密集型作業隊列,以提高作業的併行執行效率;噹隊列資源不足時可以基于節點特徵對資源進行迴收,從而提高平檯的整體性能和節點資源利用率.實驗結果錶明:TJSA算法在作業運行時間和集群運行穩定性上都錶現齣較好的性能.
침대Hadoop평태적작업조도문제,제출지지작업우선급、작업류형구분화자원창점적삼대렬작업조도산법(TJSA).위경호지만족용호수구,통과설치작업우선급세화작업차별,병안조우선급적고저의차진입등대대렬;진이대작업류형진행구분,설치CPU밀집형작업대렬화I/O밀집형작업대렬,이제고작업적병행집행효솔;당대렬자원불족시가이기우절점특정대자원진행회수,종이제고평태적정체성능화절점자원이용솔.실험결과표명:TJSA산법재작업운행시간화집군운행은정성상도표현출교호적성능.
