核电子学与探测技术
覈電子學與探測技術
핵전자학여탐측기술
NUCLEAR ELECTRONICS & DETECTION TECHNOLOGY
2014年
10期
1153-1158
,共6页
霍菁%石京燕%孙功星%阚博文
霍菁%石京燕%孫功星%闞博文
곽정%석경연%손공성%감박문
集群资源管理%DRF资源分配算法%Mesos%Torque%Hadoop
集群資源管理%DRF資源分配算法%Mesos%Torque%Hadoop
집군자원관리%DRF자원분배산법%Mesos%Torque%Hadoop
cluster resource management%DRF allocation algorithm%Mesos%Torque%Hadoop
根据BESIII集群的实际需求,在测试和研究了不同类型的高能物理数据处理作业不同配置机器上的运行效果的基础上,提出了一种改进的DRF资源分配算法,加入了机器性能评级和作业类型匹配两个因素作为资源调度的依据,对算法进行实现并使用真实数据进行了实验测试。测试结果表明:新算法能够更加合理地分配资源,有效提高系统资源利用率,缩短作业运行时间。
根據BESIII集群的實際需求,在測試和研究瞭不同類型的高能物理數據處理作業不同配置機器上的運行效果的基礎上,提齣瞭一種改進的DRF資源分配算法,加入瞭機器性能評級和作業類型匹配兩箇因素作為資源調度的依據,對算法進行實現併使用真實數據進行瞭實驗測試。測試結果錶明:新算法能夠更加閤理地分配資源,有效提高繫統資源利用率,縮短作業運行時間。
근거BESIII집군적실제수구,재측시화연구료불동류형적고능물리수거처리작업불동배치궤기상적운행효과적기출상,제출료일충개진적DRF자원분배산법,가입료궤기성능평급화작업류형필배량개인소작위자원조도적의거,대산법진행실현병사용진실수거진행료실험측시。측시결과표명:신산법능구경가합리지분배자원,유효제고계통자원이용솔,축단작업운행시간。
This paper presents an improved DRF resource allocation algorithm for BESIII cluster , as a result of the tests and research on different type of high energy physics jobs running on different machines .The machine performance rating and job type matching are added to the new algorithm as two factors for resource allocation . The new algorithm is implemented and tested with real data .The results show that the new algorithm can allo-cate resources more effectively , which improves the resource utilization and reduces the run time of jobs .