博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
Hadoop 公平调度器算法调度解析
阅读量:6408 次
发布时间:2019-06-23

本文共 689 字,大约阅读时间需要 2 分钟。

下面正式介绍公平调度器的层次调度算法,大的思想与Capacity Scheduler类似,首先选择一个pool,然后从该pool中选择一个job,最后从该job中选择一个locality的task。

 

 

 

其中,选择pool和job的策略相同,均采用了FairShareComparator比较器对pool或者job进行排序,然后从头到尾扫描队列,选出合适的pool或者job。

选择pool时的方法:When we sort pools to choose which ones to schedule next, we place pools below their min share ahead of pools above their min share. We order the pools below their min share by how far they are below it as a percentage of the share.(通过低于最小共享额的百分比排序)

选择Job时的方法:The comparator orders jobs by distance below min share and then by runningTasks/weight.

Deficit对作业用赤字(作业在理想调度器上所应得的计算时间与实际所获得的计算时间的差额)进行排序,依次测试,直到满足条件的Task被选出为止。

转载于:https://www.cnblogs.com/wenchchgz/archive/2012/11/07/2758621.html

你可能感兴趣的文章
c#后台线程更新界面
查看>>
冒泡排序-----选择排序
查看>>
CRC从原理到实现
查看>>
jquery-json 插件使用方法
查看>>
List集合共性方法
查看>>
javaweb中关于转发与重定向的写法
查看>>
mariadb配置允许远程访问方式
查看>>
记 悟空传 里的一些话
查看>>
Network Stack‎ : CookieMonster
查看>>
python中的切片问题
查看>>
Elastic 技术栈之快速入门
查看>>
excel数据的处理
查看>>
Agile PLM EC 301 Workspace CAD working directory vs. EC Workspaces
查看>>
【HDOJ】1362 The Bermuda Triangle
查看>>
【HDOJ】1238 Substrings
查看>>
结对编程1个人博客
查看>>
Octopus系列之HttpCustom2.0模板引擎的处理,一个bug的分析
查看>>
CentOS6,7不同
查看>>
@Component @Repository @Service @Controller
查看>>
C#编程(十六)----------匿名类型
查看>>