求助FaceBook最初提出Fair Scheduler的文献！

hadoop毕设苦行僧 2016-06-10 12:54:04

想要详细的了解Fair Schedule的算法思想，可是找不到原文，哪位朋友有麻烦发我吧，谢了！

...全文

144 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

低调是种无声的高调 2016-06-10

打赏
举报

回复

你们这些水笔，过节还在这浪

FairScheduler是Facebook为Hadoop YARN贡献的一个可插拔调度器，旨在实现多应用程序间的公平资源分配。它支持内存和CPU的DRF策略调度，并允许应用程序按优先级获取资源。FairScheduler使用队列结构，每个队列内部采用公平调度策略，确保长时间和短时间任务都能得到合理执行，同时支持为队列设置资源保证的最小份额。

本文对比了Facebook的FairScheduler和Yahoo的CapacityScheduler两种Hadoop调度器。FairScheduler注重公平性，通过作业缺额体现，每次选择缺额最大的job。CapacityScheduler则在选择资源利用率低的queue时，同时考虑FIFO和memoryconstraint因素。两者均支持多用户多队列管理，资源共享，但在核心调度策略和内存约束上存在差异。

本文介绍了Facebook开发的FairScheduler，一种实现多用户间资源公平分配的调度器。它通过特定的算法确保每个队列都能获得相应的资源份额。

本文介绍了Facebook贡献给Hadoop社区的FairScheduler，旨在提高多用户MapReduce集群的任务调度效率。通过延迟调度和复制计算分离等技术手段，有效提升了任务执行速度并优化了资源分配。

703

社区成员

253,689

社区内容

发帖

与我相关

我的任务

其他技术论坛（原bbs）

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章