我想对我的fair调度器配置做一个性能分析,我发现了一个工具——“yarn scheduler load simulator(sls)”,我相信它可以帮到我。我已经按照文档进行了操作,并使用一个示例作业跟踪设置了yarn sls。
但是我不知道如何用这个工具精确地监控调度程序的行为。它运行并显示我输入的示例作业跟踪的调度程序行为,即使没有fair scheduler配置。
如果有人能告诉我如何配置yarn sls来使用fair-scheduler.xml,以及如何监控调度器模拟(或者更好的是,寻找什么),这对我真的很有帮助。
谢谢!
1条答案
按热度按时间7fyelxc51#
我假设您已经编译了自己的hadoop版本。否则我认为你无法实现公平运行。
如果我没有弄错的话,sls正在模拟调度程序的配置
yarn-site.xml
正在提供。因此,您应该在这里定义要使用的调度程序的类型。