我可以为map定义不同的数量并减少每个节点的插槽吗?

osh3o9ms  于 2021-05-30  发布在  Hadoop
关注(0)|答案(1)|浏览(300)

我想知道是否可以为hadoop集群中的每个节点定义不同数量的插槽。
例如:tasktracker1:2 map和2 reduce
tasktracker2:1个map和1个reduce
等等。。。
或者我必须为集群中的所有节点设置插槽数
非常感谢,,
注意:我使用hadoop版本:1.2.1,因为它是最新的稳定版本,但如果有任何版本可以做到这一点,请告诉我

lskq00tm

lskq00tm1#

看一看 mapreduce.tasktracker.map.tasks.maximum 以及 mapreduce.tasktracker.reduce.tasks.maximum . 他们两个都被安排好了 mapred-site.xml .
hadoop中map reduce作业的配置中有许多配置参数可供使用。有些取决于您使用的版本。

相关问题