MapReduce作业在history server上报告为已完成,而在控制台上显示为仅完成了一半

0yg35tkg  于 2021-05-14  发布在  Hadoop
关注(0)|答案(0)|浏览(140)

我在hadoopyarn 2.3.0集群上运行一个mrv1作业,问题是当我提交这个作业时,yarn为提交的作业创建了多个应用程序,并且在yarn中运行的最后一个应用程序被标记为已完成,即使在控制台上报告为仅完成58%。我已经确认,它也没有打印日志语句,它应该打印时,工作实际上是完成。
请参阅下面作业提交控制台的输出。它只是在58%停止,作业历史服务器和yarn集群ui报告此作业已经成功。

4/08/28 08:36:19 INFO mapreduce.Job:  map 54% reduce 0%
14/08/28 08:44:13 INFO mapreduce.Job:  map 55% reduce 0%
14/08/28 08:52:16 INFO mapreduce.Job:  map 56% reduce 0%
14/08/28 08:59:22 INFO mapreduce.Job:  map 57% reduce 0%
14/08/28 09:07:33 INFO mapreduce.Job:  map 58% reduce 0%

谢谢。

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题