在pyspark emr中重试慢进程

ykejflvf  于 2021-05-26  发布在  Spark
关注(0)|答案(0)|浏览(213)

我在emr里运行一个Spark束。所有执行工作正常,但在特定阶段,它返回到process previows stages,在控制台中显示retry:

控制台中没有任何错误,但它会重试这些阶段。我使用的是emr版本6.2.0,它使用的是spark3.0.1版本。
spark为什么要重试?

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题