如果核心减少到一半,则Spark作业需要更长的时间

5kgi1eie  于 2021-05-27  发布在  Spark
关注(0)|答案(0)|浏览(174)

我的项目使用spark 1.6.0,在单集群模式下运行,以前我的系统有8个内核,可以在2分钟内处理所有记录,但当我只使用4个内核,其余配置相同时,需要3个多小时才能完成任务。我不明白为什么我的工作要花这么多时间。

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题