我一直理解spark shell，无论是pyspark还是scala，都是在客户机模式下运行的。如果我错了，请纠正我，没有现成的配置可以在集群模式下使用它们。
为什么会这样？是什么使群集模式不适合这些交互式shell？
客户端和驱动程序之间的网络延迟可能是一个因素。如果使用了yarn，那么可能会有更高的初始启动时间，因为需要从yarn资源管理器为驱动程序提供集群资源。但在我看来，这两个因素并不是严重的阻碍因素。
编辑
问题spark submit/spark shell>yarn client和yarn cluster模式之间的差异是相关的，但没有关注shell为什么不能在cluster模式下运行（答案没有涵盖）。

pyspark --deploy-mode cluster
Error: Cluster deploy mode is not applicable to Spark shells.