原始spark distributive支持多个集群管理器,如yarn、mesos、spark standalone、k8s。我在databricks spark中找不到隐藏的内容,它使用的是哪个集群管理器,是否可以更改?什么是databricks spark体系结构?谢谢。
piztneat1#
您不能在databricks中检查集群管理器,而且您真的不需要它,因为这部分是为您管理的。你可以把它看作是一种独立的集群,但也有区别。这里显示了一般的databricks体系结构。您可以通过不同的方法更改集群配置—初始化脚本、配置参数等。有关更多详细信息,请参阅文档。
1条答案
按热度按时间piztneat1#
您不能在databricks中检查集群管理器,而且您真的不需要它,因为这部分是为您管理的。你可以把它看作是一种独立的集群,但也有区别。这里显示了一般的databricks体系结构。
您可以通过不同的方法更改集群配置—初始化脚本、配置参数等。有关更多详细信息,请参阅文档。