使用Docker Image本地运行Databricks(Spark)

myzjeezk  于 2023-04-05  发布在  Docker
关注(0)|答案(1)|浏览(172)

我想在本地运行databaricks/spark container。我在下面找到了一张图片:https://github.com/databricks/containers
我已经把它拉出来运行了,Docker运行成功,但我不知道如何启动集群或启动UI或Notebook。
我使用了标准图像,因为它应该有python notebook:https://github.com/databricks/containers/tree/master/ubuntu/standard

afdcj2ne

afdcj2ne1#

首先,Databricks不仅仅是Spark。你想运行Databricks还是Spark?
Databricks不能在本地docker容器上运行。您可以做的是使用databricks代码创建一个客户docker image,然后在云中运行。
但是,您可能希望在docker中运行jupyter pyspark-notebook。

相关问题