spark驱动程序在mesos主机上订阅的端口配置

nhhxz33t  于 2021-06-26  发布在  Mesos
关注(0)|答案(1)|浏览(238)

我有一个Spark驱动器,这是连接到我的mesos主。驱动程序正在一个特定的端口上监听我的mesos主机提供的资源
已在收到框架“简单Kafka应用程序”的订阅调用scheduler-901ab680-7098-4cb0-ab27-4b293285a2b6@.xx.xx.:57033
我想配置这个端口,因为我需要在我的机器上白名单这个端口。我不知道这是哪个形态。我已经配置了spark.driver.port和broadcast端口,但是我非常确定这些端口在这个场景中没有使用。

wvmv3b1j

wvmv3b1j1#

要使用自定义端口与mesos通信,需要指定 LIBPROCESS_PORT 具有应使用的端口号的环境变量。默认情况下,它未设置或设置为 0 这导致随机端口。

export LIBPROCESS_PORT=<PORT>

相关问题