我有一个Spark驱动器,这是连接到我的mesos主。驱动程序正在一个特定的端口上监听我的mesos主机提供的资源
已在收到框架“简单Kafka应用程序”的订阅调用scheduler-901ab680-7098-4cb0-ab27-4b293285a2b6@.xx.xx.:57033
我想配置这个端口,因为我需要在我的机器上白名单这个端口。我不知道这是哪个形态。我已经配置了spark.driver.port和broadcast端口,但是我非常确定这些端口在这个场景中没有使用。
我有一个Spark驱动器,这是连接到我的mesos主。驱动程序正在一个特定的端口上监听我的mesos主机提供的资源
已在收到框架“简单Kafka应用程序”的订阅调用scheduler-901ab680-7098-4cb0-ab27-4b293285a2b6@.xx.xx.:57033
我想配置这个端口,因为我需要在我的机器上白名单这个端口。我不知道这是哪个形态。我已经配置了spark.driver.port和broadcast端口,但是我非常确定这些端口在这个场景中没有使用。
1条答案
按热度按时间wvmv3b1j1#
要使用自定义端口与mesos通信,需要指定
LIBPROCESS_PORT
具有应使用的端口号的环境变量。默认情况下,它未设置或设置为0
这导致随机端口。