向mesos提交spark作业时如何指定用户

r7xajy2e 于 2021-06-26 发布在 Mesos

关注(0)|答案(1)|浏览(476)

我们需要向mesos集群提交一个spark作业以作为另一个用户运行。指定--代理用户似乎不起作用

./spark-submit  --deploy-mode cluster --master mesos://XXX:7077 --proxy-user userX

还有别的办法吗？

1条答案

有，请参见以下链接：http://mesos.apache.org/documentation/latest/configuration/ 使用以下选项

--hostname=VALUE

当留空时，主机名将从ip地址解析。我知道这和代理用户有点不同
如果要阻止用户使用用户界面，可以使用aclhttps://apache.googlesource.com/spark/+/master/docs/security.md