向mesos提交spark作业时如何指定用户

r7xajy2e  于 2021-06-26  发布在  Mesos
关注(0)|答案(1)|浏览(372)

我们需要向mesos集群提交一个spark作业以作为另一个用户运行。指定--代理用户似乎不起作用

./spark-submit  --deploy-mode cluster --master mesos://XXX:7077 --proxy-user userX

还有别的办法吗?

uinbv5nw

uinbv5nw1#

有,请参见以下链接:http://mesos.apache.org/documentation/latest/configuration/ 使用以下选项

--hostname=VALUE

当留空时,主机名将从ip地址解析。我知道这和代理用户有点不同
如果要阻止用户使用用户界面,可以使用aclhttps://apache.googlesource.com/spark/+/master/docs/security.md

相关问题