我的应用程序是通过spark submit在yarn cluster模式下通过kerberos keytab和principals从远程pc启动的,指南如下:https://spark.apache.org/docs/latest/running-on-yarn.html. 这种方法的优点是我在任何集群都有自己版本的spark。
只有通过运行带有hadoop\ u conf\ u dir/yarn\ u conf\ u dir configs的bash脚本,才能在没有sftp/ssh的情况下自动将ignite/hazelcast/accumulo/kudu或其他具有随机读写访问权限的nosql db部署到hadoop yarn集群中吗?
1条答案
按热度按时间w8biq8rn1#
将hazelcast部署在一个Yarn簇上是可行且简单的,请看https://github.com/hazelcast/hazelcast-yarn