我的应用程序是通过使用Kerberos keytab和主体通过yarn-cluster模式下的spark-submit通过spark-submit远程启动的，它由以下指南提供:https://spark.apache.org/docs/latest/running-on-yarn.html。这种方法的优点是，我在任何群集上都有自己的spark版本。
是否可以仅通过运行具有HADOOP_CONF_DIR / YARN_CONF_DIR配置的bash脚本来自动部署具有随机访问权限的Ignite / Hazelcast / Accumulo / Kudu或其他NoSQL DB，而无需对sftp / ssh的Hadoop YARN集群进行读写访问就可以进行随机访问？
最佳答案
在YARN集群上部署Hazelcast是可能且容易的，请看https://github.com/hazelcast/hazelcast-yarn
关于hadoop - 具有远程部署的Hadoop键值存储，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/47795550/