如果向 Apache YARN 集群提交新作业,状态页面通常会指示作业实际是如何提交的(除其他事项外):
Application Type: SPARK
这表明用户很可能使用 spark-submit 向资源管理器发布了一个新作业。
是否可以像更改应用程序名称一样通过参数更改该字符串的值?
最佳答案
应用类型在 Spark 设置 yarn 应用上下文时设置。
AFAIK,无法更改某些配置的方式。如果它真的很重要,您将不得不在源代码中覆盖它。
关于apache-spark - Yarn 的 "Application Type"在哪里/如何定义?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/52233616/