hadoop - yarn - 为什么应用程序尝试两次?

标签 hadoop apache-spark hadoop-yarn

我制作了 Spark 应用程序,它故意抛出错误。当我在 hadoop yarn 上运行这个应用程序时,它总是尝试两次。

我只想运行应用程序一次,而不是两次。

enter image description here

最佳答案

应用程序尝试的次数由该属性yarn.resourcemanager.am.max-attempts控制。默认情况下为 2

yarn-site.xml中修改此内容,

<property>
   <name>yarn.resourcemanager.am.max-attempts</name>
   <value>1</value>
</property>

关于hadoop - yarn - 为什么应用程序尝试两次?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/43405143/

相关文章:

hadoop - 使用 KMS 在配置单元中进行列级加密

hadoop - 如何从机器内部在 google cloud dataproc 上运行配置单元?

java - 将包含 Json 的 Dataset<String> 转换为 Dataset<StructType>

java - 如何对每个分区中元素数量不同的两个 RDD 执行类似 zip 的操作?

python - Hadoop YARN 与 mapreduce

java - Iterable 接口(interface)中的歧义及其在 Java 中的实现

java - 从 Java 中的 DataFrame 查找每天的最大行程 - Spark

java - 如何将 Apache Spark 与 Spring MVC Web 应用程序集成以实现交互式用户 session

kubernetes - 将 Kubernetes 与 Yarn 集成

hadoop - YARN : Application failed 2 times due to AM Container 上的 Spark 1.3.0