hadoop - 覆盖默认的JVM重用值

Question

我们在hadoop的mapred-site.xml中将mapred.job.reuse.jvm.num.tasks设置为-1(即可以无限制地重用jvm)。但我想在我的一份映射工作中覆盖此属性。是否可以仅对一项作业将此值覆盖为1。

Answer 1

您可以覆盖在相应的configuration.xml文件中未标记为final的任何属性。去做这个

将命令行参数传递给-D property_name=value。

或通过在您配置的映射作业中进行配置

Configuration.set(“property_name”，“value”);