java - 使用命令行在 Windows 中的 hadoop 上运行 wordcount.jar

Question

我试图在 hadoop 上运行一个简单的 wordcount 程序，但遇到如下错误。

 Exception in thread "main" java.io.IOException: Error opening job jar: /user/asiapac/bmohanty6/wordcount/wordcount.jar
        at org.apache.hadoop.util.RunJar.main(RunJar.java:90)
Caused by: java.io.FileNotFoundException: \user\asiapac\bmohanty6\wordcount\wordcount.jar (The system cannot find the path specified)
 at java.util.zip.ZipFile.open(Native Method)
 at java.util.zip.ZipFile.<init>(Unknown Source)
 at java.util.zip.ZipFile.<init>(Unknown Source)
 at java.util.jar.JarFile.<init>(Unknown Source)
 at java.util.jar.JarFile.<init>(Unknown Source)
 at org.apache.hadoop.util.RunJar.main(RunJar.java:88)

我正在使用以下命令。

$ bin/hadoop jar /user/asiapac/bmohanty6/wordcount/wordcount.jar WordCount /user/asiapac/bmohanty6/wo
rdcount/input /user/asiapac/bmohanty6/wordcount/output

我正在使用 Cygwin、hadoop-0.20.2 和伪节点设置。我还将 wordcount.jar 上传到我的 DFS。请参阅下面我的 DFS 屏幕截图

我能够在 eclipse 中成功运行相同的 wordcount 程序。我根据 this 通过 eclipse 创建了 wordcount.jar 文件教程。我在网上搜索了很多但无法理解如何解决这个问题。请帮助我。

Answer 1

需要在user前添加/:

bin/hadoop jar /user/asiapac/bmohanty6/wordcount/wordcount.jar WordCount /user/asiapac/bmohanty6/wordcount/input /user/asiapac/bmohanty6/wordcount/output

这使它们成为完全合格的路径。如果在 user 之前省略 /，Hadoop 将从当前目录开始搜索。