hadoop - 对 webhdfs 的 http 请求，但服务器的回复为空

Question

我是 hadoop 的新手。我启用了 webhdfs 并使用 curl 命令获取主目录。

curl -i "http://172.16.18.50:9000/webhdfs/v1/?op=GETHOMEDIRECTORY"

但是获取信息:来自服务器的空回复。这是 conf 文件:

核心站点.xml ----

<configuration>
   <property>
      <name>fs.default.name</name>
      <value>hdfs://webHDFS0:9000</value>
   </property>

   <property>
      <name>hadoop.tmp.dir</name>
      <value>/home/eins/hadoop-1.0.2/tmp</value>
   </property>
</configuration>

hdfs-site.xml ----

<configuration>
   <property>
      <name>dfs.replication</name>
      <value>2</value>
   </property>
    <property>
        <name>dfs.webhdfs.enabled</name>
        <value>enabled</value>
    </property>
</configuration>

谁能给些建议？

Answer 1

您正在尝试连接到 NameNode IPC 套接字(端口 9000)，而不是网络套接字(默认为 50075)。试试这个:

http://172.16.18.50:50075/webhdfs/v1/?op=GETHOMEDIRECTORY

此外，您在 hdfs-site.xml 中的配置需要将 true 作为其值，而不是 enabled:

hdfs-site.xml ----

<configuration>
   <property>
      <name>dfs.replication</name>
      <value>2</value>
   </property>
    <property>
        <name>dfs.webhdfs.enabled</name>
        <value>true</value>
    </property>
</configuration>

要确认一切正常，请查看您的名称节点的日志，您应该会看到如下内容:

2012-05-22 06:23:42,176 INFO org.apache.hadoop.http.HttpServer: dfs.webhdfs.enabled = true
2012-05-22 06:23:42,177 INFO org.apache.hadoop.http.HttpServer: Added filter 'SPNEGO' (class=org.apache.hadoop.hdfs.web.AuthFilter)
2012-05-22 06:23:42,179 INFO org.apache.hadoop.http.HttpServer: addJerseyResourcePackage: packageName=org.apache.hadoop.hdfs.server.namenode.web.resources;org.apache.hadoop.hdfs.web.resources, pathSpec=/webhdfs/v1/*

目前，我假设你说的是:

2012-05-22 06:11:20,676 INFO org.apache.hadoop.http.HttpServer: dfs.webhdfs.enabled = false