Hadoop 启动-dfs.sh 失败

Question

我是 Hadoop 新手，我按照 instruction 配置集群

配置完成后，我使用 /bin/start-dfs.sh 启动 HDFS 守护进程

我检查日志文件 /home/deploy/hadoop/libexec/../logs/hadoop-deploy-datanode-slave1.out 以确保运行，但我只看到如下文本:

ulimit -a for user deploy
core file size          (blocks, -c) 0
data seg size           (kbytes, -d) unlimited
scheduling priority             (-e) 0
file size               (blocks, -f) unlimited
pending signals                 (-i) 63524
max locked memory       (kbytes, -l) 64
max memory size         (kbytes, -m) unlimited
open files                      (-n) 4096
pipe size            (512 bytes, -p) 8
POSIX message queues     (bytes, -q) 819200
real-time priority              (-r) 0
stack size              (kbytes, -s) 8192
cpu time               (seconds, -t) unlimited
max user processes              (-u) 16384
virtual memory          (kbytes, -v) unlimited
file locks                      (-x) unlimited

希望有人能帮忙吗？

Answer 1

@Minh，您正在查看 /home/deploy/hadoop/libexec/../logs/hadoop-deploy-datanode-slave1.out，而不是查看 /home/deploy/hadoop/libexec/../logs/hadoop-deploy-datanode-slave1.log。 同样，/home/deploy/hadoop/libexec/../logs/ 文件夹中还有其他日志文件。

让我详细解释一下 .log 和 .out 文件。

logs 文件夹中的一些文件以.log 结尾，而另一些以.out 结尾。 .out 文件仅在守护进程启动时写入。 守护进程成功启动后，.out 文件将被截断。 相比之下，所有日志消息都可以在 .log 文件中找到，包括发送到 .out 文件的守护程序启动消息。