关于 Hadoop：Hadoop – namenode 没有启动


Hadoop - namenode is not starting up

我正在尝试以 root 用户身份运行 hadoop，我在 Hadoop 文件系统运行时执行了 namenode 格式命令 hadoop namenode -format。

在此之后，当我尝试启动名称节点服务器时，它显示如下错误

1
2
3
4
5
13/05/23 04:11:37 ERROR namenode.FSNamesystem: FSNamesystem initialization failed.
java.io.IOException: NameNode is not formatted.
        at org.apache.hadoop.hdfs.server.namenode.FSImage.recoverTransitionRead(FSImage.java:330)
        at org.apache.hadoop.hdfs.server.namenode.FSDirectory.loadFSImage(FSDirectory.java:100)
        at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.initialize(FSNamesystem.java:411)

我试图寻找任何解决方案，但找不到任何明确的解决方案。

有人可以推荐吗？

谢谢。

相关讨论

DFS 需要格式化。停止所有后只需发出以下命令，然后重新启动。

1
hadoop namenode -format

酷，我找到了解决方案。

停止所有正在运行的服务器

1
1) stop-all.sh

编辑文件 /usr/local/hadoop/conf/hdfs-site.xml 并添加以下配置(如果缺少)

1
2
3
4
5
6
7
8
9
10
<property>
    <name>dfs.data.dir</name>
    <value>/app/hadoop/tmp/dfs/name/data</value>
    <final>true</final>
    </property>
    <property>
    <name>dfs.name.dir</name>
    <value>/app/hadoop/tmp/dfs/name</value>
    <final>true</final>
</property>

同时启动 HDFS 和 MapReduce 守护进程

1
2
2) start-dfs.sh
3) start-mapred.sh

然后现在运行其余步骤以运行此链接中给出的 map reduce 示例

注意：如果直接命令未运行，您应该运行命令 bin/start-all.sh。

相关讨论

namenode 停止时格式化 hdfs。(就像上面的答案一样)。

我添加了更多细节。

FORMAT 命令将检查或创建路径/dfs/name，并对其进行初始化或重新初始化。
然后运行 ??start-dfs.sh 将运行 namenode、datanode，然后是 namesecondary。
当namenode检查不存在路径/dfs/name或未初始化时，会发生致命错误，然后退出。
这就是namenode无法启动的原因。

更多细节你可以查看 HADOOP_COMMON/logs/XXX.namenode.log

确保您为 namenode 指定的目录完全为空。所述目录中的"丢失"文件夹之类的东西会触发此错误。

确保名称(dfs.name.dir)和数据(dfs.data.dir)文件夹的目录在 hdfs-site.xml 中正确列出

首先 mkdir [文件夹]，然后设置 hdfs-site.xml 然后格式化

hdfs-site.xml 你的值是错误的。您输入了错误的文件夹，这就是没有启动名称节点的原因。