【问题标题】:Namenode not start after restart pc (hadoop 2.7.3)重启电脑后Namenode无法启动(hadoop 2.7.3)
【发布时间】:2017-04-04 12:46:43
【问题描述】:

我在 ubuntu 16.04 上配置了 hadoop 2.7.3 并运行所有(字数统计和其他 mapReduce 运行所有)。 重启电脑后,我启动了 start-dfs,但 namenode 没有启动。其他指南说删除临时目录,但我没有。

这是我的文件:

核心站点.xml

<configuration>
 <property>
   <name>fs.defaultFS</name>
   <value>hdfs://localhost:9000</value>
 </property>
</configuration>

hdfs-site.xml

<configuration>
 <property>
   <name>dfs.replication</name>
   <value>1</value>
 </property>
</configuration>

【问题讨论】:

  • 可以分享name节点日志吗?
  • @DeepanRam 这是日志:2017-04-04 15:25:36,095 错误 org.apache.hadoop.hdfs.server.namenode.NameNode:无法启动名称节点。 org.apache.hadoop.hdfs.server.common.InconsistentFSStateException: 目录 /tmp/hadoop-alessio/dfs/name 处于不一致状态:存储目录不存在或不可访问。
  • 重启后删除“/tmp”下的文件夹和结构。尝试将它们更改为本地结构并尝试授予它们 775 权限并重新启动服务。
  • @DeepanRam 我如何更改“/tmp”并授予 775 权限?

标签: apache ubuntu hadoop namenode bigdata


【解决方案1】:
Step 1: Create the folders like below:
      -- sudo mkdir /dfs
      -- sudo chown username:username /dfs/*
      -- sudo chmod 755 /dfs/
      -- cd /dfs
      If the machine is name node then:
          -- mkdir nn 
      if data node: 
          -- mkdir data

Step 2:
add below properties in hdfs-site.xml
<configuration>
        <configuration>
            <property>
                <name>dfs.replication</name>
                <value>1</value>
            </property>
        </configuration>
        <configuration>
            <property>
                <name>dfs.namenode.name.dir</name>
                <value>/dfs/nn</value>
            </property>
        </configuration>
        <configuration>
            <property>
                <name>dfs.datanode.data.dir</name>
                <value>/dfs/data</value>
            </property>
        </configuration>


</configuration>
step 3:
 format the namenode: hadoop namenode -format
step 4:
 start all services 

【讨论】:

  • 现在不要启动datanode(和namenode)! namenode和datanode(dfs/nn和dfs/data)的路径有错误
  • 错误 org.apache.hadoop.hdfs.server.namenode.NameNode:无法启动名称节点。 org.apache.hadoop.hdfs.server.common.InconsistentFSStateExce‌​ption:目录/tmp/hadoop-alessio/dfs/name处于不一致状态:存储目录不存在或不可访问。
  • 是的,但是每次重启都会删除tmp文件夹,并且不会创建namenode
  • 你能分享一下“hadoop namenode -format”的日志信息吗?
  • 将日志消息发送到此邮件 ID:kanagaraj.vp@gmail.com
猜你喜欢
  • 2012-03-25
  • 2015-06-17
  • 2016-02-15
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2015-07-28
相关资源
最近更新 更多