【问题标题】:Hadoop datanodes cannot find namenode in standalone setupHadoop 数据节点在独立设置中找不到名称节点
【发布时间】:2014-10-02 02:13:07
【问题描述】:

任何日志中都没有错误,但我相信我的数据节点找不到我的名称节点。

这是导致我得出这个结论的错误(根据我在网上找到的):

[INFO ]: org.apache.hadoop.ipc.Client - Retrying connect to server: /hadoop.server:9000. Already tried 4 time(s). 

jps 输出:

7554 Jps
7157 NameNode
7419 SecondaryNameNode
7251 DataNode

有人可以提供一些建议吗?

dfsadmin 的结果

Configured Capacity: 13613391872 (12.68 GB)
Present Capacity: 9255071744 (8.62 GB)
DFS Remaining: 9254957056 (8.62 GB)
DFS Used: 114688 (112 KB)
DFS Used%: 0.00%
Under replicated blocks: 0
Blocks with corrupt replicas: 0
Missing blocks: 0

-------------------------------------------------
Datanodes available: 1 (1 total, 0 dead)

Live datanodes:
Name: 192.172.1.49:50010 (Hadoop)
Hostname: Hadoop
Decommission Status : Normal
Configured Capacity: 13613391872 (12.68 GB)
DFS Used: 114688 (112 KB)
Non DFS Used: 4358320128 (4.06 GB)
DFS Remaining: 9254957056 (8.62 GB)
DFS Used%: 0.00%
DFS Remaining%: 67.98%
Configured Cache Capacity: 0 (0 B)
Cache Used: 0 (0 B)
Cache Remaining: 0 (0 B)
Cache Used%: 100.00%
Cache Remaining%: 0.00%
Last contact: Fri Aug 08 17:25:57 SAST 2014

【问题讨论】:

  • 请详细说明错误信息
  • 我扩展了错误信息。它只是重复。它实际上不是错误消息......只是信息(刚刚意识到)。任何地方都没有错误消息...
  • hadoop dfsadmin -report 。试试这个命令。它应该显示连接节点的报告
  • 我有类似的问题,最终来自不正确的 /etc/hosts 文件。
  • 你能检查 NameNode 是否正在监听非本地主机地址(非 127.0.0.1)吗? Namenode 的端口是 8020 或 9000。

标签: hadoop hdfs


【解决方案1】:

给你的机器一个主机名,并在 /etc/hosts 文件中输入它们,像这样,

#hostname hdserver.example.com
#vim /etc/hosts
192.168.0.25 hdserver.example.com
192.168.0.30 hdclient.example.com

并保存。(使用正确的 IP 地址)

在客户端还提供主机名 hdclient.example.com 并在 /etc/hosts 中创建上述条目。这将帮助名称服务器找到具有主机名的机器。

【讨论】:

    【解决方案2】:

    从 tmp 文件夹中删除所有内容:rm -Rf path/of/tmp/directory

    格式化namenode: :bin/hadoop namenode -format

    重新启动所有进程:bin/start-all.sh

    【讨论】:

      猜你喜欢
      • 2023-04-08
      • 2011-09-10
      • 1970-01-01
      • 2016-12-03
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多