【问题标题】:Hadoop 2.2.0 Web UI not showing Job ProgressHadoop 2.2.0 Web UI 未显示作业进度
【发布时间】:2014-03-19 16:16:03
【问题描述】:

我已经从这个link 安装了单节点hadoop 2.2.0。当我从终端运行作业时,它可以正常输出。我使用的网页界面

 - Resource Manager : http://localhost:8088 
 - Namenode Daemon  : http://localhost:50070

但是从 Resource Manager 的 Web UI(如上所示)我看不到作业进度,例如已提交的作业、正在运行的作业等。

我的 /etc/hosts 文件如下:

127.0.0.1       localhost
127.0.1.1       meitpict

我的系统有 IP:192.168.2.96(我试过删除这个 ip 但还是不行)

我提到的唯一主机:端口在 core-site.xml 中,即:

<property>
    <name>fs.defaultFS</name>
    <value>hdfs://localhost:54310</value>
  </property>

【问题讨论】:

    标签: hadoop mapreduce hadoop-yarn hadoop2


    【解决方案1】:

    即使我在执行 Map - Reduce 作业时也会遇到这些问题。

    我在执行 Map-Reduce 作业时所做的最好的事情,您将在执行 MapR 作业的框中获得链接,以检查作业进度,如下所示:

    http://node1:19888/jobhistory/job/job_1409462238335_0002/mapreduce/app

    这里的 node1 在我的 hosts 文件条目中设置为 192.168.56.101 并且用于 NameNode 框。

    因此,在您的 MapR 作业运行时,您可以转到 MapR 框架提供的 UI 链接。

    当它打开时不要关闭,在那里您还可以找到有关其他工作的详细信息,它们何时开始以及何时完成等。

    所以下次最好在提交 MapR 作业后检查您的 putty 控制台输出,您肯定会看到当前作业的链接,以便从浏览器 UI 中检查其状态。

    【讨论】:

      【解决方案2】:

      在 Hadoop 2.x 中,这个问题可能与内存问题有关,您可以在 MapReduce in Hadoop 2.2.0 not working 中看到它

      【讨论】:

        猜你喜欢
        • 2015-01-06
        • 1970-01-01
        • 1970-01-01
        • 2014-08-22
        • 1970-01-01
        • 2020-04-12
        • 2014-02-20
        • 1970-01-01
        • 1970-01-01
        相关资源
        最近更新 更多