【问题标题】:View Log from Map/Reduce Task从 Map/Reduce 任务查看日志
【发布时间】:2014-11-03 19:02:38
【问题描述】:

我知道我可以在里面找到 map/reduce 任务日志:/usr/local/hadoop/logs/userlogs/。

有没有友好的查看方式?

例如,当我点击http://127.0.0.1:8088/cluster/ 时,我可以看到集群中执行的所有作业。然后我点击了一个完成的工作。但是现在,当我尝试单击Tracking URL: History 时,它给了我一个错误,为什么我可以从这里看到任务日志?

我想查看每个任务的标准错误、标准输出和系统日志。

【问题讨论】:

    标签: hadoop


    【解决方案1】:

    尝试使用 HUE 中的 Job Browser

    或使用命令

    纱线日志 -applicationId [选项]

    一般选项有: -appOwner AppOwner(假设是当前用户,如果 未指定) -containerId ContainerId(如果节点必须指定 地址已指定) -nodeAddress 节点地址,格式为 nodename:port (如果容器 id 是,则必须指定 指定)

    示例:yarn logs -applicationId application_1414530900704_0007

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2012-03-04
      • 1970-01-01
      • 2011-08-06
      • 1970-01-01
      • 2011-10-16
      • 1970-01-01
      相关资源
      最近更新 更多