【发布时间】:2015-11-09 12:03:21
【问题描述】:
当工作完成时。我可以从 WebUI 跟踪作业历史日志,但找不到来自 datanode(运行 nodemanger 服务)本地文件系统的日志,也找不到 hdfs://user/who/.staging 下的日志。我确认 ${yarn.nodemanger.log-dirs} 已配置。
yarn日志会自动删除吗?还是有一些服务没有运行?
【问题讨论】:
标签: hadoop hadoop-yarn
当工作完成时。我可以从 WebUI 跟踪作业历史日志,但找不到来自 datanode(运行 nodemanger 服务)本地文件系统的日志,也找不到 hdfs://user/who/.staging 下的日志。我确认 ${yarn.nodemanger.log-dirs} 已配置。
yarn日志会自动删除吗?还是有一些服务没有运行?
【问题讨论】:
标签: hadoop hadoop-yarn
不,您可以使用命令yarn logs -applicationId your_application_id 检索应用程序日志。
【讨论】:
日志存储在 HDFS 中。鉴于工作详情如下:
http://:/jobhistory/job/job_1440796954403_13743
应用程序 ID:
application_1440796954403_13743
获取日志的命令:
纱线日志-applicationId application_1440796954403_13743
【讨论】: