当前位置: 代码迷 >> 综合 >> hadoop job 日志的查看
  详细解决方案

hadoop job 日志的查看

热度:83   发布时间:2023-09-19 14:33:43.0

hadoop执行完任务一般有几个地方可以查看:

1、通过本地日志目录查看对应container日志文件,默认在hadoop的安装目录下的/logs/userlogs/:直接用查看文件命该地方的应用运行日志不一定最全,因为任务运行日志由每一个NM产生在本地,然后再给聚合到文件系统中(配置聚合日志功能)。

2、使用命令查看:

[hadoop@hadoop01 ~]$ yarn logs -applicationId application_1523430872525_0002 

其中application_1523430872525_0002是任务的编号。

   我是用第二种方式查看了任务的log。第一种发现地下没有生成日志文件。

  相关解决方案