You are viewing a plain text version of this content. The canonical link for it is here.
Posted to user-zh@flink.apache.org by 471419897 <47...@qq.com> on 2021/02/09 14:25:14 UTC

回复:flink per job taskmanager 日志查看问题

(1)可以用&nbsp;Flink Web UI 查看 Job Manager 和 Task Manager 的日志。


客户端提交 per-job 任务成功后,输出的信息中最后会包含 Flink Web UI 的地址,信息类似于:Found Web Interface xxx(ip):xx(port) of application 'application_XXXX_XXX'.
然后浏览器访问&nbsp;Flink Web UI 地址:xxx(ip):xx(port),左侧导航栏会有&nbsp;Job Manager 和 Task Manager 的选项。


(2)或者可以在&nbsp;yarn-site.xml&nbsp;配置文件中的配置项&nbsp;yarn.nodemanager.log-dirs 配置的路径下找到&nbsp;application_XXXX_XXX&nbsp;的日志,里面是每个&nbsp;container 的日志,在你的任务对应的&nbsp;container 日志下,可以看到&nbsp;Job Manager 和 Task Manager 的日志。如果没有配置&nbsp;yarn.nodemanager.log-dirs,则默认路径为:$HADOOP_HOME/logs/userlogs。


Best,
jjiey




------------------&nbsp;原始邮件&nbsp;------------------
发件人: "automths"<automths@163.com&gt;; 
发送时间: 2021年2月9日(星期二) 下午5:29
收件人: "user-zh"<user-zh@flink.apache.org&gt;; 
主题: flink per job taskmanager 日志查看问题



Hi:

请教一个问题,我flink(1.12.0) 以per-job的方式运行在yarn上,在yarn的web UI(jobhistory)上只能看到jobmanager.log以及jobmanager.err,看不到taskmanager有关的日志。我用yarn logs -applicationId appId命令可以查看到taskmanager.log的日志。
这样的问题是yarn的问题还是flink 日志设置的问题?有哪位同学处理过?怎么处理的?


感谢。












新春快乐
automths