You are viewing a plain text version of this content. The canonical link for it is here.
Posted to user-zh@flink.apache.org by 杨扬 <ya...@cupdata.com> on 2021/04/13 06:40:22 UTC

apache-flink

您好!
	我们在使用flink-1.12.0-scala2.12版本时遇到以下问题无法解决:
	1、flink作业一切正常运行一个月左右时莫名重启,且重启失败。
	2、重启前10分钟整看不到一条业务日志,从最后一条正常业务日志至第一条重启开始日志之间刚好间隔10分钟,此10分钟内jobmanager与taskmanager均无任何日志。
	3、重启原因日志日志中没有任何信息,只是报出开始重启。
	4、重启因为checkpoint未完成而无法成功,自动重启尝试多次均是如此。
	5、以flink on yarn模式部署使用(hadoop版本2.6.5),查看yarn-nodemanager日志可见container异常退出,退出码:143。
	6、作业处理数据tps在2万左右,正常时间查看日志及各项指标均正常,作业中未使用窗口或状态缓存等操作,均是每条消息处理后发往下游。
	7、作业有监听zookeeper,zookeeper中存放了该作业所需配置且配置可能随时更改,zookeeper中配置更改则此flink作业自动重新从flink中拉取并更新内存中的配置。
	8、此作业之前曾在flink-1.11版本同样on yarn运行1年左右,未出现同样问题。

每次都是长时间运行后出现问题,故测试环境复现困难,且日志信息很少,感觉无从下手,望各位专家解答困惑。

----------------------------------------------
杨扬
银联数据服务有限公司 研究院
电话:021-60269751
邮箱:yangyang1@cupdata.com