Re: Flink TaskManager失败的日志关键词

2020-12-25 文章 r pp
嗨~ 从flink 的启动 sh 文件里面可以看到,启动java 虚拟机的时候,就设置好 日志文件名了。改了名字,这次的JOB https://github.com/apache/flink/pull/11839/files FLINK_LOG_PREFIX="${FLINK_LOG_DIR}/flink-${FLINK_IDENT_STRING}-${SERVICE}- ${id}-${HOSTNAME}" log="${FLINK_LOG_PREFIX}.log" log_setting=("-Dlog.file=${log}"

Re: Flink TaskManager失败的日志关键词

2020-12-25 文章 zhuxiaoshang
Hi, 一般搜索Exception、Error、Fail之类的吧,如果是TM因为内存超用被kill的话 可以搜索container、kill之类的关键字 > 2020年12月25日 下午1:43,赵一旦 写道: > > 如题,有人知道关键词吗,每次失败日志太多哦。 > 显示各种task的cancel等。 > 最后突然就失败了。。。 > > 目前感觉经常是因为cancel(180s)。导致Task did not exit gracefully within 180 + seconds。 > > >

Flink TaskManager失败的日志关键词

2020-12-24 文章 赵一旦
如题,有人知道关键词吗,每次失败日志太多哦。 显示各种task的cancel等。 最后突然就失败了。。。 目前感觉经常是因为cancel(180s)。导致Task did not exit gracefully within 180 + seconds。 此外,大家生产中会修改日志格式和日志文件吗。我调整了之后WEB-UI上那个日志从来没能看过。现在虽然有个日志list,但点了也没效果。 我调整了日志文件名。

flink taskmanager netty报错。

2020-11-30 文章 赵一旦
如下图,报错报的是关于selector loop中错误。希望有大神帮忙分析下可能原因。 22:23:17.045 [Flink Netty Client (2007) Thread 28] WARN org.apache.flink.shaded.netty4.io.netty.channel.epoll.EpollEventLoop - Unexpected exception in the selector loop. org.apache.flink.shaded.netty4.io.netty.channel.unix.Errors$NativeIoException:

Re: flink taskmanager 因为内存超了container限制 被yarn kill 问题定位

2020-08-24 文章 Xintong Song
始邮件-- > 发件人: > "user-zh" > < > qcx978132...@gmail.com; > 发送时间:2020年8月24日(星期一) 晚上8:22 > 收件人:"user-zh" > 主题:Re: flink taskmanager 因为内存超了containe

?????? flink taskmanager ????????????container???? ??yarn kill ????????

2020-08-24 文章 ??????
flink??blink flink 1.11 , flink 1.11 ??. ---- ??:

Re: flink taskmanager 因为内存超了container限制 被yarn kill 问题定位

2020-08-24 文章 Congxian Qiu
Hi 比较好奇你为什么在 Blink 分支做测试,而不是用最新的 1.11 做测试呢? Best, Congxian 柯四海 <2693711...@qq.com> 于2020年8月24日周一 下午5:58写道: > Hi 大家好, > 我用github上Blink分支(1.5)编译的flink来运行一些实时任务,发现Taskmanager > 因为内存超了container限制被yarn kill. > 有没有人有比较好的问题定位方案? > > 尝试过但是还没有解决问题的方法: > 1. 尝试增加taskmanager内存 > 修改: 从8G 提高到

flink taskmanager ????????????container???? ??yarn kill ????????

2020-08-24 文章 ??????
Hi github??Blink(1.5)??flinkTaskmanager container??yarn kill. 1. taskmanager ?? ??8G ?? 36G, state back ??fileSystem RocksDB

????: flink??????????????????????taskmanager

2019-09-03 文章 pengcheng...@bonc.com.cn
flink??slave3bin/taskmanager.sh start?? pengcheng...@bonc.com.cn ?? 2019-09-04 10:27 user-zh ?? flink??taskmanager ?? ??flink??1??jobmanager,??2??taskmanager(slave1,slave2

flink??????????????????????taskmanager

2019-09-03 文章 ????????
?? ??flink??1??jobmanager,??2??taskmanager(slave1,slave2)?? ??slave3 taskmnanager??spark --