嗨~ 从flink 的启动 sh 文件里面可以看到,启动java 虚拟机的时候,就设置好 日志文件名了。改了名字,这次的JOB
https://github.com/apache/flink/pull/11839/files
FLINK_LOG_PREFIX="${FLINK_LOG_DIR}/flink-${FLINK_IDENT_STRING}-${SERVICE}-
${id}-${HOSTNAME}"
log="${FLINK_LOG_PREFIX}.log"
log_setting=("-Dlog.file=${log}"
Hi,
一般搜索Exception、Error、Fail之类的吧,如果是TM因为内存超用被kill的话 可以搜索container、kill之类的关键字
> 2020年12月25日 下午1:43,赵一旦 写道:
>
> 如题,有人知道关键词吗,每次失败日志太多哦。
> 显示各种task的cancel等。
> 最后突然就失败了。。。
>
> 目前感觉经常是因为cancel(180s)。导致Task did not exit gracefully within 180 + seconds。
>
>
>
如题,有人知道关键词吗,每次失败日志太多哦。
显示各种task的cancel等。
最后突然就失败了。。。
目前感觉经常是因为cancel(180s)。导致Task did not exit gracefully within 180 + seconds。
此外,大家生产中会修改日志格式和日志文件吗。我调整了之后WEB-UI上那个日志从来没能看过。现在虽然有个日志list,但点了也没效果。
我调整了日志文件名。
如下图,报错报的是关于selector loop中错误。希望有大神帮忙分析下可能原因。
22:23:17.045 [Flink Netty Client (2007) Thread 28] WARN
org.apache.flink.shaded.netty4.io.netty.channel.epoll.EpollEventLoop -
Unexpected exception in the selector loop.
org.apache.flink.shaded.netty4.io.netty.channel.unix.Errors$NativeIoException:
始邮件--
> 发件人:
> "user-zh"
> <
> qcx978132...@gmail.com;
> 发送时间:2020年8月24日(星期一) 晚上8:22
> 收件人:"user-zh"
> 主题:Re: flink taskmanager 因为内存超了containe
flink??blink flink
1.11 , flink 1.11 ??.
----
??:
Hi
比较好奇你为什么在 Blink 分支做测试,而不是用最新的 1.11 做测试呢?
Best,
Congxian
柯四海 <2693711...@qq.com> 于2020年8月24日周一 下午5:58写道:
> Hi 大家好,
> 我用github上Blink分支(1.5)编译的flink来运行一些实时任务,发现Taskmanager
> 因为内存超了container限制被yarn kill.
> 有没有人有比较好的问题定位方案?
>
> 尝试过但是还没有解决问题的方法:
> 1. 尝试增加taskmanager内存
> 修改: 从8G 提高到
Hi
github??Blink(1.5)??flinkTaskmanager
container??yarn kill.
1. taskmanager
?? ??8G ?? 36G, state back
??fileSystem RocksDB
flink??slave3bin/taskmanager.sh start??
pengcheng...@bonc.com.cn
?? 2019-09-04 10:27
user-zh
?? flink??taskmanager
??
??flink??1??jobmanager,??2??taskmanager(slave1,slave2
??
??flink??1??jobmanager,??2??taskmanager(slave1,slave2)??
??slave3
taskmnanager??spark
--
10 matches
Mail list logo