回复: Re: flink 1.8 内的StreamExecutionEnvironment 对于 FileInputFormat 多file path 不兼容问题咨询

2020-03-04 Thread
支持多文件。 Best, Jingsong Lee ------ From:王智Send Time:2020年3月4日(星期三) 17:34 To:user-zhSubject:flink 1.8 内的StreamExecutionEnvironment 对于 FileInputFormat 多file path 不兼容问题咨询 我在使用flink 1.8 自定义 FileInputFormat 的时候遇到了不兼容问题,初步看了源代码,不知道自己得出的结论是否正确,并想了解一下后续趋势和

flink 1.8 内的StreamExecutionEnvironment 对于 FileInputFormat 多file path 不兼容问题咨询

2020-03-04 Thread
我在使用flink 1.8 自定义 FileInputFormat 的时候遇到了不兼容问题,初步看了源代码,不知道自己得出的结论是否正确,并想了解一下后续趋势和进展,麻烦各位大佬抽空指点一下,先行感谢~~ 问题1: StreamExecutionEnvironment 为什么要做这样的限制?ContinuousFileMonitoringFunction 的作用是什么? 相关的代码描述如下 StreamExecutionEnvironment 对 FileInputFormat 对象有特殊的处理逻辑 if (inputFormat instanceof

回复:Re: Re: submit jobGraph error on server side

2019-08-08 Thread
感谢大神, 是我配置的资源太少导致响应慢,导致akka 超时。 现在我换了一个k8s 集群,调大了资源,已经不再配到邮件中的发生的异常。 原始邮件 发件人:"Zili Chen"< wander4...@gmail.com ; 发件时间:2019/8/7 15:32 收件人:"王智"< ben.wa...@foxmail.com ; 抄送人:"user-zh"< user-zh@flink.apache.org ; 主题:Re: Re: submit jobGraph e

回复:Re: submit jobGraph error on server side

2019-08-07 Thread
spatcher 的时候 akka ask timeout 了,可以检查一下配置的地址和端口是否正确,或者贴出你的相关配置。 Best, tison. 王智于2019年8月6日周二 下午7:13写道: 向session cluster 提交job 出错,麻烦各位老师帮忙看下,给点排查提示 THX~ 环境: blink 1.8.0 用docker 方式启动的flink session cluster,flink 集群独立,我从集群外的一个docker 节点提交job(该节点的flink-conf.yaml 配置与flink 集群内的配置一致)

submit jobGraph error on server side

2019-08-06 Thread
向session cluster 提交job 出错,麻烦各位老师帮忙看下,给点排查提示 THX~ 环境: blink 1.8.0 用docker 方式启动的flink session cluster,flink 集群独立,我从集群外的一个docker 节点提交job(该节点的flink-conf.yaml 配置与flink 集群内的配置一致) -- 报错信息: The program finished