目前看1.9应该没有补救方案了,可以试试master分支,把这个PR merge进去,编译一下


> -----原始邮件-----
> 发件人: "雨后彩虹" <[email protected]>
> 发送时间: 2020-10-30 11:45:21 (星期五)
> 收件人: "[email protected]" <[email protected]>
> 抄送: 
> 主题: minibatch+状态ttl设置不生效问题如何优化
> 
> hi, all !
> flink版本:1.9需求:统计用户每天的订单数据(订单可以修改,导致同一个订单会有条数据,最终根据时间排序取最新的一条来做统计)。
> 应用:select userId,sum(money) as result,ymd from (
> select userId,order_id,money,DATE_FORMAT(trans_time,'yyyyMMdd') as 
> ymd,row_number() over(partition by order_id order by last_modify_time desc) 
> as rk from MyTable where type='1'
> ) t where t.rk = 1 group by userId,ymd;
> 配置:tableConfig.setIdleStateRetentionTime(Time.milliseconds(3600000), 
> Time.milliseconds(390000)); --相当于设置了1小时的过期时间
> 现象:checkpoint的数据大小一直在增加(应该是ttl状态过期未生效)
> 问题:翻看了jira,发现有人已经提出了这个问题【1】,想问一下这个问题还有什么补救的措施吗?
> 
> 
> 【1】https://issues.apache.org/jira/browse/FLINK-17096

回复