Re: flink 1.9 关于回撤流的问题

Tue, 15 Sep 2020 01:02:43 -0700 

hi, 我对于使用upsert
kafka能够省state感到疑惑。金竹老师提供的实现只是丢掉了delete消息，你的下游表依旧需要手动去重才可以得到准确的结果才对啊。如果每个下游表都手动去重这样子还能省state吗？

star <[email protected]> 于2020年6月8日周一 上午9:38写道：

> 非常感谢，正是我想要的。也谢谢金竹老师的分享！
>
>
>
>
> ------------------&nbsp;原始邮件&nbsp;------------------
> 发件人:&nbsp;"Sun.Zhu"<[email protected]&gt;;
> 发送时间:&nbsp;2020年6月7日(星期天) 凌晨0:02
> 收件人:&nbsp;"[email protected]"<[email protected]&gt;;
> 抄送:&nbsp;"[email protected]"<[email protected]&gt;;
> 主题:&nbsp;回复：flink 1.9 关于回撤流的问题
>
>
>
> Hi,star
> 金竹老师发过一篇文章，重写了KafkaConnector的实现，支持upsert模式，可以参考下[1]
>
>
> [1]https://mp.weixin.qq.com/s/MSs7HSaegyWWU3Fig2PYYA
> | |
> Sun.Zhu
> |
> |
> [email protected]
> |
> 签名由网易邮箱大师定制
>
>
> 在2020年06月3日 14:47，star<[email protected]&gt; 写道：
> 大家好，
>
>
>
> 在做实时统计分析的时候我将基础汇总层做成了一个回撤流（toRetractStream）输出到kafka里（因为后面很多实时报表依赖这个流，所以就输出了）
> 问题是这个kafka里到回撤流还能转成flink 的RetractStream流吗，转成后我想注册成一张表，然后基于这个表再做聚合分析
>
>
>
>
> 谢谢

回复