Re:Re: flink作业保存的状态文件目录在aliyun oss上打不开

Tue, 21 Mar 2023 17:51:34 -0700 

检查过了，当前`state.checkpoints.num-retained`参数值是3


在 2023-03-21 20:05:35，"Shammon FY" <zjur...@gmail.com> 写道：
>Hi
>
>你可以检查一下checkpoint配置`state.checkpoints.num-retained`，是否保存的checkpoint数量太多了？
>
>Best,
>Shammon FY
>
>
>On Tue, Mar 21, 2023 at 11:55 AM casel.chen <casel_c...@126.com> wrote:
>
>> 有一个flink cdc实现多表关联打宽的flink作业，作业状态达到20GB左右，远端状态存储用的是aliyun
>> oss。今天作业运行失败打算手动从checkpoint恢复时发现保存作业状态的checkpoint目录(share目录)无法通过浏览器打开，后来使用命令行list了一下该目录下的文件有多达上万个文件。该flink作业用的是rocksdb
>> state
>> backend并开启了增量checkpoint。请问有什么办法可以解决这个问题吗？share目录下这么多文件是因为增量checkpoint遗留下来的吗？

回复