有一个flink cdc实现多表关联打宽的flink作业,作业状态达到20GB左右,远端状态存储用的是aliyun oss。今天作业运行失败打算手动从checkpoint恢复时发现保存作业状态的checkpoint目录(share目录)无法通过浏览器打开,后来使用命令行list了一下该目录下的文件有多达上万个文件。该flink作业用的是rocksdb state backend并开启了增量checkpoint。请问有什么办法可以解决这个问题吗?share目录下这么多文件是因为增量checkpoint遗留下来的吗?
- flink作业保存的状态文件目录在aliyun oss上打不开 casel.chen
- Re: flink作业保存的状态文件目录在aliyun oss上打不开 Shammon FY
- Re:Re: flink作业保存的状态文件目录在aliyun oss上打不开 casel.chen
- Re: Re: flink作业保存的状态文件目录在aliyun oss上打不开 Shammon FY
- Re: Re: flink作业保存的状态文件目录在aliyun oss上打不开 Guojun Li