Fwd: checkpoint 文件夹Chk-no 下面文件个数是能计算出来的吗?

2019-07-18 文章
,创建的文件数目一般不止一个。 > > > [1] > https://github.com/apache/flink/blob/1ec34249a0303ae64d049d177057ef9b6c413ab5/flink-runtime/src/main/java/org/apache/flink/runtime/state/DefaultOperatorStateBackendSnapshotStrategy.java#L179 > > 祝好 > 唐云 > > > __

Fwd: checkpoint 文件夹Chk-no 下面文件个数是能计算出来的吗?

2019-07-18 文章
ser-zh@flink.apache.org" > 回复-收件人: user-zh@flink.apache.org > > Hi > > A1: chk-x文件下面的文件个数是跟operator个数并行度是有关系的,主要是operator > state的文件。对于checkpoint场景,_metadata只是元数据,真实的operator数据都是在其他文件内。 > > A2: > 不可以将这些文件合并在一起。因为_metadata内主要记录了文件路径,如果合并的话,找不到原始路径会有问题,无法从checkpo

checkpoint 文件夹Chk-no 下面文件个数是能计算出来的吗?

2019-07-18 文章
state_checkpoints_dir/2d93ffacbddcf363b960317816566552/chk-2903/1e95606a-8f70-4876-ad6f-95e5cc38af86 state_checkpoints_dir/2d93ffacbddcf363b960317816566552/chk-2903/2a012214-734a-4c2b-804b-d96f4f3dddf8