flink的checkpoint支持存储哪里
时间: 2023-09-30 07:10:26 浏览: 209
Flink笔记(十九):Flink 从 Checkpoint 中恢复数据
Flink的checkpoint可以存储在本地文件系统、HDFS、S3等分布式文件系统中。Flink提供了多种状态后端(State Backend)来支持不同的checkpoint存储方式,例如:
- MemoryStateBackend:将状态存储在内存中,适用于容错性较低的场景。
- FsStateBackend:将状态存储在本地文件系统或分布式文件系统中,例如HDFS、S3等。
- RocksDBStateBackend:将状态存储在RocksDB中,支持大规模状态存储和高性能读写。
同时,Flink还支持用户自定义的状态后端,可以根据具体业务场景选择不同的存储方式。
阅读全文