特牛生活网

【Flink】【第9章】【 状态管理和容错机制】【02】CheckPoint和 状态后端_a)设置好checkpoint的保存路径 b)给每个算子设置唯一id c)把算子id和对应的算-CSDN博客

网友收藏
  • 链接地址:https://blog.csdn.net/weixin_43589563/article/details/123339867
  • 链接标题:【Flink】【第9章】【 状态管理和容错机制】【02】CheckPoint和 状态后端_a)设置好checkpoint的保存路径 b)给每个算子设置唯一id c)把算子id和对应的算-CSDN博客
  • 所属网站:blog.csdn.net
  • 被收藏次数:7574
文章浏览阅读2k次。状态管理状态后端1.状态的存储1.MemoryStateBackend2.FsStateBackend3.RocksDBBackend4.配置方式4.1 全局配置4.2 单任务配置2.状态的备份(checkpoint 和 savepoint)4.3 状态一致性4.3.1 flink状态的一致性级别4.3.2 端到端(end-to-end)状态一致性**1.Sink端幂等写入****2.Sink端事务写入**2.1 预写日志2.2 两阶段提交5.Flink + Kafka实现端到端的一致性状态后端1.状态_a)设置好checkpoint的保存路径 b)给每个算子设置唯一id c)把算子id和对应的算