摘要:
状态一致性: at-most-once:数据最多处理一次,可能缺失数据。 at-least-once:数据最少处理一次,可能重复处理。 exactlly-once:数据正确处理,不重复不缺失。 端到端(end-to-end)状态一致性: 内部保证:checkpoint source端:外部源重设数据 阅读全文
posted @ 2021-09-14 10:58
墨梅青莲
阅读(159)
评论(0)
推荐(0)
摘要:
流式计算分为 无状态 和 有状态 两种情况。 无状态流处理:接收数据,根据最新输入数据生成输出数据 有状态流处理:维护状态(根据每条输入记录进行更新),并基于最新输入的记录和当前的状态值生成输出记录 有状态的算子和应用程序:状态始终与特定算子关联,有两种类型状态 算子状态(operator stat 阅读全文
posted @ 2021-09-14 10:34
墨梅青莲
阅读(150)
评论(0)
推荐(0)

浙公网安备 33010602011771号