| |
|
开发:
C++知识库
Java知识库
JavaScript
Python
PHP知识库
人工智能
区块链
大数据
移动开发
嵌入式
开发工具
数据结构与算法
开发测试
游戏开发
网络协议
系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程 数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁 |
-> 大数据 -> Flink kafka source源码解析:checkpoint模式下offset的提交 -> 正文阅读 |
|
[大数据]Flink kafka source源码解析:checkpoint模式下offset的提交 |
在上一篇文章《Flink kafka source源码解析:非checkpoint模式下offset的提交》中讲了非checkpoint模式下,offset要么使用kafka的自动提交模式,要么完全禁止提交offset。 本文接着将checkpoint模式下,offset提交。 初始化offsetCommitMode通过上文可以知道,当调用了env.enableCheckpointing方法后 offsetCommitMode 的值就是ON_CHECKPOINTS,而且会通过下面方法强制关闭 kafka 自动提交功能,这个值很重要,后续很多地方都是根据这个值去判断如何操作的。这个方法在org.apache.flink.streaming.connectors.kafka.FlinkKafkaConsumerBase#run中调用createFetcher,createFetcher中调用以下方法adjustAutoCommitConfig:
|
|
|
上一篇文章 下一篇文章 查看所有文章 |
|
开发:
C++知识库
Java知识库
JavaScript
Python
PHP知识库
人工智能
区块链
大数据
移动开发
嵌入式
开发工具
数据结构与算法
开发测试
游戏开发
网络协议
系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程 数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁 |
360图书馆 购物 三丰科技 阅读网 日历 万年历 2025年3日历 | -2025/3/4 3:18:37- |
|
网站联系: qq:121756557 email:121756557@qq.com IT数码 |