大家好,我是土哥。
Flink cdc 2.1.1 发布后,更新了很多新功能以及知识点,今天为大家全面总结了 CDC 的知识点如 无锁算法及面试高频考点。具体内容如下:
- 1 cdc 简介
- 2 Flink cdc 2.1.1 新增内容
- 3 核心知识点解刨
- 4 CDC 高频面试题
1 cdc 简介
CDC (Change Data Capture) 是一种用于捕捉数据库变更数据的技术,Flink 从 1.11 版本开始原生支持 CDC 数据(changelog)的处理,目前已经是非常成熟的变更数据处理方案。
Flink CDC Connectors 是 Flink 的一组 Source 连接器,是 Flink CDC 的核心组件,这些连接器负责从 MySQL、PostgreSQL、Oracle、MongoDB 等数据库读取存量历史数据和增量变更数据。在 2020 年 7 月开源,社区保持了相当高速的发展,平均两个月一个版本,在开源社区的关注度持续走高,也逐渐有越来越多的用户使用 Flink CDC 来快速构建实时数仓和数据湖。
2 Flink cdc 2.1.1 新增内容
版权归原作者 3分钟秒懂大数据 所有, 如有侵权,请联系我们删除。