Kafka
CloudCanal 支持将 Kafka 作为源端和目标端连接器，用于实时数据集成、数据迁移、数据同步和分析链路。
Kafka
源端
支持
目标端
支持
使用 Kafka 构建生产级数据链路
CloudCanal 可以帮助团队将 Kafka 与数据库、数仓、湖仓表和下游服务连接起来，构建低延迟的事件流和 CDC 投递链路。
Kafka 数据源介绍
Apache Kafka 是一个高吞吐量的分布式发布-订阅消息系统，用于构建实时数据管道。
实时流动
构建低延迟的 Kafka 数据链路，让数据持续保持新鲜，而不是只依赖批处理。
全量与增量
在连接器能力支持的前提下，可将 Kafka 作为源端执行初始加载和持续增量更新。
运维可控
CloudCanal 为生产数据团队提供可视化配置、监控、重试和运维流程。
企业可用
明确网络、权限和部署选项，让链路适配云端、BYOC 和本地部署环境。
常见的 Kafka 链路模式
1
Kafka 到数据仓库，用于实时分析
将事件流持续写入分析存储，让报表、监控和指标系统可以消费更新鲜的数据。
2
数据库 CDC 到 Kafka，用于事件驱动应用
把数据库变更发布到 Kafka，让下游服务能够响应新增、更新和删除事件。
3
Kafka 到湖仓存储，用于可回放的数据链路
将流式数据沉淀到湖仓表中，用于历史分析、数据回放以及批流统一处理。
相关文章
最佳实践
跨互联网数据互通 (Kafka)
CloudCanal 数据同步相关案例-跨互联网数据互通 (Kafka)
励强
Dec 21, 2022
最佳实践
Kafka 到 Kafka 数据同步
Kafka 到 Kafka 数据迁移同步,具备可视化创建、结构迁移、数据同步、自动化流程等能力
罗根生
Oct 29, 2024
技术教程
CloudCanal 同步 Debezium 数据实战
CloudCanal x Debezium 在 StarRocks 实时数仓构建中实战,具备可视化创建、结构迁移、数据初始化、数据同步、自动化流程等能力
励强
Dec 21, 2023
开始构建 Kafka 数据链路
使用 CloudCanal 连接 Kafka，快速验证第一条链路，并在可观测、可运维的流程中推进到生产环境。
