跳到主要内容

ClickHouse

必要条件

必要条件说明
账号权限分配的账号请保证有对数据库元数据查询和数据库写入权限

例: grant all privileges on testdb.* to common_user@'%'

使用限制与注意点

说明
结构迁移结构迁移当前仅支持 ReplacingMergeTree 模式。如果需要使用其他的表引擎,请先自行对端提前建好表然后创建任务时可以直接映射对端已经存在的表
数据合并ClickHouse 表引擎对相同主键的行是进行异步 merge 的,刚写入时可能存在没有合并的多条相同主键的行。如果要查看合并的数据,可以使用 ClickHouse 的optimize操作

常用对端任务参数

参数名称说明
autoOptimizeThresholdSecClickHouse 表自动优化间隔,0 则不触发,不为 0 则由增量事件触发,建议 30 秒以上间隔。通过主动触发 optimize 操作可以周期性及时合并相同主键的行。

参考资料

链路创建示例

相关案例