ClickHouse
必要条件
| 必要条件 | 说明 |
|---|---|
| 账号权限 | 分配的账号请保证有对数据库元数据查询和数据库写入权限 例： grant all privileges on testdb.* to common_user@'%' |
使用限制与注意点
| 项 | 说明 |
|---|---|
| 结构迁移 | 结构迁移当前仅支持 ReplacingMergeTree 模式。如果需要使用其他的表引擎，请先自行对端提前建好表然后创建任务时可以直接映射对端已经存在的表 |
| 数据合并 | ClickHouse 表引擎对相同主键的行是进行异步 merge 的，刚写入时可能存在没有合并的多条相同主键的行。如果要查看合并的数据，可以使用 ClickHouse 的optimize操作 |
常用对端任务参数
| 参数名称 | 说明 |
|---|---|
| autoOptimizeThresholdSec | ClickHouse 表自动优化间隔，0 则不触发，不为 0 则由增量事件触发,建议 30 秒以上间隔。通过主动触发 optimize 操作可以周期性及时合并相同主键的行。 |