数据开发治理平台 WeData ClickHouse 数据源

这篇说明ClickHouse数据源的实时单表同步写入配置,包括参数设置(数据源、库、表、主键、分区字段)及支持的字段类型映射关系,当前该功能需申请白名单使用。 – 实时单表同步写入配置:支持选择或手动输入库/表名称,需配置主键与分区字段,网络不连通时可手动输入。 – 支持的字段类型:列出ClickHouse与内部类型的映射关系,如String对应CHAR/VARCHAR,DateTime对应TIME/TIMESTAM。

相关产品
数据开发治理平台 WeData 产品页,含版本规格、价格与购买入口。

注意:说明:

注意:ClickHouse 数据源的实时同步能力当前处于白名单开放阶段,如需使用请联系 售后支持 申请加白。

一、实时单表同步写入配置

参数 描述
数据源 选择需要写入的 ClickHouse 数据源。
库 支持选择或者手动输入需写入的库名称。默认将数据源绑定的数据库作为默认库,其他数据库需手动输入库名称。当数据源网络不连通,导致无法直接拉取库信息时,可手动输入数据库名称。在数据集成网络连通的情况下,仍可进行数据同步。
表 支持选择或者手动输入需写入的表名称。当数据源网络不连通,导致无法直接拉取表信息时,可手动输入表名称。在数据集成网络连通的情况下,仍可进行数据同步。
主键 选择一个字段作为写入表的主键。
分区字段 选择一个或多个字段作为分区字段。
高级设置 可根据业务需求配置参数。

二、支持的字段类型

内部类型 ClickHouse 类型
CHAR String
VARCHAR String,IP,UUID
STRING String,ENUM
BOOLEAN UInt8
BYTES FixedString
DECIMAL Decimal,Int128,Int256,UInt64,UInt128,UInt256
TINYINT Int8
SMALLINT Int16,UInt8
INTEGER Int32,UInt16,Interval
BIGINT Int64,UInt32
FLOAT Float32
DATE Date
TIME DateTime
TIMESTAMP DateTime
TIMESTAMP_LTZ DateTime
INTERVAL_YEAR_MONTH Int32
INTERVAL_DAY_TIME Int64
ARRAY Array
MAP Map
赞 (0)
上一篇 5天前
下一篇 5天前