数据开发治理平台 WeData 支持的数据源与读写能力

数据集成包括离线与实时数据链路,目前支持关系型数据库、大数据存储、半结构化数据、NoSQL、消息队列等各类数据源。可以以根据各个模块对数据源的支持情况,选择对应的功能模块进行同步任务的配置。

相关产品
数据开发治理平台 WeData 产品页,含版本规格、价格与购买入口。

注意:说明:

注意:数据链路读写端,需满足对应数据源版本。

数据源  离线同步  实时同步      版本
  离线读取 离线写入 单表读取 单表写入 整库读取 整库写入 分库分表读取 分库分表写入 
关系型数据库 MySQL ✓ ✓ ✓ ✓ ✓ – ✓ – 5.6,5.7,8.0.x
 TDSQL-C MySQL ✓ ✓ ✓ ✓ ✓ – ✓ – –
 TDSQL MySQL ✓ ✓ ✓开白使用 ✓ ✓开白使用 – – – InnoDB 类型
 PostgreSQL ✓ ✓ ✓ ✓ ✓ ✓开白使用 ✓ – 9.6,10,11,12
 TDSQL PostgreSQL ✓ ✓ – – – – – – 5.21.6行列存融合版
 SQL Server ✓ ✓ ✓ ✓ ✓ – ✓ – 2008,2008R2,2012,2014,2016,2017,2019
 Oracle ✓ ✓ ✓开白使用 ✓ ✓开白使用 – ✓开白使用 – 11,12,19
 DB2 ✓ ✓ – – – – – – –
 SAP HANA ✓ ✓ – – – – – – –
 SAP IQ(Sybase) ✓ – – – – – – – –
 DM ✓ ✓ ✓开白使用 ✓开白使用 – – – – 7,8
 OceanBase ✓ ✓ ✓开白使用 ✓开白使用 ✓开白使用 – – – 3.1.4,4.2.1.3
大数据 TCHouse-P ✓ ✓ – ✓ – ✓ – – –
 TCHouse-X ✓ ✓ – ✓开白使用 – ✓开白使用 – ✓开白使用 –
 Hive ✓ ✓ – ✓ – ✓ – – 1.x,2.x,3.x
 DLC ✓ ✓ – ✓ – ✓ – ✓ –
 Doris ✓ ✓ – ✓ – ✓ – ✓ 0.15、1.x
 StarRocks ✓ ✓ – – – ✓ – – –
 ClickHouse ✓ ✓ – ✓开白使用 – – – – 20.7+
 TCHouse-C ✓ ✓ – ✓开白使用 – ✓ – – 
 Iceberg ✓ ✓ – ✓ – ✓ – ✓ 0.13.1+
 HBase ✓ ✓ – ✓ – – – – 2.2.x
 HDFS ✓ ✓ – ✓ – – – – 2.x,3.x
 Kudu ✓ ✓ – – – – – – –
 TBase ✓ ✓ – ✓ – – – – –
 GaussDB ✓ ✓ – – – – – – –
 GBase ✓ ✓ – – – – – – –
 Impala ✓ ✓ – – – – – – –
 Greenplum ✓ ✓ – ✓ – – – – 4.x,5.x,6.x
半结构化 COS ✓ ✓ – – – – – – –
 Rest API ✓ – – – – – – – –
 FTP ✓ ✓ – – – – – – –
 SFTP ✓ ✓ – – – – – – –
NoSQL Redis – ✓ – – – – – – –
 Elasticsearch ✓ ✓ – ✓ – – – – 6.x,7.x
 CTSDB influxDB ✓ ✓ – – – – – – –
 Mongo ✓ ✓ ✓ – ✓ – – – 4.x
 阿里 Graph Database ✓ ✓ – – – – – – 仅脚本模式支持
消息队列 Kafka ✓ ✓ ✓ ✓ ✓ ✓ – ✓ 2.4.1、2.7.1、2.8.1、2.8.2(包含 Kafka、Ckafka 两种类型的数据源)
 TDMQ Pulsar – ✓ – – – – – – 虚拟集群版本
 TiDB-Kafka – – ✓ – – – – – –
 DTS-kafka – – ✓ – – – – – –
赞 (0)
上一篇 4天前
下一篇 4天前