云服务器特惠 99/年起
  1. 腾讯云优惠网首页
  2. 腾讯云产品

数据开发治理平台 WeData 单表同步支持的数据源

• 腾讯云产品

一个单表同步任务只支持一张源表和一张目标表。目标表需要事先创建好，任务运行期间不支持自动建表，源表发生 Schema 变更也不支持同步到目标端。占用的数据源链接和整体资源较多，整库迁移任务有对应链路的情况下不建议用单表同步任务类型。

相关产品
数据开发治理平台 WeData 产品页，含版本规格、价格与购买入口。

单表同步任务支持的链路如下：

数据源  实时同步 
  单表读取 单表写入
关系型数据库 MySQL/腾讯云 MySQL ✓ ✓
 TDSQL-C MySQL ✓ ✓
 TDSQL MySQL ✓ ✓
 PostgreSQL ✓ ✓
 SQL Server ✓ ✓
 Oracle ✓ ✓
 OceanBase ✓（白名单） ✓
 达梦 DM ✓ ✓
大数据 Hive – ✓
 DLC – ✓
 Doris/TCHouse-D – ✓
 ClickHouse/TCHouse-C – ✓
 TCHouse-P – ✓
 Iceberg – ✓
 HBase – ✓（拟下线）
 HDFS – ✓（拟下线）
 TBase – ✓（拟下线）
 Greenplum – ✓（拟下线）
NoSQL Elasticsearch – ✓
 Mongodb/腾讯云 Mongodb ✓ –
消息队列 Kafka/CKafka ✓ ✓
 TiDB-Kafka ✓（拟下线） –
 DTS-kafka ✓（拟下线） –

相关内容：

  1. 数据开发治理平台 WeData 数据源一览 实时同步当前支持整库同步、分库分表、实时单表三种任务类型。整库同步任务：推荐的任务类型。一个同步任务中支持同步1张表或多张表的数据到目标端。任务提交运行后支持根据源端表结构自动创建目标表，源表的数量和目标表的数量是一对一的关系。任务运行期间源表若发生 Schema 变更可以自动同步到目标表。由于整库迁移任务一个任务可支持同步多表数据，所以占用源端链接较少，所需的同步资源整体较少，建议优先使用整库同步任务。...
  2. 数据开发治理平台 WeData 支持的数据源与读写能力 数据集成包括离线与实时数据链路，目前支持关系型数据库、大数据存储、半结构化数据、NoSQL、消息队列等各类数据源。可以以根据各个模块对数据源的支持情况，选择对应的功能模块进行同步任务的配置。...
  3. 数据开发治理平台 WeData 整库同步支持的数据源 一个整库同步任务中支持同步1张表或多张表的数据到目标端。任务提交运行后支持根据源端表结构自动创建目标表，源表的数量和目标表的数量是一对一的关系。任务运行期间源表若发生 Schema 变更可以自动同步到目标表。由于整库迁移任务一个任务可支持同步多表数据，所以占用源端链接较少，所需的同步资源整体较少，建议优先使用整库同步任务。...
  4. 数据开发治理平台 WeData 分库分表支持的数据源 若源表由于业务需要被拆分成分库分表，多个分表的数据需要实时同步到目标端的一张表中，该场景下可使用分库分表任务。分库分表任务与整库迁移任务机制类似，只是会将源端的分表抽象成逻辑表后再同步到目标端。分库分表支持的链路如下。...
  5. 数据开发治理平台 WeData 产品基础相关 腾讯云WeData是一站式数据协作开发治理平台，提供即席分析、工作流编排、数据资产管理及治理等全链路能力，支持多种云上及自建数据源，并支持私有化部署。 应用场景：涵盖企业级数据仓库构建、数据可视化协同开发与数据治理。 产品能力：提供全链路数据加工能力，包括即席分析和协同编排。 数据源支持：支持MySQL、Hive、Kafka等关系型、大数据、NoSQL及消息队列数据源。...
  6. 数据开发治理平台 WeData 数据开发 WeData 数据开发为数据工程师以及数据开发相关人员提供了高效、协作、智能的数据开发平台。WeData 数据开发模块面向各类引擎（EMR、数据湖计算DLC、腾讯云数据仓库 TCHouse-P 等），通过提供脚本开发、可视化开发、任务编排、任务发布以及任务运维等能力，帮助组织和企业高效构建数据仓库。使用限制1. WeData 数据开发中可使用的计算任务取决于项目下绑定的计算引擎类型。绑定 EMR 引擎，需要启动 Hi。...
  7. 数据开发治理平台 WeData 数据源一览（离线同步支持的数据源） 数据集成包括离线目前支持关系型数据库、大数据存储、半结构化数据、NoSQL、消息队列等各类数据源。可以以根据各个模块对数据源的支持情况，选择对应的功能模块进行同步任务的配置。...
  8. 数据开发治理平台 WeData 腾讯云数据仓库 TCHouse-X WeData 支持集成腾讯云数据仓库 TCHouse-X ( Tencent Cloud House-X, TCHouse-X )，在数据开发中提供PB级数据高性能处理与分析。这里说明 WeData 在 TCHouse-X 上进行任务开发的注意事项。...
赞 (0)
上一篇 5天前
下一篇 5天前