数据传输服务
-
数据传输服务 DDL 和 DML 过滤
在配置同步任务时,可以选择 DDL 和 DML 同步策略,设置后,只有勾选的 SQL 数据才会同步到目标数据库,这样用户可以根据场景,灵活设置多个数据库之间的同步方案,或者进行数据表的拆分。
-
数据传输服务 Protobuf Demo 说明(Flink)
下面首先对消息生产逻辑进行简要说明,有助于用户理解消费逻辑。
我们采用 Protobuf 进行序列化,Demo 中均附带有 Protobuf 定义文件。文件中定义了几个关键结构:Envelope 是最终发送的 Kafka 消息结构;Entry 是单个订阅事件结构;Entries 是 Entry 的集合。主要数据结构关系如下所示。 -
数据传输服务 修改订阅对象(任务管理)
订阅任务启动后,用户如需增加、删除订阅对象,可通过本操作进行。当前支持如下参数修改,其他参数的修改请参考 重置数据订阅。
-
数据传输服务 批量操作(任务管理)
这篇说说腾讯云DTS数据同步任务的批量操作,包括批量启动、结束、删除、销毁/退货及变配,用户可在控制台选择任务后通过“更多操作”菜单执行。 批量启动/结束/删除/销毁:用户可在数据同步页面批量选择任务执行对应操作。 批量变配:用户可批量调整任务规格,需选择目标配置并确认费用。
-
数据传输服务 Avro Demo 说明(Flink)
Record.avsc 中我们定义了14个结构(Avro 中叫做 schema),其中主要的数据结构为 Record,用于表示 binlog 中的一条数据,Record 的结构如下,其他数据结构可以在 Record.avsc 中查看。
-
数据传输服务 重置订阅(任务管理)
重置数据订阅,即停止原任务,删除原订阅任务中的参数配置和订阅数据,删除后不可再恢复。重置后任务状态为“未配置”,用户可以重新配置所有参数。重置操作适用于不需要的订阅任务,通过重置后快速配置新任务,用户无需将老任务退费,再购买新任务,方便操作。
-
数据传输服务 单个任务,放通 DTS 访问 IP
数据迁移、数据同步、数据订阅任务中,需要将 DTS 访问 IP 分别添加到源数据库和目标数据库的白名单中,以便 DTS 可以访问源/目标数据库,否则会出现连通性测试失败。
-
数据传输服务 业务评估
1. DTS 在执行全量数据迁移/同步时,会将源库的全量数据全部读取一次,所以会增加源库的负载。如果你的数据库规格过低,建议你在业务低峰期进行迁移/同步,或者在任务启动前降低 DTS 的速率。
-
数据传输服务 支持能力(TDSQL MySQL 同步至 TDSQL MySQL)
这篇以表格形式列出腾讯云数据同步任务的功能支持矩阵,覆盖同步对象、同步类型、断点续传、任务通道操作、同步方向、结构同步、全量同步、增量同步及数据一致性校验等能力,明确各项支持与不支持范围,供配置与选型参考。 同步能力:支持普通对象表、索引、视图,提供结构、全量(自动接续增量)与增量同步,全量导入及增量支持断点续传。 任务与方向:支持重试、暂停恢复、创建类似任务、限速,不支持动态增减表对象;支持多对一、一对多、双向及同。