yun
-
数据开发治理平台 WeData 单表同步支持的数据源
一个单表同步任务只支持一张源表和一张目标表。目标表需要事先创建好,任务运行期间不支持自动建表,源表发生 Schema 变更也不支持同步到目标端。占用的数据源链接和整体资源较多,整库迁移任务有对应链路的情况下不建议用单表同步任务类型。
-
数据开发治理平台 WeData OceanBase 数据源(数据源列表)
如果你配置离线任务时,使用脚本模式的方式进行配置,需要在任务脚本中,按照脚本的统一格式要求编写脚本中的 reader 参数和 writer 参数。
-
数据开发治理平台 WeData CTSDB influxDB 数据源
如果你配置离线任务时,使用脚本模式的方式进行配置,需要在任务脚本中,按照脚本的统一格式要求编写脚本中的 reader 参数和 writer 参数。
-
数据开发治理平台 WeData TDMQ Pulsar 数据源
这篇说说TDMQ-Pulsar离线单表写入节点的配置参数,包括数据去向、命名空间、Topic、序列化与压缩格式,并说明Pulsar消息最大5MB、压缩后支持20MB的限制。 序列化格式:支持JSON与CSV两种类型。 压缩格式:支持LZ4、ZLIB、ZSTD、SNAPPY四种,用于处理超5MB的消息体。
-
数据开发治理平台 WeData 运行日志(离线同步运维)
在数据集成 > 离线运维 > 实例列表页面,单击实例 ID 或运行详情,即可进入运行日志页面。
-
数据开发治理平台 WeData MySQL 实时同步至 DLC 指引
这篇档将手把手的指引你完成 MySQL 实时同步至 DLC 的流程操作,包括整库迁移和单表同步。大体的流程如下五、实时整库:MySQL 同步至 DLC 配置步骤。
-
数据开发治理平台 WeData 实时运维
对于在完成配置并提交的实时任务,可以以进入实时运维内查看并操作对应的任务。可以以在实时运维内查看任务运行的基本运行状态、任务运行指标统计、运行日志、以及配置任务异常告警等。这篇列举实时同步任务的常。
-
数据开发治理平台 WeData 统计指标
可以以通过单击实时运维 > 操作 > 更多 > 统计指标或实时运维 > 任务名称 > 统计指标,进入实时同步统计指标界面查看任务同步进度、任务资源占用及库表同步情况。统计指标主要分为读写指标、资源指标、链路详情(仅针对整库任务)三个维度。
-
数据开发治理平台 WeData 关键事件
关键事件支持查看作业启动/停止事件、作业运行失败事件、源表 Schema 变更等事件。实时运维界面支持从任务记录后,单击任务名称 > 关键事件,即可进入关键事件列表。
-
数据开发治理平台 WeData 运行日志
运行日志界面支持查看近1小时、24小时、近7天的任务运行日志。实时运维界面支持从任务记录列表,单击 任务名称 > 运行日志,即可进入运行日志界面。