数据开发治理平台 WeData
-
数据开发治理平台 WeData 数据质量自定义模板使用
腾讯云数据开发治理平台 WeData 数据质量支持自定义模板创建和批量管理,帮助你根据业务场景定制化表质量检测逻辑。这里说明如何通过自定义模板页面新建规则模板、并根据自定义规则模板在数据监控页面对表创建检测规则。
-
数据开发治理平台 WeData ClickHouse 数据源
这篇说明ClickHouse数据源的实时单表同步写入配置,包括参数设置(数据源、库、表、主键、分区字段)及支持的字段类型映射关系,当前该功能需申请白名单使用。 – 实时单表同步写入配置:支持选择或手动输入库/表名称,需配置主键与分区字段,网络不连通时可手动输入。 – 支持的字段类型:列出ClickHouse与内部类型的映射关系,如String对应CHAR/VARCHAR,DateTime对应TIME/TIMESTAM。
-
数据开发治理平台 WeData Doris/TCHouse-D 数据源
TCHouse-D 数据源与 Doris 配置方式相同,这篇以 Doris 数据源为例进行讲解。
-
数据开发治理平台 WeData Mongo/腾讯云 Mongo 数据源
腾讯云 Mongo 数据源与 Mongo 数据源配置方式相同,此处以 Mongo 数据源为例进行讲解。
-
数据开发治理平台 WeData 配置任务告警
当质量任务在运行过程中出现异常时,例如:出现链路中断、执行超时,发送告警给责任人,便于责任人第一时间发现问题,及时处理问题。
-
数据开发治理平台 WeData 数据运营
这篇汇总腾讯云数据采集任务下发失败、标签删除异常及数据全景展示误解三类常见问题,分别说明现象、原因与解决方案。 采集任务未执行:因执行资源组配置错误,需更换资源组重试。 标签无法删除:因跨用户业务逻辑限制,仅标签创建者可删除。 数据全景数字误解:圆圈内“0”表示无子目录,与表数量无关。
-
数据开发治理平台 WeData ElasticSearch 数据源
数据集成提供了 Elasticsearch 的实时写入能力,这里说明 Elasticsearch 实时数据同步当前能力支持情况。
-
数据开发治理平台 WeData ClickHouse 数据源(数据源列表)
1. 支持使用 JDBC 连接 ClickHouse,且仅支持使用 JDBC Statement 读取数据。2. 支持筛选部分列、列换序等功能,可以以自行填写列。
-
数据开发治理平台 WeData Kafka/CKafka 数据源
1. 支持 Kafka 2.4.x、2.7.x、2.8.x 版本。2. Kafka/CKafka 均可选择 Kafka 数据源,并按照 Kafka 步骤进行读写配置。
-
数据开发治理平台 WeData 查看监控结果
用户可在运维管理-执行实例与结果页面,查看质量检测任务运行情况。用户可以按数据源、数据库、执行时间、是否订阅筛选质量检测任务,并可以通过表名、执行任务 ID、表负责人等信息进行任务查询。