数据开发治理平台 WeData 查看监控结果

用户可在运维管理-执行实例与结果页面,查看质量检测任务运行情况。用户可以按数据源、数据库、执行时间、是否订阅筛选质量检测任务,并可以通过表名、执行任务 ID、表负责人等信息进行任务查询。

相关产品
数据开发治理平台 WeData 产品页,含版本规格、价格与购买入口。

一、执行实例与结果

字段 详情
监控名执行 ID 质量监控任务名称质量监控任务 ID
表负责人 质量检测表的负责人
执行时间 质量检测任务触发执行时间
执行方式 质量检测任务触发方式,包含试运行、周期检测和调度检测(关联生产调度任务)。
执行引擎 质量检测任务执行引擎,目前支持 Hive、Spark、DLC、TCHouse-P 和 Doris。
执行详情 如质量任务执行方式为周期检测,将显示设置的周期检测信息(时间范围、执行频次)如果为调度触发,则显示关联调度任务 ID。
实例执行状态 实例执行状态是该质量任务下发实例到调度侧的执行状态,状态包括:1. 等待运行:调度任务实例在调度侧等待运行。2. 执行中:调度任务实例在执行中。3. 成功:调度任务实例成功下发。4. 失败:调度任务实例下发失败(可能原因:执行机环境影响、用户手动 kill,业务异常上报)
检测状态 检测状态为当前实例内所有规则检测结果的集合:1. 正常:当前实例下的所有规则执行成功后,规则检测结果均为正常。2. 异常:当前实例下的所有规则只要有一条被触发即判定为异常。3. 检测中:实例下规则正在执行。4. 未检测:规则还未开始执行或未执行成功。
异常规则 异常规则个数/总规则数
操作 支持跳转数据监控查看该表规则配置。支持跳转数据运营该表详情中查看血缘信息,进行问题排查。支持处理&告警,手工发送异常提醒。

二、查看规则执行情况

运维管理列表支持展开、查看每条规则触发情况:

三、查看规则执行结果

用户选择并单击列表左侧的下拉标识,可查看规则检测任务详情(二级列表)。

字段 详情
规则名称 所配置的规则名称
规则类型 系统模板/自定义模板/自定义 SQL
数据对象 表级规则(table)或表字段信息(字段类型)
检测范围 实际检测范围(全表或设置的分区)
规则详情 规则配置信息,包含触发模板、触发条件、触发等级。
检测结果 分为3种状态:检测通过、触发规则、检测失败(其他原因导致检测任务执行失败,非数据本身质量问题)。
触发结果 分为3种状态:无发送告警、发送告警成功,阻断任务成功(订阅的告警接收人会在配置的渠道收到告警信息)。
计算结果对比 检测的结果数据/配置的阈值,发生异常的结果数据会有不同颜色高亮显示,多条检测结果以逗号进行分隔。
操作 支持查看规则任务执行结果&日志和执行历史

四、查看结果&日志

单击二级任务列表操作列的结果&日志,可查看检测任务具体信息,并支持导出问题详情、跳转数据运营表详情中的产出与变更并查看生产任务。

五、导出单规则执行结果

进入结果与日志 > 结果页面,进入导出数据界面,单击导出。

六、查看生产任务

进入 结果与日志 > 结果页面,单击查看生产任务。

七、查看执行日志

支持查看执行日志,单击日志查看近30条任务执行记录:

八、批量导出执行结果

步骤一:提交导出任务

用户可以勾选执行实例,提交导出任务。

步骤二:下载导出数据

导出任务提交后,待任务运行完毕(导出状态:导出中 > 导出成功),即可下载数据。

注意:说明:

注意:文件生成逻辑:每条质量规则生成1个文件。

赞 (0)
上一篇 5天前
下一篇 5天前