温馨提示:文本由机器自动转译,部分词句存在误差,以视频为准
00:00
大家好,欢迎来到q data数据中台核心能力解析,本期给大家带来的是数据质量能力全流程介绍。在数据中台的运转中,数据质量是决定数据可信度与业务价值的生命线。今天我们就聚焦数据质有序带大家了解q data如何实现全流程、智能化的数据质量管控。数据质量模块主要包含数据质量任务、质量任务日志两大模块。数据质量任务可以通过简单的配置实现对数据的实时监控。在任务列表页中,我们不仅清晰展示每个数据质量任务的基本信息,还直观呈现其核心治理维度,包括所覆盖的稽查对象数量、配置的稽查规则数量以及设定的执行策略。通过这一览示视图,让用户快速掌握覆盖范围、校验深度和运行节奏,高效评估治理状态,精准管理关键任务,创建数据质量任务只需三步,配置基础信息,选择稽查对象,设置稽查规则,流程清晰,操作高效,无需复杂操作或代码编写,即可快速构建复盖多表关联业务逻辑的。
01:00
质量校验任务大幅降低使用门槛,提升治理效率。在配置基础信息时,可全面定义任务的执行策略。系统提供高度灵活的调度能力,支持按秒、分钟、小时等多力度精确设置调度周期。同时用户可根据任务重要性设置优先级,指定专属worker分组,以实现资源隔离与高效调度,并自定义失败处理策略,包括重试机制、延迟执行机制的。在稽查对象选择模块,我们不仅支持单表校验,更强大的支持多表联合校验与跨表逻辑稽查,同时全面兼容主流数据库类型,包括mycyq Oracle、达梦、hi clicks等10余种数据源,只要数据连接相同,即可统一纳入质量监控体系,真正实现异构数据源的一站式质量大管。在稽查规则配置模块,系统实现了标准驱动与灵活自定义的无缝融合。如果稽查对象的字段已在数据标准模块中被定义为标准数据源,并且以绑定稽查规则,只需点击获取稽查规则,即可一键自动继承该字段对应的质量规则。
02:00
确保标准落地,避免重复配置,若字段尚未关联,标准数据源也无需担心。系统内置10余种开箱即用的稽查规则模板,全面覆盖准确性、一致性、完整性、规范性、时效性五大核心质量维度,支持快速手动配置,满足各类业务场景下的校验需求。在操作列中,我们支持一键执行一次,灵活应对临时稽查需求,可快捷查看执行记录,快速定位和追溯问题,还能直接配置或调整调度周期,无需跳转页面,让任务管理更高效,响应更敏捷。在质量任务日志列表页,用户可一目了然的查看每次任务执行的关键结果,包括质量评分、问题数据量及执行状态,通过直观的指标呈现,快速识别异常任务。在任务日志的详情中执行后,生成美观详实的质量报告,包含总体评分、问题分布、趋势分析的同时输出问题清单,精确到每一条问题数据,并支持直接在线批量修改,为后续清洗做好准备。希望通过今天的演示,大家对数据质量。
03:00
这样的能力有了更清晰的认识,感谢大家的观看,快来访问千童科技官网申领试用吧。
我来说两句