数据治理实践

数据质量治理

数据质量是数据治理的核心,也是基础工作。数据质量通常会从及时性、真实性、唯一性、完整性、有效性、一致性等六个维度来衡量。

对于数据质量的监控,主要包括三个环节:

第一,结合数据质量衡量的六个维度以及日常工作中发现的数据质量问题,配置相关规则。

第二,在数据加工的各个环节设置检查点,比如从ODS到DW,从DW到DM等环节。如在ODS检查点设置中,可能会包括数据源抽取记录的检查;在基础层会有空值、编码值、一致性、重复性等问题的检查

第三,输出异常结果,进行告警处理。


觉得不错的话,给点打赏吧 ୧(๑•̀⌄•́๑)૭



wechat pay



alipay

数据治理实践
http://yuting0907.github.io/2022/12/05/数据治理实践/
作者
Echo Yu
发布于
2022年12月5日
许可协议