数据治理实践
数据质量治理
数据质量是数据治理的核心,也是基础工作。数据质量通常会从及时性、真实性、唯一性、完整性、有效性、一致性等六个维度来衡量。
对于数据质量的监控,主要包括三个环节:
第一,结合数据质量衡量的六个维度以及日常工作中发现的数据质量问题,配置相关规则。
第二,在数据加工的各个环节设置检查点,比如从ODS到DW,从DW到DM等环节。如在ODS检查点设置中,可能会包括数据源抽取记录的检查;在基础层会有空值、编码值、一致性、重复性等问题的检查
第三,输出异常结果,进行告警处理。
觉得不错的话,支持一根棒棒糖吧 ୧(๑•̀⌄•́๑)૭
wechat pay
alipay
数据治理实践
http://yuting0907.github.io/posts/85e82fc.html