写给数据产品经理新人的工作笔记|06 不同的工具解决不同的问题
2022-07-16 本文已影响0人
是杰夫呀
数据治理工具:维表、数据质量管理
1.维表工具
在业务运营的过程当中,会不停地增加新的维度和维度值。
此类工具需要给出明确的填写规则和审核流程,避免因误录入而造成数据异常。
2.数据质量管理
做ETL、数据运营、数据分析师或者算法工程师,每个人都无数次踩进过“数据质量”这个深“坑”。
在数据治理的框架下,保证数据质量和数据安全是核心目标,而元数据是核心工具。
元数据是用于描述数据、内容、业务流程、服务、业务规则以及组织信息系统的支持政策,或为其提供上下文的信息。
简单地说,元数据就是“数据的数据”,是使用一系列数据的方法去描述数据和数据体系本身,或者是对数据本身建立一个指标体系。描述内容包含指标定义、数据质量、数据之间的关系、计算任务之间的顺序和依赖关系、数据访问日志、数据流向等。
除了维表管理,我们再重点讨论两个可以产品化的内容:数据质量监控和指标库。数据质量监控和指标库做得好,能让整个数据体系的后续搭建都受益。
使用报表方法监控数据质量的角度,还可以分为表内质量问题、表间质量问题、清洗规则和其他原因带来的质量问题。