写给数据产品经理新人的工作笔记|06 不同的工具解决不同的问题 S2
- 后端
- 是杰夫呀
- 0
数据治理工具:维表、数据质量管理
1.维表工具
在业务运营的过程当中,会不停地增加新的维度和维度值。
此类工具需要给出明确的填写规则和审核流程,避免因误录入而造成数据异常。
2.数据质量管理
做ETL、数据运营、数据分析师或者算法工程师,每个人都无数次踩进过“数据质量”这个深“坑”。
在数据治理的框架下,保证数据质量和数据安全是核心目标,而元数据是核心工具。
元数据是用于描述数据、内容、业务流程、服务、业务规则以及组织信息系统的支持政策,或为其提供上下文的信息。
简单地说,元数据就是“数据的数据”,是使用一系列数据的方法去描述数据和数据体系本身,或者是对数据本身建立一个指标体系。描述内容包含指标定义、数据质量、数据之间的关系、计算任务之间的顺序和依赖关系、数据访问日志、数据流向等。
除了维表管理,我们再重点讨论两个可以产品化的内容:数据质量监控和指标库。数据质量监控和指标库做得好,能让整个数据体系的后续搭建都受益。
使用报表方法监控数据质量的角度,还可以分为表内质量问题、表间质量问题、清洗规则和其他原因带来的质量问题。
免责申明:本站发布的内容(图片、视频和文字)以转载和分享为主,文章观点不代表本站立场,如涉及侵权请联系站长邮箱:xbc-online@qq.com进行反馈,一经查实,将立刻删除涉嫌侵权内容。