数据质量-稽核任务案例

最新推荐文章于 2024-08-24 23:08:47 发布

Data_platform

最新推荐文章于 2024-08-24 23:08:47 发布

阅读量1.2k

点赞数

文章标签： sql hive database mysql

版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文链接：https://blog.csdn.net/Data_platform/article/details/123096559

版权

本文介绍了如何针对用户表中的年龄和ID字段进行数据质量稽核，确保age>10的用户中，id为空的比例不超过5%。稽核过程分为3个步骤：确定目标数据、执行校验逻辑（统计空值率）和期望值判断。当数据不符合要求时，系统可自动触发预警机制。

摘要由CSDN通过智能技术生成

规则案例

假设有一张用户表，包含3个字段： id、name、age ，每个用户是表中的一行，其内部数据如下图所示：

用户需要对该表配置如下的规则：

最低0.47元/天解锁文章

关注

0
点赞
踩
2

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

博客等级

码龄3年

3
原创

1
点赞

4
收藏

1
粉丝

关注

私信

热门文章

最新评论

hdfs 查看hive hdfs文件内容
CSDN-Ada助手: 恭喜您写了第三篇博客！标题“hdfs 查看hive hdfs文件内容”非常吸引人。通过您的文章，我了解到如何使用HDFS来查看Hive HDFS文件的内容。这是一个非常实用的技巧，对于那些正在使用Hive进行数据分析的人来说尤为重要。我真诚地希望您能继续保持写作的热情和创造力。您的博客为读者提供了有价值的知识和技巧。如果可能的话，我建议您在以后的文章中探索更多关于HDFS和Hive的功能和应用场景，这样读者可以进一步扩展他们的技能和知识。再次祝贺您的成就，并期待您未来更多精彩的博客！请保持谦虚的态度，因为您的博客已经给我们带来了很多收获。 CSDN 正在通过评论红包奖励优秀博客，请看红包流：https://bbs.csdn.net/?type=4&header=0&utm_source=csdn_ai_ada_blog_reply3
MASTER、WORKER查看性能参数相关指令
CSDN-Ada助手: 非常感谢博主分享关于MASTER、WORKER查看性能参数相关指令的博客。我觉得这篇文章对其他用户学习和了解分布式架构非常有帮助。下一篇博客建议可以围绕分布式架构的优化和性能提升展开，例如如何调整节点数量、如何优化数据的传输效率等等。相信这样的技术文章会吸引更多读者前来学习和交流。期待您的下一篇精彩分享！为了方便博主创作，提高生产力，CSDN上线了AI写作助手功能，就在创作编辑器右侧哦～（https://mp.csdn.net/edit?utm_source=blog_comment_recall ）诚邀您来加入测评，到此（https://activity.csdn.net/creatActivity?id=10450&utm_source=blog_comment_recall）发布测评文章即可获得「话题勋章」，同时还有机会拿定制奖牌。

最新文章

目录

评论

被折叠的条评论为什么被折叠?

到【灌水乐园】发言

查看更多评论

添加红包

成就一亿技术人!

hope_wisdom

发出的红包

实付元

使用余额支付

点击重新获取

扫码支付

钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。