数据分析中，首先要进行数据清洗，才可以继续训练模型，预测等操作。
首先介绍一下什么是数据清洗
数据清洗从名字上也看的出就是把“脏”的“洗掉”，指发现并纠正数据文件中可识别的错误的最后一道程序，包括检查数据一致性，处理无效值和缺失值等。我们要按照一定的规则把“脏数据”“洗掉”，这就是数据清洗。而数据清洗的任务是过滤那些不符合要求的数据，过滤。不符合要求的数据主要是有不完整的数据、错误的数据、重复的数据三大类。
残缺数据：通过算法KNN,回归，
数据分析的首要步骤是数据清洗，包括处理残缺、错误和重复数据。通过KNN、回归、判定树等算法可以填充缺失值，利用聚类、回归等方法去除噪声数据，设置阈值排除重复数据。OpenRefine是一款高效的数据清洗工具，但在使用上仍需学习。
最低0.47元/天 解锁文章
扫一扫
1907
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
