python实践 - 自创

Python 的数据清洗

1.数据处理，查看数据是都有缺失值，缺失大于0.98 全部删除那列。

2. 特征值一模一样的进行删除。

3. 依据逻辑删除不可能会用的列，建模不会用到的。

4. 某列缺失值高于80%,不属于业务问题的也可直接删除，如果是特征先保留，观察。

5. 再次查看数据清洗后的特征，用a. isna().mean()。
   

6.查看数据类型，日期的转化为日期，数量转化为整数，价格为小数，文本 = object 。