pandas:填充缺失值

当数据中存在NaN缺失值时,我们可以用其他数值替代NaN,主要用到了DataFrame.fillna()方法,下面我们来看看具体的用法:

1.先来创建一个带有缺失值的DataFrame:
import pandas as pd
import numpy as np
df=pd.DataFrame(np.random.randn(5,3),index=list('abcde'),columns=['one','two','three'])
df=pd.DataFrame(np.random.randn(5,3),index=list('abcde'),columns=['one','two','three'])
df.ix[1,:-1]=np.nan
df.ix[1:-1,2]=np.nan
df
具体数值为:



2.使用0替代缺失值(当然你可以用任意一个数字代替NaN)

df.fillna(0)

3.用一个字符串代替缺失值
df.fillna('missing')
4.用前一个数据代替NaN:method='pad'
df.fillna(method='pad')

5.与pad相反,bfill表示用后一个数据代替NaN。这里我们增加一个知识点,用limit限制每列可以替代NaN的数目,下面我们限制每列只能替代一个NaN
df.fillna(method='bfill',limit=1)

6.除了上面用一个具体的值来代替NaN之外,还可以使用平均数或者其他描述性统计量来代替NaN

df.fillna(df.mean()


7.最后,我们还可以选择哪一列进行缺失值的处理。

df.fillna(df.mean()['one':'two'])


  • 23
    点赞
  • 53
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
pandas中,可以使用fillna()函数来填充缺失值。该函数的主要参数包括value、method、axis、inplace、limit等。其中,value参数用于指定填充的值,method参数用于指定填充的方法,axis参数用于指定填充的方向,inplace参数用于指定是否在原数据上进行填充,limit参数用于指定每列或每行连续填充的最大数量。 例如,可以使用向前填充(ffill)的方法来填充缺失值。首先,将DataFrame中的缺失值替换为NaN,然后使用fillna()函数进行填充。可以使用df.fillna(value=None, method='ffill', axis=0, limit=None)来实现列向前填充。同样地,可以使用向后填充(bfill)的方法来填充缺失值。可以使用df.fillna(value=None, method='bfill', axis=0, limit=None)来实现列向后填充。\[2\] 需要注意的是,向前填充和向后填充都无法填充首行和末行的缺失值。为了解决这个问题,可以先使用向前填充,然后再使用向后填充的方法进行填充。这样可以保证所有的缺失值都得到填充。\[3\] 以下是一个完整的示例代码,展示了如何使用pandas填充缺失值: ```python import pandas as pd import numpy as np # 读取数据 data = pd.read_excel("待填充数据.xlsx", sheet_name="房间数", index_col="月份") # 将0值转化为空值 data\[data == 0\] = np.nan # 过滤空值过多的列 df = data.dropna(axis=1, thresh=11, subset=None, inplace=False) # 列向前填充 df1 = df.fillna(value=None, method='ffill', axis=0, limit=None) # 列向后填充,避免首行空值 df2 = df.fillna(value=None, method='bfill', axis=0, limit=None) # 将结果保存到Excel文件 df2.to_excel("清洗填充结果.xlsx") ``` 这段代码首先读取了一个Excel文件中的数据,然后将其中的0值替换为NaN。接着,过滤了空值过多的列,然后使用向前填充和向后填充的方法进行缺失值填充。最后,将填充后的结果保存到了另一个Excel文件中。\[3\] #### 引用[.reference_title] - *1* *2* [pandas缺失值填充](https://blog.csdn.net/weixin_46969441/article/details/119859689)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] - *3* [pandas空值填充](https://blog.csdn.net/zengbowengood/article/details/103033654)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值