空值处理、去重、无穷大(inf)的处理、分组聚合agg、map/apply/applymap、匿名函数(lambda)、透视表、where/mask

1、空值处理

student_excel.xlsx如图:在这里插入图片描述

import pandas as pd
#表头为第三行(索引为2)
df1=pd.read_excel(r'C:\Users\9250\Downloads\20201228课后资料\20201228课后资料\student_excel.xlsx',header=2)
print(df1)
print('*'*20)

# 判断每一列中是否包含Nan
# df.isnull().any()
# df.isnull().all() # 是否全是空值


#删除A列(全部无数据),且在原数据上进行更改
df1.dropna(how='all',axis=1,inplace=True)
#删除全为空的行
df1.dropna(how='all',axis=0,inplace=True)
#重置索引
df1.index=range(0,len(df1))

'''
method :
ffill(使用前一个值,使用的是左一个)
bfill(使用后一个值,使用的是右一个)

根据axis的设置
'''

#姓名这一列中的空值 基于空值上面的值填充 ffill,且在原数据上进行修改 
df1['姓名'].fillna(method='ffill',inplace=True)
df1['分数'].fillna(method='bfill',inplace=True)
df1


# 填充全部
# df.fillna(0)

# 进行不同的列填充不同的值
# df.fillna({'分数':0,'姓名':'abc'})

2、去重

import pandas as pd
df2=pd.DataFrame({
   'A':[1,1,1,2,2,3,1,5],'B':list("aabbbcad")})
display(df2)
#判断该行是否重复  重复返回true  
df2.duplicated()
#删除重复的行  keep='first'保留一开始出现的   keep='last'保留最后出现的
df2.drop_duplicates(keep='first')
#基于B列进行重复删除
df2.drop_duplicates(subset=['B'])

3、无穷大(inf)的处理

'''
0/0=0,非0/0=无穷大
可将inf替换成nan
df.replace(np.inf,np.NaN)
'''

4、分组、聚合、agg

#  分组
impo
  • 0
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值