python异常值删除_如何从聚合的Dataframe(Python)中删除异常值?

博客内容涉及到数据聚合、异常值处理。作者首先使用groupby和nunique函数对原始数据进行聚合,然后通过merge和crosstab操作进一步处理。之后,他们在数据中插入了一些异常值,并尝试使用条件筛选删除这些异常值,但结果导致类别列只显示NaN。问题在于异常值删除的代码可能不正确地过滤了数据。
摘要由CSDN通过智能技术生成

我的原始数据就像这样,只有第一行:categories id products

0 A 1 a

1 B 1 a

2 C 1 a

3 A 1 b

4 B 1 b

5 A 2 c

6 B 2 c

我用以下代码聚合了它:df2 = df.groupby('id').products.nunique().reset_index().merge(

pd.crosstab(df.id, df.categories).reset_index()

然后,我在DF中添加了n个异常值:id products A B C

0 1 2 2 2 1

1 2 1 1 1 0

2 3 50 1 1 30

现在,我正在尝试删除我的新df中的异常值:#remove outliners

del df2['id']

df2 = df2.loc[df2['products']<=20,[str(i) for i in df2.columns]]

我得到的是:products A B C

0 2 NaN NaN NaN

1 1 NaN NaN NaN

它移除异常值,但为什么我现在只在类别列中获得NaNs?

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值