python数据处理

重复值
print(any(a.duplicated()))
a.drop_dupliactes()

缺失值
print(any(a.isnull()))
a.dropna()
a.b.fillna(a.b.mean()/median()/mode()[0])

异常值
P1=a[b].mean()+2a[b].std()/a[b].quantile(0.75)
P2=a[b].mean()-2a[b].std()/a[b].quantile(0.25)
print(any(a[b]>P1)
print(any(a[b]<P2)
替换值
a[‘new_b’]=list(map(lambda x:P1 if x>P1 else (P2 if x<P2 else),a[b]))
归一化
a[‘new_b’] = (a[b] - a[b].mean())/a[b].std())