数据清理
lalahu_123
这个作者很懒,什么都没留下…
展开
-
Python 解析json数组
清理数据时会遇到解析json串的情况,如果只是json串,Python中可通过json包中的loads解析成dict,当遇到json数组时,会稍微麻烦一些。问题描述Dataframe格式的数据集中有一列变量,保存的是json数组,需要解析成宽表:一个ID“小明”,该变量存储的json数组:[{‘科目’ : ‘数学’‘分数’ : ‘80’‘权重’ : ‘0.5’ },{‘科目’ : ...原创 2018-09-30 15:26:38 · 39374 阅读 · 1 评论 -
Python 常用数据处理
以下为积累 Python 常用数据处理方法,不定时更新。1.遍历某文件夹下所有文件 :files= os.listdir(path)2.取消科学计数法:np.set_printoptions(suppress=True)3.判断 DataFrame 为空:全部数据集 df.isnull()为空的列 df.isnull().any()挑选某一列为空的行 df[df[‘a’].isnull...原创 2018-10-22 14:03:08 · 329 阅读 · 0 评论