Pandas数据分析系列4-数据如何清洗

已于 2023-10-23 20:58:48 修改
阅读量205 收藏
点赞数
分类专栏： Pandas数据分析 Python 文章标签： pandas python excel 数据分析 数据清洗
于 2023-10-21 17:33:14 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/marshaljun/article/details/133964100
版权
本文介绍了Pandas中数据清洗的四个关键步骤：使用fillna()填充缺失值，利用dropna()删除含有缺失值的行，通过drop_duplicates()去除重复行或指定列的重复值，以及用replace()函数替换特定数据。示例包括缺失值替换为0、删除重复行、按列删除重复值以及用86替换销售数量为12的记录。
摘要由CSDN通过智能技术生成

Pandas-数据清洗

①缺失值处理

使用fillna()函数将缺失值替换为指定的值或使用插值方法填充缺失值

      示例：df.fillna(0) #将缺失值替换为0

import pandas as pd

df1=pd.read_excel("销售表.xlsx")
# 检查每列是否缺失
print(df1.isna)

 效果如下：

import pandas as pd

df1=pd.read_excel("销售表.xlsx")
#将缺失值替换为0
df1=df1.fillna(0)

print(df1)

效果如下：

    使用dropna()函数删除包含缺失值的行

了解本专栏 订阅专栏 解锁全文 超级会员免费看
gzpingesoft
关注
专栏目录
订阅专栏
博客
Python Excel 指定内容修改
06-06 335
在处理Excel 自动化时，经常需要指定Excel内容修改，类似vlookup函数。如财务部门经常有一个繁琐的场景，需要读取分发的Excel文件内容复制到汇总Excel文件对应的单元格内
博客
Uipath 读取Word模板实现录用通知书PDF批量生成
02-20 1520
本文讲解如何使用Uipath 读取Excel 面试人员信息表，读取Word模板，再批量生成录用通知书PDF文件。
博客
Python 实现Excel 文件合并
02-19 496
Python Excel 文件合并
博客
Uipath 实现Excel 文件合并
02-14 2183
Uipath 新式Excel 活动，使用Excel 单个流程作用域，使用Excel 文件，适用于文件夹中的每个文件，附加范围，另存Excel 活动，实现对文件夹下的指定Excel 文件进行合并。
博客
Uipath 调用Python 脚本程序详解
02-14 2618
UiPath.Python.Activities 是一个新的活动包，直接从工作流运行 Python 脚本和方法。本文详解了Python 作用域(Python Scope)，加载 Python 脚本(Load Python Script) ，调用 Python 方法(Invoke Python Method)，获取 Python 对象(Get Python Object) ，运行 Python 脚本(Run Python Script) 活动功能及使用方法。
博客
Pandas数据分析系列9-数据透视与行列转换
10-25 693
本文详解了pandas模块中的数据透视表pivot_table函数及使用方法，接下来讲解了stack和unstack 函数如何实现excel 中的行列互转。
博客
Pandas数据分析系列8-数据分组与聚合
10-24 197
本文介绍了在Pandas 中如何使用groupby、聚合函数、agg函数，为数据可视化做好准备。
博客
Pandas数据分析系列7-连接&合并查询
10-23 227
在实际数据分析过程中，有时候需要把不同的工作表，按照某些公共的列，将多个工作表连接起来，组合成一份新工作表，类似于Excel的Vlooup函数，或数据库的连接关系。Pandas 也提供了连接关系函数merge(),其将两个DataFrame的行按照指定的列进行匹配合并，并返回一个新的DataFrame。合并的方式可以是交集、并集、左连接或右连接，具体由参数how决定。本文讲解了merge 与concat 两种查询方式及差异。
博客
Pandas数据分析系列6-数据特征分析
10-23 253
在前面章节学习了Pandas 两种数据结构Series、DataFrame，及Pandas如何读取Excel数据格式文件，数据预览、数据清洗及数据提取，接下来了解这些数据征分析。在实际工作中，财务、金融、制造业等数据，需从不同维度的指标进行分析，如合计数、最大数、最小数、平均数等，了解数据的差异，那使用Pandas如何分析？本节重点介绍常见的描述性统计函数。
博客
Pandas数据分析系列5-数据如何提取
10-21 299
本文介绍了Pandas 数据如何提取及切片，提取数据的常见方式。
博客
Pandas数据分析系列3-数据如何预览
10-21 291
本文重点介绍了，如何使用Pandas常见方法进行数据预览。
博客
Pandas数据分析系列2-数据如何导入
10-21 244
本文重点讲解Pandas如何读取Excel数据文件，并对read_excel 方法的参数进行详解。
博客
Pandas 数据分析系列1--Series&DataFrame数据结构详解
10-20 1006
Pandas 包含Series和DataFrame两种重要数据结构，熟练使用该两种结构，已能处理工作上几乎所有的数据处理分析问题。
博客
Python 无废话-基础知识面向对象编程详解
10-06 887
Python是一种面向对象的编程语言，类提供了一种封装数据和方法的机制，它可以用来定义对象的属性和行为,本文对类定义、创建对象、类的属性值修改、类继承、多态以及模块导入做了详解。
博客
Python 无废话-基础知识函数详解
10-06 180
python 函数详解，函数是一段封装了特定功能的可重复使用的代码块。通过函数，我们可以将代码模块化，提高代码的可读性、可维护性和复用性。本文介绍了如何定义函数，参数使用，函数返回值以及变量在函数的作用域等。
博客
Python 无废话-基础知识流程控制语句
10-05 283
Python 流程控制语句包含if elif else ，while ,for 循环、break，continue跳出循环体讲解。
博客
Python 无废话-办公自动化Excel图表制作
10-05 364
python 制作图表，openpyxl 支持用Excel工作表中单元格的数据，创建条形图、折线图、散点图和饼图等。
博客
Python 无废话-办公自动化Excel格式美化
10-04 741
Python 无废话Excel办公自动化-格式美化,内容包含设置字体、设置行高与列宽及合并拆分单元格。
博客
Python 无废话-办公自动化Excel写入操作
10-04 384
python 使用openpyxl 写入Excel文件，openpyxl 提供了一些方法写入数据，可以创建和编辑电子表格文件，用openpyxl 进行excel 写入操作是非常简单的。
博客
Python 无废话-办公自动化Excel读取操作
10-04 263
Pytho excel 文件操作，openpyxl是一个用于处理Excel文件的Python库,用于读取/写入Excel2010 xlsx/xlsm/xltx/xltm文件(不支持xls格式)。通过使用openpyxl库，可以轻松地在Python程序中实现对Excel文件的操作。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值