pandas常用功能----笔记篇

最新推荐文章于 2022-07-25 14:21:39 发布
最新推荐文章于 2022-07-25 14:21:39 发布
阅读量95 收藏
点赞数
分类专栏： Python 文章标签： 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43614573/article/details/118367256
版权
import pandas as pd1. 读取df = pd.read_excel(file)2. nan替换处理df.fillna("", inplace=True)3. 去重subset按照设置的主键去重df = df.drop_duplicates(subset=["代码", "全称"], keep="last")4. 去掉空值一行数据df = df.where(df.notnull(), None)5. 按行（列）转换为列表（list）按行result = df.v
摘要由CSDN通过智能技术生成

import pandas as pd

1. 读取
df = pd.read_excel(file)
2. nan替换处理
df.fillna("", inplace=True)
3. 去重

subset按照设置的主键去重

df = df.drop_duplicates(subset
最低0.47元/天 解锁文章
My梦
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
pandas常用功能总结
weixin_43818850的博客
12-30 740
pandas常用功能总结 1.输出表格到csv文件 data.to_csv('data.csv',index=None,encoding='utf_8_sig') 其中data是表格数据，index=None表示取消行索引，直接输出后用Excel打开会出现中文乱码，加上encoding='utf_8_sig’就可消除乱码现象 输出为Excel文件同理：data.to_excel(‘data.xl...
Dataframe中NaN值直接replace进入数据库表会报错，填充为None后插入表，表中显示为null
SecondRound93的博客
05-28 2975
当pd.Dataframe中含有NaN值时，用python连接mysql数据库，直接replace进入表会报错 比如有如下dataFrame replace会报错：pymysql.err.InternalError: (1054, “Unknown column ‘nan’ in ‘field list’”) 解决办法： 将DataFrame中的NaN值填充为None后再replace df = df.where(df.notnull(),None) 完整代码如下： import pymysql imp
pandas NaN to None
Shone1214的博客
07-25 2234
pandas的NaN与None的相互转换。
Pandas将NaN转换为None 插入数据库
m0_64336020的博客
03-01 1万+
往mysql数据库插入数据时，不能插入nan空值，否则报错 nan can't be used with mysql。 而Pandas读取excel表中的空值就是以nan表示，所以在以pandas方式读取excel数据后需要对nan值进行处理。处理后转为np.narry格式，再转为列表，再进行插入，最后提交事务。 Pandas的nan空值的处理 方法一： 以None形式的空值替换NaN形式的空值 import pandas as pd df = pd.read_excel('data.xlsx
Pandas使用操作(二)
ErnestW的博客
12-23 2080
获取列名 1、df.columns #返回的是array格式。 df.columns[0] 2、list(df) #返回list格式。 list(df)[0] 3、df.keys() #pandas.core.indexes.base.Index df.keys()[0] 将空字符串替换为nan dataframe.iloc[:,0].str.split(',',expand=True).replace('',np.nan) 将NaN替换成None df = df.where(df.notnull(
pandas将dataframe中的NaN替换成None
什么都干的派森
05-26 1万+
df = df.where(df.notnull(), None)
Pandas学习笔记1-Pandas基础
12-21
本篇笔记将探讨Pandas的基础知识，包括数据的读取与写入、Series和DataFrame的基本操作以及它们的特点。 首先，我们需要导入Pandas库并查看其版本。使用以下代码： ```python import pandas as pd import numpy as ...
Pandas学习笔记常用功能.pdf
11-16
在本篇Pandas学习笔记中，我们将探讨其常用的功能，包括安装与使用、Python 数据结构以及数据类型的操作。 一、Pandas 的安装和使用 安装Pandas可以通过常见的 Python 包管理器 pip，如 `pip install pandas`。值得...
Pandas学习笔记常用功能.docx
11-16
这篇学习笔记主要涵盖了Pandas的安装、使用，以及核心数据结构Series和DataFrame。 一、Pandas的安装和使用 安装Pandas通常采用pip工具，但在安装前需确保已经安装了NumPy库，因为Pandas依赖于它。如果在安装过程中...
Python-Jupyter笔记本扩展用于地理空间可视化和分析
08-10
Jupyter Notebook作为Python交互式编程和数据科学的核心工具，提供了丰富的可视化功能。本篇文章将深入探讨“Python-Jupyter笔记本扩展用于地理空间可视化和分析”的相关知识点。 1. **Jupyter Notebook**：Jupyter...
数据分析笔记--pandas的数据替换.pdf
12-23
在本篇笔记中，我们将深入探讨如何使用Pandas的`replace`方法来替换数据，无论是Series还是DataFrame对象。 首先，我们需要导入Pandas库以及常用的Numpy库。`import pandas as pd`和`import numpy as np`这两行代码...
python dataframe如何设置并处理（删除、填充）空值
大西瓜不甜的博客
07-17 4384
当测试或实际应用需要设置空值缺失值时可以用None 、np.nan 、pd.NaT 处理空值异常值有两种办法，一种是将空值行/列删除，一种是将替代空值 如何对空值计数 a=df.isnull() b=a[a==True] b.count()#用来计算nan数量 删除的方法 将nan的行全部删除 df.dropna() print(‘dropna’,df.dropna())#将带nan的行删除 axis=1删除列 或者是 将某列行不为空值或者某几列行均不为空值的行另存为 data = data[data[
Python Pandas找到缺失值的位置
热门推荐
从零开始学的专栏
09-18 10万+
问题描述： python pandas判断缺失值一般采用 isnull()，然而生成的却是所有数据的true／false矩阵，对于庞大的数据dataframe，很难一眼看出来哪个数据缺失，一共有多少个缺失数据，缺失数据的位置。首先对于存在缺失值的数据，如下所示import pandas as pd import numpy as npdf = pd.DataFrame(np.rand
【Pandas】常规方法使用
晴朗的心情博客
11-11 1264
文章目录count count import pandas as pd a=[['1','2','5'],['1','4','7'],['2','5','6']] b=pd.DataFrame(a,columns=['a','b','c']) print(b[b['a']=='1'].a.count())
pandas NaN转换为None
浅醉樱花雨的专栏
11-18 1万+
在python中，用pandas做数据处理非常方便。 但是有时候从其他地方读取数据时，会有异常值需要处理。比如，我们要从excel读取数据然后调用接口写入数据库时，读取到的空值是NaN，但是，接口接收的对应单元格数据应该是None，这时候怎么处理呢？当然，用pandas做这个事也是非常容易的。示例如下： 原始数据： 示例代码： import pandas as pd ...
【python】详解pandas df.where函数 以及 去掉特殊值的某行或者某列
IAlexanderI的专栏
09-17 3944
- 1、首先直接看文档： data.where(cond, other=nan, inplace=False, axis=None, level=None, errors=’raise’, try_cast=False, raise_on_error=None) Docstring: Return an object of same shape as self and whose corres...
Pandas+Numpy 数据中空值的处理操作：判断、查找、填充及删除
DREAM BIGGER
04-20 2万+
本文整理了数据中空值的处理操作，主要内容如下： 判断数据中是否有空值 统计空值/非空值数量 根据空值筛选数据 查找空值索引 删除空值 dropna()函数 填充空值fillna()函数 为了便于描述，定义本文示例数据为如下结构： df = pd.DataFrame([[1, np.nan], [np.nan, 4], [5,6],[np.nan,7]],columns=["A",...
保留小数位的五种方式------Python
迹
02-05 7291
1. format print("{0:.2}".format("2.235648")) # 字符串保留两位小数 print("{0:.2f}".format(6.423789)) # float保留两位小数 print("{0:b}".format(4)) # 二进制输出，对象是整数，不能为其他类型 print("{0:c}".format(4)) # Unicode输出，对象是整数，不能为其他类型 print("{0:d}".format(4)) # decimal类型输出，对象是整数 pri
pandas-1.4.3-cp38
最新发布
12-08
在这个版本中，pandas-1.4.3-cp38提供了许多新功能、改进和 bug 修复。这些改动旨在提高pandas库的性能、稳定性和易用性。一些重要的更新包括： 1. 新功能：该版本引入了一些新功能，如新的数据结构和数据类型，...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值