Pandas 高阶操作

于 2022-05-17 15:53:30 发布
阅读量515 收藏 2
点赞数
分类专栏： 人工智能 Python基础 文章标签： python 数据分析 数据挖掘 人工智能
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/mengxianglong123/article/details/124822633
版权

文章目录

一、高级处理-缺失值处理

在这里插入图片描述

1. 如何处理nan

  • 获取缺失值的标记方式(NaN或者其他标记方式)

  • 如果缺失值的标记方式是NaN

    • 判断数据中是否包含NaN：

      • pd.isnull(df)
      • pd.notnull(df)

    • 存在缺失值nan:

      • 1、删除存在缺失值的:dropna(axis=‘rows’)

        • 注：不会修改原数据，需要接受返回值

      • 2、替换缺失值:fillna(value, inplace=True)

        • value:替换成的值
        • inplace:True:会修改原数据，False:不替换修改原数据，生成新的对象

  • 如果缺失值没有使用NaN标记，比如使用"？"

    • 先替换‘?’为np.nan，然后继续处理

2. 电影数据的缺失值处理

  • 电影数据文件获取
# 读取电影数据
movie = pd.read_csv("./data/IMDB-Movie-Data.csv")

在这里插入图片描述

2.1 判断缺失值是否存在
  • pd.notnull()
pd.notnull(movie)

Rank	Title	Genre	Description	Director	Actors	Year	Runtime (Minutes)	Rating	Votes	Revenue (Millions)	Metascore
0	True	True	True	True	True	True	True	True	True	True	True	True
1	True	True	True	True	True	True	True	True	True	True	True	True
2	True	True	True	True	True	True	True	True	True	True	True	True
3	True	True	True	True	True	True	True	True	True	True	True	True
4	True	True	True	True	True	True	True	True	True	True	True	True
5	True	True	True	True	True	True	True	True	True	True	True	True
6	True	True	True	True	True	True	True	True	True	True	True	True
7	True	True	True	True	True	True	True	True	True	True	False	True

np.all(pd.notnull(movie))
  • pd.isnull()
2.2 存在缺失值nan,并且是np.nan
  • 1、删除

pandas删除缺失值，使用dropna的前提是，缺失值的类型必须是np.nan

# 不修改原数据
movie.dropna()

# 可以定义新的变量接受或者用原来的变量名
data = movie.dropna()
  • 2、替换缺失值
# 替换存在缺失值的样本的两列
# 替换填充平均值，中位数
# movie['Revenue (Millions)'].fillna(movie['Revenue (Millions)'].mean(), inplace=True)

替换所有缺失值：

for i in movie.columns:
    if np.all(pd.notnull(movie[i])) == False:
        print(i)
        movie[i].fillna(movie[i].mean(), inplace=True)
2.3 不是缺失值nan，有默认标记的

数据是这样的：

在这里插入图片描述

wis = pd.read_csv("https://archive.ics.uci.edu/ml/machine-learning-databases/breast-cancer-wisconsin/breast-cancer-wisconsin.data")

以上数据在读取时，可能会报如下错误：

URLError: <urlopen error [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed (_ssl.c:833)>

解决办法：

# 全局取消证书验证
import ssl
ssl._create_default_https_context = ssl._create_unverified_context

处理思路分析：

  • 1、先替换‘?’为np.nan
    • df.replace(to_replace=, value=)
      • to_replace:替换前的值
      • value:替换后的值
# 把一些其它值标记的缺失值，替换成np.nan
wis = wis.replace(to_replace='?', value=np.nan)
  • 2、在进行缺失值的处理
# 删除
wis = wis.dropna()

3. 小结

  • isnull、notnull判断是否存在缺失值【知道】
    • np.any(pd.isnull(movie)) # 里面如果有一个缺失值,就返回True
    • np.all(pd.notnull(movie)) # 里面如果有一个缺失值,就返回False
  • dropna删除np.nan标记的缺失值【知道】
    • movie.dropna()
  • fillna填充缺失值【知道】
    • movie[i].fillna(value=movie[i].mean(), inplace=True)
  • replace替换具体某些值【知道】
    • wis.replace(to_replace=“?”, value=np.NaN)

二、高级处理-数据离散化

1. 为什么要离散化

连续属性离散化的目的是为了简化数据结构，数据离散化技术可以用来减少给定连续属性值的个数。离散化方法经常作为数据挖掘的工具。

2. 什么是数据的离散化

连续属性的离散化就是在连续属性的值域上，将值域划分为若干个离散的区间，最后用不同的符号或整数
值代表落在每个子区间中的属性值。

离散化有很多种方法，这使用一种最简单的方式去操作

  • 原始人的身高数据：165，174，160，180，159，163，192，184
  • 假设按照身高分几个区间段：150~165, 165~180,180~195

这样我们将数据分到了三个区间段，我可以对应的标记为矮、中、高三个类别，最终要处理成一个"哑变量"矩阵

3. 股票的涨跌幅离散化

我们对股票每日的"p_change"进行离散化

在这里插入图片描述

3.1 读取股票的数据

先读取股票的数据，筛选出p_change数据

data = pd.read_csv("./data/stock_day.csv")
p_change= data['p_change']
3.2 将股票涨跌幅数据进行分组

在这里插入图片描述

使用的工具：

  • pd.qcut(data, q)：
    • 对数据进行分组将数据分组，一般会与value_counts搭配使用，统计每组的个数
  • series.value_counts()：统计分组次数
# 自行分组
qcut = pd.qcut(p_change, 10)
# 计算分到每个组数据个数
qcut.value_counts()

自定义区间分组：

  • pd.cut(data, bins)
# 自己指定分组区间
bins = [-100, -7, -5, -3, 0, 3, 5, 7, 100]
p_counts = pd.cut(p_change, bins)
3.3 股票涨跌幅分组数据变成one-hot编码
  • 什么是one-hot编码

把每个类别生成一个布尔列，这些列中只有一列可以为这个样本取值为1.其又被称为独热编码。

把下图中左边的表格转化为使用右边形式进行表示：

在这里插入图片描述

  • pandas.get_dummies(data, prefix=None)

    • data:array-like, Series, or DataFrame

    • prefix:分组名字

# 得出one-hot编码矩阵
dummies = pd.get_dummies(p_counts, prefix="rise")

在这里插入图片描述

4. 小结

  • 数据离散化【知道】
    • 可以用来减少给定连续属性值的个数
    • 在连续属性的值域上，将值域划分为若干个离散的区间，最后用不同的符号或整数值代表落在每个子区间中的属性值。
  • qcut、cut实现数据分组【知道】
    • qcut:大致分为相同的几组
    • cut:自定义分组区间
  • get_dummies实现哑变量矩阵【知道】

三、高级处理-合并

如果你的数据由多张表组成，那么有时候需要将不同的内容合并在一起分析

1. pd.concat实现数据合并

  • pd.concat([data1, data2], axis=1)
    • 按照行或列进行合并,axis=0为列索引，axis=1为行索引

比如我们将刚才处理好的one-hot编码与原数据合并
在这里插入图片描述

# 按照行索引进行
pd.concat([data, dummies], axis=1)

2. pd.merge

  • pd.merge(left, right, how=‘inner’, on=None)
    • 可以指定按照两组数据的共同键值对合并或者左右各自
    • left: DataFrame
    • right: 另一个DataFrame
    • on: 指定的共同键
    • how:按照什么方式连接
Merge methodSQL Join NameDescription
leftLEFT OUTER JOINUse keys from left frame only
rightRIGHT OUTER JOINUse keys from right frame only
outerFULL OUTER JOINUse union of keys from both frames
innerINNER JOINUse intersection of keys from both frames
2.1 pd.merge合并
left = pd.DataFrame({'key1': ['K0', 'K0', 'K1', 'K2'],
                        'key2': ['K0', 'K1', 'K0', 'K1'],
                        'A': ['A0', 'A1', 'A2', 'A3'],
                        'B': ['B0', 'B1', 'B2', 'B3']})

right = pd.DataFrame({'key1': ['K0', 'K1', 'K1', 'K2'],
                        'key2': ['K0', 'K0', 'K0', 'K0'],
                        'C': ['C0', 'C1', 'C2', 'C3'],
                        'D': ['D0', 'D1', 'D2', 'D3']})
                        
# 默认内连接
result = pd.merge(left, right, on=['key1', 'key2'])

在这里插入图片描述

  • 左连接
result = pd.merge(left, right, how='left', on=['key1', 'key2'])

在这里插入图片描述

  • 右连接
result = pd.merge(left, right, how='right', on=['key1', 'key2'])

在这里插入图片描述

  • 外链接
result = pd.merge(left, right, how='outer', on=['key1', 'key2'])

在这里插入图片描述

3. 总结

  • pd.concat([数据1, 数据2], axis=**)【知道】
  • pd.merge(left, right, how=, on=)【知道】
    • how – 以何种方式连接
    • on – 连接的键的依据是哪几个

四、 高级处理-交叉表与透视表

1 交叉表与透视表什么作用

探究股票的涨跌与星期几有关？

以下图当中表示，week代表星期几，1,0代表这一天股票的涨跌幅是好还是坏，里面的数据代表比例

可以理解为所有时间为星期一等等的数据当中涨跌幅好坏的比例

在这里插入图片描述

在这里插入图片描述

  • 交叉表：交叉表用于计算一列数据对于另外一列数据的分组个数(用于统计分组频率的特殊透视表)
    • pd.crosstab(value1, value2)
  • 透视表：透视表是将原有的DataFrame的列分别作为行索引和列索引，然后对指定的列应用聚集函数
    • data.pivot_table(）
    • DataFrame.pivot_table([], index=[])

2. 案例分析

2.1 数据准备
  • 准备两列数据，星期数据以及涨跌幅是好是坏数据
  • 进行交叉表计算
# 寻找星期几跟股票张得的关系
# 1、先把对应的日期找到星期几
date = pd.to_datetime(data.index).weekday
data['week'] = date

# 2、假如把p_change按照大小去分个类0为界限
data['posi_neg'] = np.where(data['p_change'] > 0, 1, 0)

# 通过交叉表找寻两列数据的关系
count = pd.crosstab(data['week'], data['posi_neg'])

但是我们看到count只是每个星期日子的好坏天数，并没有得到比例，该怎么去做？

  • 对于每个星期一等的总天数求和，运用除法运算求出比例
# 算数运算，先求和
sum = count.sum(axis=1).astype(np.float32)

# 进行相除操作，得出比例
pro = count.div(sum, axis=0)
2.2 查看效果

使用plot画出这个比例，使用stacked的柱状图

pro.plot(kind='bar', stacked=True)
plt.show()
2.3 使用pivot_table(透视表)实现

使用透视表，刚才的过程更加简单

# 通过透视表，将整个过程变成更简单一些
data.pivot_table(['posi_neg'], index='week')

3. 小结

  • 交叉表与透视表的作用【知道】
    • 交叉表：计算一列数据对于另外一列数据的分组个数
    • 透视表：指定某一列对另一列的关系

五、高级处理-分组与聚合

分组与聚合通常是分析数据的一种方式，通常与一些统计函数一起使用，查看数据的分组情况

想一想其实刚才的交叉表与透视表也有分组的功能，所以算是分组的一种形式，只不过他们主要是计算次数或者计算比例！！看其中的效果：

在这里插入图片描述

1. 什么分组与聚合

在这里插入图片描述

2. 分组API

  • DataFrame.groupby(key, as_index=False)
    • key:分组的列数据，可以多个
  • 案例:不同颜色的不同笔的价格数据
col =pd.DataFrame({'color': ['white','red','green','red','green'], 'object': ['pen','pencil','pencil','ashtray','pen'],'price1':[5.56,4.20,1.30,0.56,2.75],'price2':[4.75,4.12,1.60,0.75,3.15]})

color	object	price1	price2
0	white	pen	5.56	4.75
1	red	pencil	4.20	4.12
2	green	pencil	1.30	1.60
3	red	ashtray	0.56	0.75
4	green	pen	2.75	3.15
  • 进行分组，对颜色分组，price进行聚合
# 分组，求平均值
col.groupby(['color'])['price1'].mean()
col['price1'].groupby(col['color']).mean()

color
green    2.025
red      2.380
white    5.560
Name: price1, dtype: float64

# 分组，数据的结构不变
col.groupby(['color'], as_index=False)['price1'].mean()

color	price1
0	green	2.025
1	red	2.380
2	white	5.560

3. 星巴克零售店铺数据

现在我们有一组关于全球星巴克店铺的统计数据，如果我想知道美国的星巴克数量和中国的哪个多，或者我想知道中国每个省份星巴克的数量的情况，那么应该怎么办？

数据来源：https://www.kaggle.com/starbucks/store-locations/data

在这里插入图片描述

3.1 数据获取

从文件中读取星巴克店铺数据

# 导入星巴克店的数据
starbucks = pd.read_csv("./data/starbucks/directory.csv")
3.2 进行分组聚合
# 按照国家分组，求出每个国家的星巴克零售店数量
count = starbucks.groupby(['Country']).count()

画图显示结果

count['Brand'].plot(kind='bar', figsize=(20, 8))
plt.show()

在这里插入图片描述

假设我们加入省市一起进行分组

# 设置多个索引，set_index()
starbucks.groupby(['Country', 'State/Province']).count()

在这里插入图片描述

仔细观察这个结构，与我们前面讲的哪个结构类似？？

与前面的MultiIndex结构类似

4. 小结

  • groupby进行数据的分组【知道】
    • pandas中，抛开聚合谈分组，无意义

六、 案例

1 需求

现在我们有一组从2006年到2016年1000部最流行的电影数据

数据来源：https://www.kaggle.com/damianpanek/sunday-eda/data

  • 问题1：我们想知道这些电影数据中评分的平均分，导演的人数等信息，我们应该怎么获取？
  • 问题2：对于这一组电影数据，如果我们想rating，runtime的分布情况，应该如何呈现数据？
  • 问题3：对于这一组电影数据，如果我们希望统计电影分类(genre)的情况，应该如何处理数据？

2 实现

首先获取导入包，获取数据

%matplotlib inline
import pandas  as pd 
import numpy as np
from matplotlib import pyplot as plt

#文件的路径
path = "./data/IMDB-Movie-Data.csv"
#读取文件
df = pd.read_csv(path)
2.1 问题一：

我们想知道这些电影数据中评分的平均分，导演的人数等信息，我们应该怎么获取？

  • 得出评分的平均分

使用mean函数

df["Rating"].mean()
  • 得出导演人数信息

求出唯一值，然后进行形状获取

## 导演的人数
# df["Director"].unique().shape[0]
np.unique(df["Director"]).shape[0]

644
2.2 问题二：

对于这一组电影数据，如果我们想Rating，Runtime (Minutes)的分布情况，应该如何呈现数据？

  • 直接呈现，以直方图的形式

选择分数列数据，进行plot

df["Rating"].plot(kind='hist',figsize=(20,8))

在这里插入图片描述

  • Rating进行分布展示

进行绘制直方图

plt.figure(figsize=(20,8),dpi=80)
plt.hist(df["Rating"].values,bins=20)
plt.show()

修改刻度的间隔

# 求出最大最小值
max_ = df["Rating"].max()
min_ = df["Rating"].min()

# 生成刻度列表
t1 = np.linspace(min_,max_,num=21)

# [ 1.9    2.255  2.61   2.965  3.32   3.675  4.03   4.385  4.74   5.095  5.45   5.805  6.16   6.515  6.87   7.225  7.58   7.935  8.29   8.645  9.   ]

# 修改刻度
plt.xticks(t1)

# 添加网格
plt.grid()

在这里插入图片描述

  • Runtime (Minutes)进行分布展示

进行绘制直方图

plt.figure(figsize=(20,8),dpi=80)
plt.hist(df["Runtime (Minutes)"].values,bins=20)
plt.show()

修改间隔

# 求出最大最小值
max_ = df["Runtime (Minutes)"].max()
min_ = df["Runtime (Minutes)"].min()

# # 生成刻度列表
t1 = np.linspace(min_,max_,num=21)

# 修改刻度
plt.xticks(np.linspace(min_,max_,num=21))

# 添加网格
plt.grid()

在这里插入图片描述

2.3 问题三：

对于这一组电影数据，如果我们希望统计电影分类(genre)的情况，应该如何处理数据？

  • 思路分析
    • 思路
      • 1、创建一个全为0的dataframe，列索引置为电影的分类，temp_df
      • 2、遍历每一部电影，temp_df中把分类出现的列的值置为1
      • 3、求和
  • 1、创建一个全为0的dataframe，列索引置为电影的分类，temp_df
# 进行字符串分割
temp_list = [i.split(",") for i in df["Genre"]]
# 获取电影的分类
genre_list = np.unique([i for j in temp_list for i in j]) 

# 增加新的列
temp_df = pd.DataFrame(np.zeros([df.shape[0],genre_list.shape[0]]),columns=genre_list)
  • 2、遍历每一部电影，temp_df中把分类出现的列的值置为1
for i in range(1000):
    #temp_list[i] ['Action','Adventure','Animation']
    temp_df.ix[i,temp_list[i]]=1
print(temp_df.sum().sort_values())
  • 3、求和,绘图
temp_df.sum().sort_values(ascending=False).plot(kind="bar",figsize=(20,8),fontsize=20,colormap="cool")


Musical        5.0
Western        7.0
War           13.0
Music         16.0
Sport         18.0
History       29.0
Animation     49.0
Family        51.0
Biography     81.0
Fantasy      101.0
Mystery      106.0
Horror       119.0
Sci-Fi       120.0
Romance      141.0
Crime        150.0
Thriller     195.0
Adventure    259.0
Comedy       279.0
Action       303.0
Drama        513.0
dtype: float64

在这里插入图片描述

落花雨时
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
数据挖掘-4.Pandas高级
weixin_43732424的博客
11-03 5265
文章目录pandas高级1 高级处理-缺失值处理学习目标1 如何处理nan2 电影数据的缺失值处理2.1 判断缺失值是否存在2.2 存在缺失值nan,并且是np.nan2.3 不是缺失值nan，有默认标记的3 小结2 高级处理-数据离散化学习目标1 为什么要离散化2 如何数据的离散化3 股票的涨跌幅离散化3.1 读取股票的数据3.2 将股票涨跌幅数据进行分组3.3 股票涨跌幅分组数据变成one-hot编码4 小结3. 高级处理-合并学习目标1 pd.concat实现数据合并2 pd.merge2.1 pd.
高手系列！数据科学家私藏pandas高阶用法大全 ⛵
热门推荐
ShowMeAI研究中心
11-22 1万+
本文汇总介绍了21个 Pandas 进阶用法，能保持代码整洁优雅，更能提高代码效率！这篇是从数据科学家朋友那里搞到的私藏，快一起薅羊毛~
身高预测c语言代码switch,Ｃ＋＋　，预测身高程序
weixin_42347048的博客
05-19 2989
#include #include using namespace std;int main( ){//定义变量部分double height;char sex;double faheight;double moheight;char sports;char diet;//输入性别部分cout << "男则输入F，女则输入M" << endl;cin>>sex;...
pandas高阶应用
qq_41589941的博客
02-22 725
1、时间序列相关操作 pd的date_range中的基本时间序列频率 Alias Description（偏移量类型） 说明 B business day frequency 每工作日 C custom business day frequency 自定义工作日频率 D calenda
pandas进阶02--高级应用篇
平原的博客
06-22 3729
Pandas高级应用 目录介绍： 1、pandas高级应用–数据合并 2、pandas高级应用–数据重塑和旋转 3、pandas高级应用–数据转化、清除重复数据 4、pandas高级应用–数据替换 5、pandas高级应用–数据拆分 1、pandas高级应用–数据合并 from pandas import Series,DataFrame import pandas as ...
高阶Pandas1
08-03
在Python的Pandas库中，高阶Pandas操作主要涉及高效的数据处理和分析，特别是针对大规模数据集。这里我们将深入探讨Categorical类型、GroupBy应用、分类数据处理以及时间序列的重新采样。 **Categorical类型** ...
Python股票量化投资课程——章节04【2019新版】第3课：Pandas高阶.rar
01-09
在本课程的Pandas高阶部分，我们将深入探讨如何利用Pandas进行条件筛选、数据排序、数据重塑以及数据可视化。例如，我们可以筛选出满足特定条件的股票，如收益率超过一定阈值，或者计算并排序各个股票的风险收益比。...
Python的高阶函数用法实例分析
12-26
本文实例讲述了Python的高阶函数用法。分享给大家供大家参考，具体如下： 高阶函数 1.MapReduce MapReduce主要应用于分布式中。 大数据实际上是在15年下半年开始火起来的。 分布式思想：将一个连续的字符串转为列表...
Python之Pandas知识点
02-24
SciPy：科学计算库，有一些高阶抽象和物理模型，在NumPy基础上，封装了一层，没有那么纯数学，提供方法直接计算结果；比如：做个傅立叶变换，这是纯数学的，用Numpy；做个滤波器，这属于信号处理模型了，用Scipy。...
数据分析-pandas入门-案例分析
最新发布
09-08
在压缩包中的“pandas高阶应用”可能涵盖了更复杂的数据处理技巧，如数据分桶（binning）、时间序列分析、性能优化（如使用`apply`的替代方法以提高速度）以及与其他库的高级集成。 总之，Pandas是Python数据分析的...
【整理】pandas教程
08-29
辛苦整理的，非常不错，可以用来学习pandas的基本操作。 正文目录： pandas教程：[1]DataFrame入门 pandas教程：[2]DataFrame选择数据 pandas教程：[3]DataFrame切片操作 pandas教程：[4]Dataframe筛选数据 pandas教程：[5]读取csv数据 pandas教程：[6]计数统计 pandas教程：[7]筛选计数统计 pandas教程：[8]数据分组 pandas教程：[9]MultiIndex用法 pandas教程：[10]groupby选择列和迭代 pandas教程：[11]aggregate分组计算 pandas教程：[12]transformation标准化数据 pandas教程：[13]agg分组多种计算 pandas教程：[14]按月分组 pandas教程：[15]移动复制删除列 pandas教程：[16]字符串操作 pandas教程：[17]字符串提取数据 pandas教程：[18]匹配字符串 pandas教程：[19]读写sql数据库 pandas教程：[20]广播 pandas教程：[21]带有缺失值的计算 pandas教程：[22]填充缺失值 pandas教程：[24]删除缺失数据 pandas教程：[25]插值法填补缺失值 pandas教程：[26]值替换 pandas教程：[27]散点图和抖动图 pandas教程：[28]散点图添加趋势线 pandas教程：[29]柱形图 pandas教程：[30]直方图 pandas教程：[31]箱形图
pandas高级篇
MESSI_JAMES的博客
06-25 1260
1.pandas数据分割,cut() cut:是将数据划分成几个区间，每个区间长度一样，区间数据个数不一定一样 qcut:划分区间只能是0—1之间数，差值是分位数，包含0和1，按分位数划分，如果差值a小于1，就没有1000个值，共a*1000个数 2.pandas数据过滤和筛选 np.random.seed(number) number是生成随机数的种子 np.random.rand...
Pandas高阶篇三(数据转化、清除重复数据)
qq_42379006的博客
06-22 6849
数据转换-清除重复数据 Data frame的 duplicated方 法返回一个布尔型 Series, 表示各行是否是重复行: 还有一个与此相关的drop duplicates方法,它用于返回一个移除了重复行的DataFrame 这两个方法默认会判断 全部列,你也可以指定部分列进行重复项判断。 假设你还有一列值,且只希望根据k1列过滤重复 项: duplicate...
python之高阶pandas的使用（一）
小k要加油的博客
01-19 1224
用维度表表示重复的值 values=pd.Series(['apple','orange','lemon','apple']*2) values 去重 pd.unique(values) 计算每个种类出现次数 pd.value_counts(values) 我们可以用不同的数字来编码不同的值 value=pd.Series([0,1,2,0]*2) value take用于恢复之前的字符串 dim=pd.Series(['apple','e...
Pandas高级
weixin_55800047的博客
02-26 892
1、数据筛选-赋值操作 在原有数据基础上增添一列。 将Python这一列的成绩统一增加十分： 将索引为2的同学的Math成绩改为100分: 想要批量修改多个数据时，将索引为2，4的Python和EN成绩改为100 当想要获取更多的数据的时候，就需要将索引和切片配合使用。 2、数据集成 1、concat数据串联 将1班和班的成绩合并在一起 pd.concat将df1和df2的数据合并在一起，默认行合并。 现在将df3和df1合并在一起。 将df1和...
高级数据操纵控件Pandas的使用
07-23
Pandas是一款用于数据采集、数据处理和数据分析的可编程的利器，比电子表格功能更加强大，使用更加灵活，是进行数据分析与数据挖掘所依赖的重要工具。本课程将主要讲述Pandas的常用使用方法，授课内容包括：数据加载数据概览数据访问数据修改.数据的统计分析数值转换—匿名函数的使用数据表变形数据合并检索与排序使用Pandas做可视化分析
pandas高级操作
m0_46926492的博客
04-21 2339
分组后,也可以使用transform和apply提供自定义函数实现更多的运算。替换操作可以同步作用于Series和DataFrame中。注意:map是Series的方法，只能被Series调用。,分组后进行多种不同的聚合操作。
python数据科学系列：pandas入门详细教程
python爬虫人工智能大数据
05-06 9472
导读前2篇分别系统性介绍了numpy和matplotlib的入门基本知识，今天本文自然是要对pandas进行入门详细介绍，通过本文你将系统性了解pandas为何会有数据分析界"瑞...
Pandas高阶篇七(数据的聚合及分组计算)
qq_42379006的博客
06-25 607
对数据集进行分组并对各组应用一个函数(无论是聚合还是转 换),这是数据分析工作中的重要环节。在将数据集准备好之后,通常的任务就是计算分组统计或生成透视表。pandas提供了一个灵活高效的gruopby功能,它使你能以一种自然的方式对数据集进行切片、切块、摘要等操作 。 ...
pandas groupby 与apply结合
08-27
- *1* *3* [python数据分析高阶应用技巧-pandas库聚合案例【 groupby().apply()写法强化】](https://blog.csdn.net/weixin_48964486/article/details/127588129)[target="_blank" data-report-click={"spm":"1018....
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值