Python——pandas的基本运算及实例代码

Python——pandas的基本运

一、基本介绍

pandas有三种数据结构:一维:series
二维:DataFarme(重点)
三维:MultiIndex


二、Series

一维数组:由索引index和数据data组成
1.创建Series:

import pandas as pd
import random
series=pd.Series(data=range(0,10))
series				

结果:
0 0
1 1
2 2
3 3
4 4
5 5
6 6
7 7
8 8
9 9
dtype: int64

2.Series属性

print(series.index)
print(series.values)

结果
RangeIndex(start=0, stop=10, step=1)
[0 1 2 3 4 5 6 7 8 9]


三、DataFrame

DataFrame是一个类似于二维数组或表格(如excel)的对象,既有行索引,又有列索引
1.DataFrame的创建

import numpy as np
data=np.random.randint(0,100,(10,5))
columns=["语文","数学","英语","物理","化学"]
index=['同学' + str(i) for i in range(data.shape[0])]
dataframe=pd.DataFrame(data,columns=columns,index=index)
dataframe
					

结果:
在这里插入图片描述

2.DataFrame的属性

print(dataframe.shape)  #显示矩阵形状
print(dataframe.index)  #显示行索引
print(dataframe.columns) #显示列索引
print(dataframe.values)  #显示矩阵值

结果:

(10, 5)
Index([‘同学0’, ‘同学1’, ‘同学2’, ‘同学3’, ‘同学4’, ‘同学5’, ‘同学6’, ‘同学7’, ‘同学8’, ‘同学9’], dtype=‘object’)
Index([‘语文’, ‘数学’, ‘英语’, ‘物理’, ‘化学’], dtype=‘object’)
[[65 38 56 84 53]
[14 53 51 59 55]
[53 68 4 68 0]
[41 21 30 8 8]
[18 94 64 3 96]
[91 94 1 58 4]
[47 25 43 64 31]
[95 18 71 28 27]
[23 61 91 67 76]
[18 84 71 26 25]

3.DataFrame索引的设置

stu = ["学生_" + str(i) for i in range(score_df.shape[0])]

# 必须整体全部修改
data.index = stu

(1) reset_index(drop=False)
设置新的下标索引
drop:默认为False,不删除原来索引,如果为True,删除原来的索引值
(2)set_index(keys, drop=True)
keys : 列索引名成或者列索引名称的列表
drop : boolean, default True.当做新的索引,删除原来的列


四、MultiIndex

MultiIndex是三维的数据结构


五、DataFrame操作

1.索引操作
获取第二个学生的语文成绩:

dataframe.loc [ '同学2','语文',]

获取前三个学生的数学成绩:

dataframe.iloc[:3,1:2]

2.排序
使用df.sort_values(by=, ascending=)
单个键或者多个键进行排序,
参数:
by:指定排序参考的键
ascending:默认升序
ascending=False:降序
ascending=True:升序

data=dataframe.sort_values(by='数学')
data

在这里插入图片描述


六、DataFrame运算

1.算术运算:
add sub mul div
dataframe[“数学”].mul(2)
2.逻辑运算:
dataframe[dataframe[“数学”]>30]
query(expr)
expr:查询字符串
通过query使得刚才的过程更加方便简单

dataframe.query("open<24 & open>23").head()

isin(values)
例如判断’数学’是否为83

# 可以指定值进行一个判断,从而进行筛选操作
dataframe[dataframe["数学"].isin([83])]

3.统计运算

dataframe.describe()
dataframe.max(0)  #axis=0为列;axis=1为行

统计函数列表:
sum Sum of values
mean Mean of values
median Arithmetic median of values
min Minimum
max Maximum
mode Mode
abs Absolute Value
prod Product of values
std Bessel-corrected sample standard deviation
var Unbiased variance
idxmax compute the index labels with the maximum
idxmin compute the index labels with the minimum
4.自定义运算
apply(func, axis=0)


七、文件的读取与存储——CSV

1.读取

pandas.read_csv(filepath_or_buffer, sep =',', usecols )

filepath_or_buffer:文件路径
sep :分隔符,默认用","隔开
usecols:指定读取的列名,列表形式
2.写入

DataFrame.to_csv(path_or_buf=None, sep=', ’, columns=None, header=True, index=True, mode='w', encoding=None)

path_or_buf :文件路径
sep :分隔符,默认用","隔开
columns :选择需要的列索引
header :boolean or list of string, default True,是否写进列索引值
index:是否写进行索引
mode:‘w’:重写, ‘a’ 追加
例如:

八、实例

画出10个同学的语文成绩柱状图

import matplotlib.pyplot as plt
from pylab import mpl   #设置字体
mpl.rcParams["font.sans-serif"] = ["SimHei"]
mpl.rcParams["axes.unicode_minus"]=False   
data_yuwen=dataframe["语文"]   #取出语文成绩
data_yuwen.plot(kind="bar")       #画图
plt.grid(True,linestyle="--",alpha=1)
plt.title("语文成绩",fontsize=20)
plt.show()          #显示图像

结果:

拓展:可显示所有学科成绩的柱状图

import matplotlib.pyplot as plt
import numpy as np
import pandas as pd
from pylab import mpl   #设置字体
mpl.rcParams["font.sans-serif"] = ["SimHei"]
mpl.rcParams["axes.unicode_minus"]=False  

data=np.random.randint(0,100,(10,5))
columns=["语文","数学","英语","物理","化学"]
index=['同学' + str(i) for i in range(data.shape[0])]
dataframe=pd.DataFrame(data,columns=columns,index=index)
while True:
    a=input("Please input a subject name:")
    if a=='语文':
        data_yuwen=dataframe["语文"]   #取出语文成绩
        data_yuwen.plot(kind="bar")       #画图
        plt.grid(True,linestyle="--",alpha=1)
        plt.title("语文成绩",fontsize=20)
        plt.show()          #显示图像
        print(a)
    elif a=='数学':
        data_shuxue=dataframe["数学"]   #取出数学成绩
        data_shuxue.plot(kind="bar") 
        plt.grid(True,linestyle="--",alpha=1)
        plt.title("数学成绩",fontsize=20)
        plt.show()          #显示图像
    elif a=='英语':
        data_yingyu=dataframe["英语"]   #取出英语成绩
        data_yingyu.plot(kind="bar") 
        plt.grid(True,linestyle="--",alpha=1)
        plt.title("英语成绩",fontsize=20)
        plt.show()          #显示图像
    elif a=='物理':
        data_wuli=dataframe["物理"]   #取出物理成绩
        data_wuli.plot(kind="bar") 
        plt.grid(True,linestyle="--",alpha=1)
        plt.title("物理成绩",fontsize=20)
        plt.show()          #显示图像
    elif a=='化学':
        data_huaxue=dataframe["化学"]   #取出化学成绩
        data_huaxue.plot(kind="bar") 
        plt.grid(True,linestyle="--",alpha=1)
        plt.title("化学成绩",fontsize=20)
        plt.show()          #显示图像     
    else:
        print("error")
        break

结果:
在这里插入图片描述

  • 1
    点赞
  • 16
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: Pandas是一个Python库,用于数据处理和分析。在数据分析,预处理是非常重要的一步,因为它可以帮助我们清洗和转换数据,使其更适合进行分析。Pandas提供了一些强大的预处理功能,包括数据清洗、数据转换、数据重塑和数据合并等。在使用Pandas进行数据分析时,预处理是必不可少的一步。 ### 回答2: 在数据分析,数据的预处理是一个必要的过程。它的主要目的是清洗数据,准备数据,以便后续分析。在Pythonpandas是一种广泛使用的数据处理库。pandas可以通过其高效的数据结构和操作方法来清洗和处理数据。在本文,将介绍pandas预处理的一些常见技术。 一、读取数据 在pandas,使用read_csv()函数读取CSV格式的数据文件,read_excel()函数读取Excel格式的数据文件。它们都有很多选项,可以根据具体文件的格式进行设置。 二、查看数据 在pandas,使用以下函数来查看数据: 1. head() - 显示数据框的前几行; 2. tail() - 显示数据框的后几行; 3. columns - 显示数据框的列名; 4. shape - 显示数据框的行列数; 5. info() - 显示数据框的基本信息,包括每列的名称、非空值数量和数据类型。 三、数据清洗 在数据清洗,有以下一些常见的技术: 1. 删除重复行:使用drop_duplicates()函数; 2. 替换空值:使用fillna()函数; 3. 删除空值:使用dropna()函数; 4. 更改数据类型:使用astype()函数。 四、数据准备 在数据准备,有以下一些常见的技术: 1. 数据合并:使用merge()函数; 2. 数据筛选:使用loc()函数或者iloc()函数; 3. 数据分组:使用groupby()函数; 4. 数据排序:使用sort_values()函数。 五、数据分析 在数据分析,有以下一些常见的技术: 1. 数据聚合:使用agg()函数; 2. 统计描述:使用describe()函数; 3. 数据可视化:使用matplotlib或者seaborn库。 综上所述,pandas预处理是数据分析必不可少的一步。通过使用pandas提供的函数和方法,可以方便地清理和处理数据,使其更容易被分析。 ### 回答3: PandasPython最强大的数据处理库之一,它提供了DataFrame和Series这两种数据结构,可以快速便捷地处理数据。在数据分析过程,我们往往需要先对数据进行预处理,以便后续的分析。Pandas提供了一系列的方法和函数,可以帮助我们进行数据的预处理。 首先,在进行数据分析之前,我们需要了解自己所面对的数据类型和数据结构。Pandas的DataFrame结构就是类似于表格的结构,每一行代表一个样本,每一列代表一个属性。Series则是一维的数组结构。通过pandas.read_csv(),我们可以读取CSV格式的数据,并转化为DataFrame结构。 接下来,我们要对数据进行一些基本的处理,例如数据清洗、数据去重、缺失值处理、异常值处理等。在数据清洗过程,我们往往需要对数据进行一些特殊的处理,例如字符串的分割、合并、替换等操作,Pandas提供了一系列能够对文本进行操作的函数。在数据去重方面,我们可以使用drop_duplicates()函数,它可以去除DataFrame的重复记录。在处理缺失值时,Pandas提供了一系列的函数,如fillna()函数、dropna()函数,可以方便地将NaN值变为其他有意义的值,或者删除缺失值的行或列。在异常值处理方面,我们可以使用isoutlier()函数来找到数据的异常值,并进行处理。 在数据预处理完成后,我们可以对数据进行一些统计分析,例如计算小计、计算总计、分位数、极差、方差、标准差等统计指标。我们可以使用describe()函数来获得数据的统计描述,还可以使用groupby()函数来对数据分组,使用agg()函数对每组进行计算统计指标。此外,我们还可以对数据进行排序、丢弃、合并等操作。 总之,Pandas是一个非常强大的Python库,可以轻松处理数据预处理和数据处理方面的任务。Pandas作为数据分析和数据处理的基础库,使用熟练后可以在数据分析发挥更大的作用。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值