python学习——pandas基础操作

Series类

series是以为表格,每个元素带有标签且有下标,兼具列表和字典的访问形式

1 创建

In [13]: import pandas as pd

In [14]: pd.Series(data=[80,90,100],index=['语文','数学','英语'])
Out[14]:
语文     80
数学     90
英语    100
dtype: int64

2 查找与切片

a = pd.Series(data=[80,90,100],index=['语文','数学','英语'])
In [20]: a
Out[20]:
语文     80
数学     90
英语    100
dtype: int64

In [21]: a[0]
Out[21]: 80

In [22]: a['语文']
Out[22]: 80

In [23]: a[0:2]
Out[23]:
语文    80
数学    90

In [25]: a[0:2]['语文']
Out[25]: 80

In [26]: a.index
Out[26]: Index(['语文', '数学', '英语'], dtype='object')

3 增加删除

#增加元素
In [27]: a['体育']=60

In [28]: a
Out[28]:
语文     80
数学     90
英语    100
体育     60
dtype: int64

#删除元素
In [29]: a.pop('体育')
Out[29]: 60

In [30]: a
Out[30]:
语文     80
数学     90
英语    100
dtype: int64

4 数学运算

In [33]: a
Out[33]:
语文     80
数学     90
英语    100
dtype: int64

In [34]: a.sum()
Out[34]: 270

In [35]: a.max()
Out[35]: 100

In [36]: a.min()
Out[36]: 80

In [37]: a.mean()
Out[37]: 90.0

In [38]: a.median()
Out[38]: 90.0

#输出下标
In [39]: a.idxmax()
Out[39]: '英语'

In [40]: a.idxmin()
Out[40]: '语文'

DataFrame类

1 构造和访问

In [41]: scores = [['男',108,115,97],['女',115,87,105],['女',100,60,130],^M
    ...:             ['男',112,80,50]]^M
    ...: names = ['刘一哥','王二姐','张三妹','李四弟']^M
    ...: courses = ['性别','语文','数学','英语']^M
    ...:

In [42]: df = pd.DataFrame(data=scores,index = names,columns = courses)^M
    ...:

In [43]: df
Out[43]:
    性别   语文   数学   英语
刘一哥  男  108  115   97
王二姐  女  115   87  105
张三妹  女  100   60  130
李四弟  男  112   80   50

In [49]: df.values
Out[49]:
array([['男', 108, 115, 97],
       ['女', 115, 87, 105],
       ['女', 100, 60, 130],
       ['男', 112, 80, 50]], dtype=object)
 
 #访问行
 In [53]: df.loc['王二姐']
Out[53]:
性别      女
语文    115
数学     87
英语    105
Name: 王二姐, dtype: object
#访问列
In [51]: df['语文']
Out[51]:
刘一哥    108
王二姐    115
张三妹    100
李四弟    112
Name: 语文, dtype: int64

2 切片

#1行切片
#1.1iloc[行选择器, 列选择器]		用下标做切片
In [55]: df.iloc[1:3]
Out[55]:
    性别   语文  数学   英语
王二姐  女  115  87  105
张三妹  女  100  60  130
#1.2 #loc[行选择器, 列选择器]		用标签做切片

In [57]: df.loc['王二姐':'张三妹']
Out[57]:
    性别   语文  数学   英语
王二姐  女  115  87  105
张三妹  女  100  60  130

#列切片
In [59]: df.loc[:,'性别':'数学']
Out[59]:
    性别   语文   数学
刘一哥  男  108  115
王二姐  女  115   87
张三妹  女  100   60
李四弟  男  112   80
In [60]: df.iloc[:,1:3]
Out[60]:
      语文   数学
刘一哥  108  115
王二姐  115   87
张三妹  100   60
李四弟  112   80

3 分析统计

#转置
In [61]: df.T
Out[61]:
    刘一哥  王二姐  张三妹  李四弟
性别    男    女    女    男
语文  108  115  100  112
数学  115   87   60   80
英语   97  105  130   50
#按语文成绩降序排列
In [62]: df.sort_values('语文',ascending=False)
Out[62]:
    性别   语文   数学   英语
王二姐  女  115   87  105
李四弟  男  112   80   50
刘一哥  男  108  115   97
张三妹  女  100   60  130

print(df.sum()['语文'],df.mean()['数学'],df.median()['英语']) 
#>>435 85.5 101.0  语文分数之和、数学平均分、英语中位数
print(df.min()['语文'],df.max()['数学'])  
#>>100 115   语文最低分,数学最高分
print(df.max(axis = 1)['王二姐'])	#>>115 王二姐的最高分科目的分数
print(df['语文'].idxmax()) 	#>>王二姐	语文最高分所在行的标签


#打印出语文>100且数学>85的所有行
In [63]: print(df.loc[(df['语文'] > 100) & (df['数学'] >= 85)]) ^M
    ...:
    性别   语文   数学   英语
刘一哥  男  108  115   97
王二姐  女  115   87  105

4 增删和修改

  • 增加和修改
print("---下面是DataFrame的增删和修改---")
df.loc['王二姐','英语'] = df.iloc[0,1] = 150 #修改王二姐英语和刘一哥语文成绩
df['物理'] = [80,70,90,100]		#为所有人添加物理成绩这一列

df.insert(1,"体育",[89,77,76,45]) 		#为所有人插入体育成绩到第1列
In [65]: df
Out[65]:
    性别  体育   语文   数学   英语
刘一哥  男  89  108  115   97
王二姐  女  77  115   87  105
张三妹  女  76  100   60  130
李四弟  男  45  112   80   50

df.loc['李四弟'] = ['男',100,100,100,100,100] #修改李四弟全部信息
df.loc[:,'语文'] = [20,20,20,20]			#修改所有人语文成绩
df.loc['钱五叔'] =  ['男',100,100,100,100,100] 	#加一行
df.loc[:,'英语'] += 10					#>>所有人英语加10分
df.columns = ['性别','体育','语文','数学','English','物理'] #改列标签

In [70]: df.columns=['性别','体育','语文','数学','Engilsh']

In [71]: df
Out[71]:
    性别  体育   语文   数学  Engilsh
刘一哥  男  89  108  115       97
王二姐  女  77  115   87      105
张三妹  女  76  100   60      130
李四弟  男  45  112   80       50
  • 删除
df.drop( ['体育','物理'],axis=1, inplace=True) #删除体育和物理成绩
df.drop( '王二姐',axis = 0, inplace=True)      #删除 王二姐那一行
df.drop([df.index[i] for i in range(1,3)],axis=0,inplace = True) 
#删除第1,2行
df.drop([df.columns[i] for i in range(3)],axis = 1,inplace = True) #删除第0到2列

5 文件操作

在这里插入图片描述

  • pd.read_excel 读取文档
dt = pd.read_excel("excel_sample.xlsx",sheet_name=['销售情况',1],
		   index_col=0)#读取第0和第1张工作表,设置索引为第0列
df = dt['销售情况']		#dt是字典,df是DataFrame
print(df.iloc[0,0],df.loc['睡袋','数量']) 	#>>4080 4080
print(pd.isnull(df.loc['彩盒','销售额']))	#>>True
df.fillna(0,inplace=True)			#将所有NaNa用0替换
print(df.loc['彩盒','销售额'],df.iloc[2,2])	#>>0.0 0.0
  • df.to_excel(filename,sheet_name=“sheet1”,na_rep=‘’…)写入文档
writer = pd.ExcelWriter("new.xlsx")		#创建ExcelWriter对象
df.to_excel(writer,sheet_name="S1")
df.T.to_excel(writer,sheet_name="S2")		#转置矩阵写入
df.sort_values('销售额',ascending= False).to_excel(writer,
                                              sheet_name="S3")
#按销售额排序的新DataFrame写入工作表S3
df['销售额'].to_excel(writer,sheet_name="S4") 	#只写入一列
writer.save()

分组求和

在这里插入图片描述

df3 = df2.groupby(['产品类别'])[['数量','销售额','成本']].sum()

在这里插入图片描述

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: Pandas是一个Python库,用于数据处理和分析。在数据分析中,预处理是非常重要的一步,因为它可以帮助我们清洗和转换数据,使其更适合进行分析。Pandas提供了一些强大的预处理功能,包括数据清洗、数据转换、数据重塑和数据合并等。在使用Pandas进行数据分析时,预处理是必不可少的一步。 ### 回答2: 在数据分析中,数据的预处理是一个必要的过程。它的主要目的是清洗数据,准备数据,以便后续分析。在Python中,pandas是一种广泛使用的数据处理库。pandas可以通过其高效的数据结构和操作方法来清洗和处理数据。在本文中,将介绍pandas预处理的一些常见技术。 一、读取数据 在pandas中,使用read_csv()函数读取CSV格式的数据文件,read_excel()函数读取Excel格式的数据文件。它们都有很多选项,可以根据具体文件的格式进行设置。 二、查看数据 在pandas中,使用以下函数来查看数据: 1. head() - 显示数据框的前几行; 2. tail() - 显示数据框的后几行; 3. columns - 显示数据框的列名; 4. shape - 显示数据框的行列数; 5. info() - 显示数据框的基本信息,包括每列的名称、非空值数量和数据类型。 三、数据清洗 在数据清洗中,有以下一些常见的技术: 1. 删除重复行:使用drop_duplicates()函数; 2. 替换空值:使用fillna()函数; 3. 删除空值:使用dropna()函数; 4. 更改数据类型:使用astype()函数。 四、数据准备 在数据准备中,有以下一些常见的技术: 1. 数据合并:使用merge()函数; 2. 数据筛选:使用loc()函数或者iloc()函数; 3. 数据分组:使用groupby()函数; 4. 数据排序:使用sort_values()函数。 五、数据分析 在数据分析中,有以下一些常见的技术: 1. 数据聚合:使用agg()函数; 2. 统计描述:使用describe()函数; 3. 数据可视化:使用matplotlib或者seaborn库。 综上所述,pandas预处理是数据分析中必不可少的一步。通过使用pandas提供的函数和方法,可以方便地清理和处理数据,使其更容易被分析。 ### 回答3: PandasPython中最强大的数据处理库之一,它提供了DataFrame和Series这两种数据结构,可以快速便捷地处理数据。在数据分析过程中,我们往往需要先对数据进行预处理,以便后续的分析。Pandas提供了一系列的方法和函数,可以帮助我们进行数据的预处理。 首先,在进行数据分析之前,我们需要了解自己所面对的数据类型和数据结构。Pandas中的DataFrame结构就是类似于表格的结构,每一行代表一个样本,每一列代表一个属性。Series则是一维的数组结构。通过pandas.read_csv(),我们可以读取CSV格式的数据,并转化为DataFrame结构。 接下来,我们要对数据进行一些基本的处理,例如数据清洗、数据去重、缺失值处理、异常值处理等。在数据清洗过程中,我们往往需要对数据进行一些特殊的处理,例如字符串的分割、合并、替换等操作Pandas提供了一系列能够对文本进行操作的函数。在数据去重方面,我们可以使用drop_duplicates()函数,它可以去除DataFrame中的重复记录。在处理缺失值时,Pandas提供了一系列的函数,如fillna()函数、dropna()函数,可以方便地将NaN值变为其他有意义的值,或者删除缺失值的行或列。在异常值处理方面,我们可以使用isoutlier()函数来找到数据中的异常值,并进行处理。 在数据预处理完成后,我们可以对数据进行一些统计分析,例如计算小计、计算计、分位数、极差、方差、标准差等统计指标。我们可以使用describe()函数来获得数据的统计描述,还可以使用groupby()函数来对数据分组,使用agg()函数对每组进行计算统计指标。此外,我们还可以对数据进行排序、丢弃、合并等操作之,Pandas是一个非常强大的Python库,可以轻松处理数据预处理和数据处理方面的任务。Pandas作为数据分析和数据处理的基础库,使用熟练后可以在数据分析中发挥更大的作用。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值