数据分析之Pandas-02多层次化索引和拼接

01-Pandas层次化索引

创建多层索引

1.隐式构造
Series也可以创建多层索引

df = DataFrame(np.random.rand(4,2),
               index=[['a','a','b','b'],[1,2,1,2]],
              columns=['data1','data2'])
df

2.显示构造(Multilndex)
- pd.MultiIndex.from_arrays
- pd.MultiIndex.from_tuples
- pd.MultiIndex.from_product

多层索引

除了行索引index,列索引columns也能用同样的方法创建多层索引

多层索引对象的索引与切片操作

Series的操作:

【重要】对于Series来说,直接中括号[]与使用.loc()完全一样,因此,推荐使用中括号索引和切片

DataFrame的操作:

  1. 可以直接使用列名称来进行列索引.
  2. 使用行索引需要用ix(),loc()等函数
    【极其重要】推荐使用loc()函数.
  3. 注意在对行索引的时候,若一级行索引还有多个,对二级行索引会遇到问题!也就是说,无法直接对二级索引进行索引,必须让二级索引变成一级索引后才能对其进行索引!

索引的堆(unstack)

【小技巧】使用unstack()的时候,level等于哪一个,哪一个就消失,出现在列里

聚合操作

【注意】
需要指定level
【小技巧】和unstack()相反,聚合的时候,level等于哪一个,哪一个就保留

02-Pandas拼接操作

级联

使用pd.concat()级联

简单级联:

df1 = make_df('AB',[1,2])
df2 = make_df('AB',[3,4])
display(df1,df2,pd.concat([df1,df2]))

不匹配级联:

不匹配指的是级联的维度的索引不一致。例如纵向级联时列索引不一致,横向级联时行索引不一致

使用pd.appnd() 级联:

由于在后面级联的使用非常普遍,因此有一个函数append专门用于在后面添加

合并

使用pd.merge()合并
1. 一对一合并
1. 多对一合并
1. 多对多合并
1. key的规范化
- 使用on=显式指定哪一列为key
- 使用left_on和right_on指定左右两边的列作为key
1. 内合并和外合并
- 内合并:只保留两者都有的key(默认模式)
- 外合并 how=’outer’:补NaN
- 左合并、右合并:how=’left’,how=’right’
1. 列的冲突解决
- 当列冲突时,即有多个列名称相同时,需要使用on=来指定哪一个列作为key

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Pandas提供了多种数据拼接的方法,包括concat、merge和join等。以下是它们的简单介绍: 1. concat方法:将多个数据集按照某个轴方向进行简单堆叠。它可以按照行方向(axis=0)或列方向(axis=1)进行拼接。concat方法的语法如下: ``` pd.concat(objs, axis=0, join='outer', join_axes=None, ignore_index=False, keys=None, levels=None, names=None, verify_integrity=False, copy=True) ``` 其中,objs是需要拼接的数据集序列,axis是拼接方向,join是拼接方式,ignore_index表示是否忽略原始索引,keys是拼接后的层次索引的键。 2. merge方法:将两个数据集按照某个共同的列(或多个列)进行合并。merge方法的语法如下: ``` pd.merge(left, right, how='inner', on=None, left_on=None, right_on=None, left_index=False, right_index=False, sort=True, suffixes=('_x', '_y'), copy=True, indicator=False, validate=None) ``` 其中,left和right是需要合并的两个数据集,how表示合并方式(inner、outer、left、right),on表示共同列名,left_on和right_on表示左右数据集中需要合并的不同列名,suffixes是当两个数据集中存在相同列名时自动加上的后缀。 3. join方法:将两个数据集按照共同的索引进行合并。join方法的语法如下: ``` left.join(right, how='left', lsuffix='', rsuffix='', sort=False) ``` 其中,left和right是需要合并的两个数据集,how表示合并方式(left、right、inner、outer),lsuffix和rsuffix表示当两个数据集中存在相同列名时自动加上的后缀。 需要注意的是,这些方法都是根据特定的规则来进行拼接的,因此在使用时需要根据实际情况选择合适的方法和参数。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值