Pandas versus Excel 笔记2

创建序列
数据区域的读取
自动填充
列操作和函数计算
排序筛选

一、创建序列

series可以表示excel的行、列
创建方式：
1.利用字典，key转为index,value转为data
2.利用列表

"方式1"
s1=pd.Series()#生成一个序列,可以表示行和列
d={'x':100,'y':200,'z':300}
s1=pd.Series(d)#将字典转化为序列
print(s1)
"方式2"
L1=[100,200,300]
L2=['x','y','z']
s1=pd.Series(L1,index=L2)#生成一个序列,可以表示行和列
#或者
s1=pd.Series([100,200,300],index=['x','y','z'])

将序列添加到dataframe

import pandas as pd
s1=pd.Series([1,2,3],index=[1,2,3],name='A')
s2=pd.Series([10,20,30],index=[1,2,3],name='B')
s3=pd.Series([100,200,300],index=[1,2,3],name='C')
df=pd.DataFrame({s1.name:s1,s2.name:s2,s3.name:s3})
df

直接创建dataframe

二、数据区域的读取

此时操作的excel

import pandas as pd
import xlrd
books=pd.read_excel('E:/ruanjianDM/people.xlsx',skiprows=3,usecols='C:I')#跳过前三行，C到I列
books['ID'].at[0]=100 #books['ID'].at[index]   指定了列和行
books

三、自动填充

简单填充

"1.填充1-n数字"
for i in books.index:
    books['ID'].at[i]=i+1 #将上面的ID变成从1开始
"2.填充有规律的字符串"
#直接填充会出错，设置Instore为str类型
books=pd.read_excel('E:/ruanjianDM/people.xlsx',skiprows=3,usecols='C:L',dtype={'ID':str,'Instore':str,'Date':str})
for i in books.index:
    books['Instore'].at[i]="Yes" if i%2==0 else "No"
books.head()

填充日期序列

date函数：date(2018,1,1)，date(年，月，日)
timedelta(day=i)只有day，只能加日期，分钟，毫秒，小时，没有month，year

books.rename(columns={"Data":"Date"},inplace=True)#重新设置列名
from datetime import date,timedelta
start=date(2018,1,1)
for i in books.index:
    books['Date'].at[i]=start+timedelta(days=i)#是在start的基础上依次增减1天，2天，3天....
#增加一天
books.head()

四、列操作和函数计算

Excel中操作是一个单元格，在pandas中的操作是一列
特殊情况：不想从头计算，计算其中的某几行

from numpy import random  as nr
books.Prince=nr.rand(books.shape[0],1)
print(books.head())
for i in range(1,3):#左闭右开区间，取不到16
    books['Prince'].at[i]=books['Prince'].at[i]*books['ID'].at[i]
def add_2(x):
    return x+2
books['ID']=books['ID'].apply(add_2)#只写函数名，没有括号,ID列加2
print(books.head())

五、排序

"单个条件排序"
#books.sort_values(by='Prince',inplace=True)#默认是升序
books.sort_values(by='Prince',ascending=False,inplace=True)
books.head()
"多重条件排序,两个条件综合考虑得到排序结果，不会打乱原有的行对应关系"
books.sort_values(by=['ID','Prince'],ascending=[False,True],inplace=True)
books.head()

六、筛选过滤

两个筛选条件的语句可以理解为a=books.loc[books[‘ID’].apply(ID_3_to_6)]先筛选得到表的一部分a，这个一部分a在进行筛选
a.loc[books[‘Prince’].apply(Prince)]

"定义筛选函数"
def ID_3_to_6(a):
    return 3<=a<6
def Prince(s):
    return 2<=s<=5
    
books.loc[books['ID'].apply(ID_3_to_6)]#满足条件的返回TRUE,Loc根据true定位一行并打印

books.loc[books['ID'].apply(ID_3_to_6)].loc[books['Prince'].apply(Prince)]#两个筛选条件