Pandas处理日期数据的常见操作集锦

版权声明:本文为博主原创文章,遵循 CC 4.0 by-sa 版权协议,转载请附上原文出处链接和本声明。
本文链接: https://blog.csdn.net/weixin_42782150/article/details/90632688

数据读取及整理

  1. 将数据类型转换为日期类型
 df['date'] = pd.to_datetime(df['date'])

   
   
  • 1
  1. 将date设置为index
 df = df.set_index('date')

   
   
  • 1
  1. 获取某年的数据
 print(df['2010'].head())

   
   
  • 1
  1. 获取某月的数据
 print(df['2013-11'].head())

   
   
  • 1
  1. 提取全日期字段中的日期和时间项
data4["订单生成时间"] = pd.to_datetime(data4["订单生成时间"])
data4["时间"] = data4["订单生成时间"].dt.hour   #提取时间
data4["日期"] = data4["订单生成时间"].dt.date   #提取日期

   
   
  • 1
  • 2
  • 3

获取某个日期之前/后或时间区间的数据

dataframe的.truncate()函数可以截取某个时期之前或之后的数据,或者某个时间区间的数据,进行统计分析。
注意事项:
使用.truncate()函数对df进行数据集截取,遇到截取数据不符合预期,且若时间序列无序会抛出异常
解决措施:
在使用.truncate()函数对df进行数据集截取之前,需要先使用df=df.sort_values(‘date’)‘date’列按时间先后进行排序,然后使用df = df.set_index('date')将“date”设置为index,最后再使用df_last=df.truncate(after=‘2019-05-22 16:00:00’)提取指定时间节点之前的数据。
函数语法:

DataFrame.truncate(before=None, after=None, axis=None, copy=True)

   
   
  • 1

参数说明:

before:取值范围:date,string,int,是指截断此索引值之前的所有行
after:取值范围:date,string,int,是指截断此索引值后的所有行
axis:取值范围:{0或’index’,1或’columns’}(可选),是指轴截断。 默认情况截断索引(行)。
copy:取值范围:boolean,默认为True,返回截断部分的副本

常见用法:

  1. 获取2014年以后的数据
 print(df.truncate(before='2014').head())

   
   
  • 1
  1. 获取2013-11月之前的数据,用after
 print(df.truncate(after='2013-11').head())

   
   
  • 1
  1. 获取2016-02月以后的数据,用before
 print(df.truncate(before='2016-02').head())

   
   
  • 1
  1. 获取2019-05-22日16:00:00时之前的数据
 df=data.truncate(after='2019-05-22 16:00:00')

   
   
  • 1
  1. 获取指定时间区间的数据
 df=df['2016-02-2':'2016-02-10']

   
   
  • 1
  1. 获取指定时间区间的数据
 df=df['2016-02-2':'2016-02-10']

   
   
  • 1

python 获取当前时间及前一天时间

import datetime
from pandas.tseries.offsets import Day
now_time =datetime.datetime.now()#获取当前时间
yes_time = (now_time -1*Day()).strftime('%Y-%m-%d')#格式化
print(yes_time)

   
   
  • 1
  • 2
  • 3
  • 4
  • 5

pandas的日期时间间隔运算

import datetime
from datetime import timedelta
df_189[‘订单生成日期’]=pd.to_datetime(df_189[‘订单生成日期’]) #修改“订单生成时间”的数据类型
df_189[‘订单生成日期’]+timedelta(days=1) #后一天的日期
df_189[‘订单生成日期’]-timedelta(days=3) #前3天的日期

选取指定时间范围内/外的数据

   ##提取3日前日期和7日前日期
now_time =datetime.datetime.now()#获取当前时间
yes_time_7 = (now_time -7*Day()).strftime('%Y-%m-%d')#格式化
yes_time_3= (now_time-3*Day()).strftime("%Y-%m-%d")
print(yes_time_7)
print('='*50)
print(yes_time_3)
df_189['订单生成日期']=pd.to_datetime(df_189['订单生成日期'])  #修改“订单生成时间”的数据类型
df_189_7= df_189[df_189['订单生成日期']==yes_time_7]
df_189_3= df_189[df_189['订单生成日期']==yes_time_3]
print(df_189_7.info())
 #选取该错误数据对应的时间范围外的数据,多个条件时 '|'代表'或','&'代表'且'
  或者
 a= df_189[df_189['订单生成日期']=='2019-06-23']   #筛选2019-06-23的数据

   
   
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14

利用pandas计算DataFrame两列日期的间隔小时数

import pandas as pd
#方法一:
#先利用to_datetime转换为时间格式,tm列的数据形式为'yyyy-MM-dd HH:mm:ss'
df['tm_1'] = pd.to_datetime(df['tm_1'])
df['tm_2'] = pd.to_datetime(df['tm_2'])
#利用".dt.seconds"转换为秒,除以相对于的间隔数得到分钟、小时等
df['diff_time'] = (df['tm_1'] - df['tm_2']).dt.seconds/60
#利用round函数可进行四舍五入
df['diff_time'] = round(df['diff_time'])

#方法二,日期相减变为小时;变为天的话将h替换为D即可:
df[‘diff_time’] = (df[‘tm_1’] - df[‘tm_2’]).values/np.timedelta64(1, ‘h’)
#Dataframe中的时间是不能直接进行相加减的,所以需要先用pandas的to_datetime()方法,转化成时间格式进行加减,然后再转换成df格式
#delta=df1[‘Time_end’]-df1[‘Time_start’] #直接报错TypeError: unsupported operand type(s) for -: ‘str’ and ‘str’
#日期相减变为小时;变为天的话将h替换为D即可:
sf_df[‘交易周期’]=pd.DataFrame((pd.to_datetime(sf_df[‘交易完成时间’])-pd.to_datetime(sf_df[‘订单生成时间’])).values/np.timedelta64(1,‘h’))

  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
                                </div>
            <link href="https://csdnimg.cn/release/phoenix/mdeditor/markdown_views-e44c3c0e64.css" rel="stylesheet">
                </div>
  • 0
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: 可以使用pandas库读取csv文件并进行数据处理。使用pandas.read_csv()函数可以读取csv文件并将其存储在pandas DataFrame中。例如: ``` import pandas as pd data = pd.read_csv("data.csv") ``` 读取完csv文件后,可以使用DataFrame的各种函数进行数据处理,如筛选、排序、统计等。最后使用to_csv函数存储到新的csv文件中 ``` data.to_csv("new_data.csv",index=False) ``` ### 回答2: Python pandas是一个数据处理库,其灵活的数据结构和数据分析能力使得它在数据处理和分析领域中受到广泛关注。其中的CSV(Comma Separated Value,逗号分隔值)文件也是广泛使用的一种数据格式。 要使用pandas处理CSV文件,需要先安装pandas库。在安装好pandas库之后,可以使用read_csv()函数将CSV文件读取到pandas的DataFrame对象中进行处理。read_csv()函数有各种不同的参数选项,用于读取不同格式的CSV文件。 常见的CSV文件可以包含各种数据类型,包括字符串、整数、浮点数、日期等。pandas可以使用不同的数据类型来自动识别每一列的数据类型,也可以手动指定每一列的数据类型,从而更好地处理数据pandas提供了一些函数来对数据进行操作,例如dropna()函数可以删除包含缺失值的行或列,fillna()函数可以用指定值填充缺失值,groupby()函数可以将数据按照指定的列进行分组。 另外,pandas还可以将数据保存到CSV文件中,使用to_csv()函数可以将DataFrame对象写入到CSV文件中,并且可以指定文件的格式和各种参数。to_csv()函数可以保存到本地文件,也可以保存到在线存储库或数据库中。 总之,pandas是一个非常强大和灵活的数据处理库,可以方便地处理各种数据类型,包括CSV文件。使用pandas可以提高数据处理和分析的效率,并且具有较好的可读性和可维护性。 ### 回答3: Python pandas是一个开源数据分析库,它提供了丰富的数据结构和函数,可以高效地处理大规模数据,并提供方便的数据分析工具,如数据过滤、排序、分组、汇总、时序数据处理等。其中,pandas的CSV数据处理功能极为强大,让我们能够轻松地读取和处理CSV数据。 CSV(Comma Separated Values)是一种常见数据格式,通常由逗号分隔不同字段。pandas提供了read_csv()函数,可以读取CSV文件,并将其转换为pandas DataFrame对象,方便数据分析和处理。下面是一个简单的读取CSV文件的代码示例: ``` import pandas as pd data = pd.read_csv('data.csv') print(data.head()) ``` 在读取CSV文件时,我们可以通过可选参数设置一些读取选项,例如分隔符、数据类型、缺失值表示方式等。例如,将分隔符设置为制表符: ``` data = pd.read_csv('data.csv', delimiter='\t') ``` 读取CSV数据后,我们可以使用pandas DataFrame对象的各种函数进行数据分析和处理。例如,使用head()函数显示前若干行数据: ``` print(data.head(10)) ``` 使用describe()函数汇总数据的各种统计信息: ``` print(data.describe()) ``` 使用groupby()函数按照某个字段分组,并进行统计: ``` grouped_data = data.groupby('category').sum() print(grouped_data) ``` pandas还提供了to_csv()函数,可以将处理后的数据保存为CSV文件,便于后续处理和分析。 总之,pandas是一款强大的数据处理工具,对于需要处理大规模的CSV数据的工作来说,是一个非常实用的工具。合理利用pandas中的CSV数据处理功能,我们能够更轻松地处理和分析数据,提高工作效率。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值