pandas 读取任意范围数据数据且不用全量加载内存

pandas 读取指定范围数据,避免全部加载内存

主要参数

header:  指定列名文件

skiprows :指定 哪些行可以跳过,可以是范围 例如 range(10,100)

nrows :指定总共加载多少行数据

应用场景1:

pandas 读取大文件,开发进行调试

import pandas as pd
# 只读取 100行
row_num = 100
df =pd.read_csv(infile,header=0,nrows=row_num)

应用场景2

pandas 读取制定范围的数据,例如 读取 10到100行

import pandas as pd
# 读取(10,100+10)范围数据
start = 10
row_num = 100
df =pd.read_csv(infile,header=0,skiprows=start,nrows=row_num)

应用场景3

pandas 读取指定范围数据,且保留第一行的列名 

import pandas as pd
# 读取(10,100+10)范围数据,且保留原始列名
start = 10
row_num = 100
df =pd.read_csv(infile,header=0,skiprows=range(1,start+1),nrows=row_num)

  • 3
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值