关于python中读取数据的相关知识

   最近在学习python,小白一个,希望自己有所进步。

目标是读取一个5个G的数据,分布很有规律,无限长的矩阵(直到现在我都不知道他具体有多少行),有五列,依次是用户,开始时间,结束时间,基站ID,使用的流量。最初的目标是读出一部分的数据,我采用的方法是按行输出,输出1500000行,用时20秒

下一步是对数据进行抽取和整理,第一步是找到基站ID为1的数据。

import pandas as pd
shixiong=pd.read_table('C:\Xixi\zkr\data\Traffic_OneWeek\CellularTraffic_OneWeek',sep='\s+',names=['user','start','stop','baseID','flow'])#sep是对空格进行识别
a=shixiong[shixiong['baseID']==1]
print(a)
a.to_csv('C:\Xixi\zkr\datain11\out14.csv',na_rep='NULL')

这个代码的意思就是对baseID是1的数据整个提取出来,并且生成新的表格。

下一步对生成的表格进行处理,对每一秒内的用户数量进行统计,并且计算出总共的流量和。

 

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值