实用小技巧-----解决从Github上获取.csv文件

在无法直接下载GitHub上的csv文件时,通过复制内容到Excel并导出为CSV,发现存在每行末尾多余逗号导致的空数据。通过编写Python脚本删除' '前的逗号,解决了这一问题。此方法适用于处理类似问题。
摘要由CSDN通过智能技术生成

由于最近学习需要,要在github上获取原始数据。但下载通道给堵死了,试着改了虚拟IP地址等方法都没有用,于是尝试出了一个半自动的小方法。

问题叙述

  1. 找到需要的资源地址。以该项目为例:https://github.com/jakevdp/data-USstates
    常规的链接下载方法失效,采用最原始的方法:复制粘贴。
    将复制后的内容放到Excel表格中,再导出逗号分隔符(CSV)文件
  2. 该文件顺序并没有想象中的完美,如果直接逐行读取(以其中一个文件为例),结果如下:在这里插入图片描述
    后面产生了一行我们不需要的空数据,用记事本打开该.csv文件,发现问题在于:

在这里插入图片描述
每一行的后面多了一个逗号。因此为了去掉每一行最后的空数据,可编写一个小脚本。

解决办法

  • 首先观察数据
new=[]
for line in lines:
    if line.endswith(',\n'):
        tmp=line
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值