GitHub出了一款爬虫神器!还给出了详细教程!

本文介绍了GitHub上的开源库gopup,它提供了丰富的数据分析数据,包括微博、百度、头条指数等。作者提供了详细的教程和中文文档,教用户如何获取和使用这些数据,如百度指数、汽油柴油调价信息以及影视数据。gopup的使用需要js补丁,并且部分功能需在Ubuntu环境下运行。
摘要由CSDN通过智能技术生成

点上方蓝色“菜鸟学Python”,选“星标”公众号

重磅干货,第一时间送到

对于做爬虫和数据分析方向的小伙伴来说,对于数据的获取是十分重要的,尤其是关于大数据分析的数据,非常难以获取,最近小编在浏览Github时,就发现了一个宝库——gopup。是由一个国内的大神开源的python库,该库包含了大量的大数据分析相关的数据,一起来看看吧。

01.神器GoPup

项目的地址为:https://github.com/justinzm/gopup。该库所采集的数据都是公开的数据源,作者也指出了通过该库所获取的数据主要目的是用于学术的研究。

该项目所涉及到的数据库包含了微博指数数据、百度指数数据、头条指数数据、新经济公司、生活数据、疫情数据等信息。

可以看到,上述的数据中,都包含了大量的大数据分析数据,可以通过该项目库直接获取来使用。gopup的安装也十分的便捷,在终端运行pip install gopup即可安装。

02.如何使用

接下来,我们通过程序来看一下如何使用gopup来获取数据。首先来看一下,百度指数的数据获取,程序和结果如下图所示:

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值