点上方蓝色“菜鸟学Python”,选“星标”公众号
重磅干货,第一时间送到
对于做爬虫和数据分析方向的小伙伴来说,对于数据的获取是十分重要的,尤其是关于大数据分析的数据,非常难以获取,最近小编在浏览Github时,就发现了一个宝库——gopup。是由一个国内的大神开源的python库,该库包含了大量的大数据分析相关的数据,一起来看看吧。
01.神器GoPup
项目的地址为:https://github.com/justinzm/gopup。该库所采集的数据都是公开的数据源,作者也指出了通过该库所获取的数据主要目的是用于学术的研究。
该项目所涉及到的数据库包含了微博指数数据、百度指数数据、头条指数数据、新经济公司、生活数据、疫情数据等信息。
可以看到,上述的数据中,都包含了大量的大数据分析数据,可以通过该项目库直接获取来使用。gopup的安装也十分的便捷,在终端运行pip install gopup
即可安装。
02.如何使用
接下来,我们通过程序来看一下如何使用gopup来获取数据。首先来看一下,百度指数的数据获取,程序和结果如下图所示: