python爬虫数据分析毕业论文_Python 爬虫实操,顺便做了个数据分析

【IT168 资讯】本文作者是一名地地道道的程序员,最大的乐趣就是爬各种网站。特别是在过去的一年里,为了娱乐和利润而爬掉了无数网站。从小众到主流电子商店再到新闻媒体和文学博客,通过使用简单的工具(如BeautifulSoup)获得了很多有趣且干净的数据—我也很喜欢Chrome 的Headless模式。

本文,作者将分析从Greek wine e-shop商店(一个希腊葡萄酒网站)中获得的数据,来看看哪种葡萄酒最受欢迎。

scraper本身相当简单,可以在GitHub页面(https://github.com/Florents-Tselai/greek-wines-analysis)找到。作者将着重于通过使用标准的Python包对得到的数据(1125个独特的标签)做一些快速的探索性分析。

scraper本身暴露了一个相当简单的API。首先,请求葡萄酒页面的数据,并将数据返回给nicedict,如下所示:

In [2]:

u=581887061,736875423&fm=173&app=25&f=JPG?w=640&h=44

In [3]:

u=2875076829,51300338&fm=173&app=25&f=JPG?w=640&h=42

Out[3]:

u=1534143477,832730705&fm=173&app=25&f=JPG?w=639&h=187&s=9E087023A3745C210AFCA1DE000080B3

然后,定义一些matplotlib。

In [4]:

u=3007709035,865796280&fm=173&app=25&f=JPG?w=640&h=326&s=8071CF3013524D644A7DA5DA000050B2

加载由houseofwine_gr.dump模块生成的数据转储,开发者也可以在GitHub页面找到.json,.csv和.xlsx的数据集。

In [5]:

u=4270521022,656396562&fm=173&app=25&f=JPG?w=640&h=83

以下是所拥有数据的视图:

In [6]:

u=619882718,2362404738&fm=173&app=25&f=JPG?w=640&h=42

Out[6]:

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值