小编从新闻上了解到。截至目前,7月全国累计报告新增本土确诊病例328例,接近此前5个月总和。
已有14个省份报告新增本土确诊病例或无症状感染者。
并且这两天“此次疫情会大规模暴发吗”也登上了微博热搜,引起了众多网友们的关注。
我们今天就来使用爬虫来分析一下1.2亿网友们是如何看待此次大规模爆发的疫情的。
目标确定
所以我们今天就把10000个网友的微博评论使用爬虫下载下来,看看大家都说了些什么?
需求分析
我们要获取的数据如有微博评论下的
用户id、用户名称、用户座右铭、发帖时间和发帖内容。
首先我们F12打开浏览器开发者模式:
目标url如下:
https://m.weibo.cn/comments/hotflow?id=4665088419561949&mid=4665088419561949&max_id_type=0
为防止被反爬,我们还需添加headers模拟浏览器发送请求
我们用浏览器打开链接,发现这是一个标准的json格式的数据集,
我们所要的数据都在这个json数据里面
所以第一步,先模拟浏览器获取这个json格式的数据集。