本文介绍如何使用Python进行微博奔驰事件的评论爬取。通过Pycharm和Python3.6.4，作者抓取了移动端微博的评论数据，分析了动态加载的评论页面，发现了评论链接的构建规则，并提出了解析评论内容和处理超链接的方法。着重讨论了一级评论的获取策略，指出评论翻页并非简单地增加页码，而是依赖于上一页评论的特定id来构造新页面。
Python微博奔驰事件爬虫
工具：Pycharm，Win10，Python3.6.4
最近奔驰漏油事件成为大家讨论的热点，也频上热搜。我就来做了一下微博评论爬虫，看看大家对这件事情的看法。
微博移动端相对好爬一些，且评论数据差不多，所以我们主要是针对微博移动端进行信息采集。
我们打开网址看到如下信息
评论量还是挺多的，所以我们要先获取该微博的链接，然后通过该微博去获取评论页。可以看到微博是动态加载的，你不断往下翻就会有新的微博内容出现，此时我们应该考虑是动态加载
可以看到每次会产生10条微博数据，我们要获取这10条数据中的idstr去构造每条微博的详情链接。
最低0.47元/天 解锁文章
959
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
