a20100997的博客

最近在学习python爬虫，想尝试爬取Weibo数据。然而时代在变化，网上的资料已经过时，基本上都无法在2021年的Weibo上正常获取数据，因此通过参考资料和自己钻研，最终走通了crawling过程。下面我会详细说明整个流程及注意事项，一方面是总结，一方面也为大家提供一个参考，希望能够帮助到大家。python版本3.9.2需要一个可以正常使用的Weibo账号及密码。需要一部能够正常使用的手机用于验证。可选网页记录工具，我这里使用的是Fiddler，大家也可以使用其他的工具，有助于理解原理。