python selenium采集速卖通_大写牛批，用Python登录国内主流24个网站

爬虫脚本是大家经常用到的，那就避开不了登录 这一关。

使用Python一般需要request库，补充 header 中的 post 要素，有些还会有 隐藏的 hidden 参数，可以通过浏览器 F12 或者元素审查来发现，对于初学者来说都是一个坑。

还有需要解决验证码的问题，一种方法是下载验证码图片识别验证码再次post，或者使用云打码平台。当然，有些验证码及其变态就不那么容易解决了，比如选字顺序、滑块、12306那种人为都会选错的。

本篇boy哥分享一个GitHub项目《awesome-python-login-model》，主要就是利用Python解决登录主流平台的，包含24个主流平台，目前在GitHub上已经表星11.8k了。

Github链接：https://github.com/Kr1s77/awesome-python-login-model

▍已完成的主流网站

上面是作者已经完成的一些主流网站了，其中有的是通过 selenium登录，有的是通过 抓包直接模拟登录，有的是利用 scrapy框架。

这个很容易理解，因为有的网站设计比较复杂，通过抓包很难实现模拟登录，这样用 selenium+webdriver 就会相对轻松一些。

虽然在登录的时候采用的是selenium，为了效率，我们可以在登录过后得到的cookie维护起来，然后调用requests或者scrapy等进行数据采集，这样数据采集的速度可以得到保证。

模拟登录GitHub

这里boy哥给大家展示一个模拟登录GitHub的代码。

相信这对初学爬虫的朋友是一个很好的教程。

但提示一下，模拟登录的代码随时都有可能失效，因为前端的网页HTML、CSS、JS等结构可能会根据公司业务调整之类的发生变化。

所以，重点是掌握了各种技巧，学会这些完全可以自己调试完成登录，那时候你也可以成为 contributor 了！

---

小编这里整理了一套Python入门基础教程，如何你打算学Python，或者已经在学Python的小伙伴，下面这些资料我相信应该非常适合你。

获取方式私信发送【资料】即可免费领取

Python入门视频教程目录截图

Python自动化办公教程(超级详细)

Python入门电子书