提前声明:该专栏涉及的所有案例均为学习使用,如有侵权,请联系本人删帖!
文章目录
一、前言
我们在抓取一些web页面的时候,有时候会遇到反爬,比如js加密,那么如果我们不破解js加密的情况下,我们就可以使用selenium+一些浏览器驱动(例如Chrome驱动)的自动化技术,它可以自动化的操作浏览器,并且获取模拟浏览器上的内容。当然这个方式容易被一些大型网站发现,并且速度较慢。
二、selenium知识
https://blog.csdn.net/qq_40558166/article/details/102868626
三、网站分析
网址:
aHR0cHM6Ly9keS5mZWlndWEuY24v
那么我们先自己登录一下这个网站
流程:
点击右上角注册登录——切换为手机登录——输入账号密码(需要提前注册)——点击同意协议——点击确定
当我们进去后的目标就