Chrome插件小实例--定时刷新当前页面
最近工作上有一个需要每天爬取某个网站登录之后的页面信息,但是网站有一定的反爬机制,无法使用python模拟用户名登录,每次都是页面登录后复制cookie到代码中模拟登录信息进行数据爬取.这么做的缺点就是每天进行数据抓取前,必须先打开浏览器登录–F12打开控制台–找到请求的cookie-- 复制并粘贴到代码中.如果浏览器能保持用户登录状态,那么就不用每天换cookie,直接运行爬虫代码就好了!1. 准备工具1 :一台不关机的电脑(我的是阿里云),用于保持用户的登录状态2 :开发一个chrome插件,
原创
2021-01-29 22:20:27 ·
3319 阅读 ·
0 评论