记录下scrapy 如何和 selenium打配合
最近在练习爬mba大师的题库。
需要登入之后才能进入页面进行爬取。
原本准备做一个谷歌插件进行爬的,后面有些文档需要翻墙才能看到。放弃了。
于是在网上找到一个selenium的爬虫,模拟用户的一种方式,先研究了下。
from selenium import webdriver
import time
from selenium.webdriver.common.by import By
from selenium.webdriver.common.keys import Keys
from selenium
原创
2021-03-28 21:11:28 ·
434 阅读 ·
0 评论