爬虫
最正经的上班族
这个作者很懒,什么都没留下…
展开
-
selenium解决新弹出的标签页和对话框(警告框)
用selenium操作网页时,拿webdriver,get url地址进入目的页面弹出了一个新标签或者对话框,如何模拟点击。 1.新的标签页 如果是打开多个网页。首先打开网页1,再点击网页1上一个链接,在新窗口打开新网页2,同理点击新网页2上一个链接,新窗口打开新网页3等等,这是按打开顺序为网页编号。实际网页对应句柄如下图所示,即第一个打开网页一直是句柄0,而最新打开的网页记为句柄1,依次序编...原创 2020-03-16 10:14:44 · 1458 阅读 · 9 评论 -
scrapy学习笔记(杂1)
Scrapy 流程: 模块功能: 处理大型爬虫中来自不同的网站的数据: 首先定义不同的爬虫Spider1,spider2,spider3…不同爬虫中具有自身属性 class TestSpider(scrapy.Spider): name = 'test' allowed_domains = ['test.com'...原创 2020-03-16 09:58:43 · 190 阅读 · 0 评论