python爬虫
匆匆四月
咸鱼一枚,努力学习称为新一代老咸鱼hhh
展开
-
selenium 选项卡问题(弹出新页面无法定位到新的页面)
如题,当我使用selenium操作打开一个新的选项卡的时候(如下图),无法从当前所处的页面定位到新的页面上(如下图,打开了新的页面,但再次发起请求时只能在百度的页面上跳转到淘宝页面) from selenium import webdriver import time browser=webdriver.Chrome() browser.get('https://www.baidu.com...原创 2018-08-07 10:59:30 · 9216 阅读 · 1 评论 -
python3+seleium+chrome headless+mongodb 爬取淘宝产品实例(仅代码+结果)
学习书籍:《python3 网络爬虫开发实践》 视频地址:实例视频 1.main.py import re from pyquery import PyQuery as pq from selenium import webdriver from selenium.common.exceptions import TimeoutException from selenium.webdrive...原创 2018-08-07 17:20:07 · 634 阅读 · 0 评论 -
初识scrapy-利用scrapy爬漫画
一、前言 隔了许久终于再次开始更新,此次是由于开始学习scrapy,想用着来爬漫画,跟着别人的博客学习了一下,中途也遇到了许多坑,因此记录一下 参考:主参考博客、scrapy demo、scrapy1.0文档 说明:原博客写于2年前,我跟着走的时候遇到了一些坑,会尽可能地记录,并对原博客没涉及到的东西进行说明 目标漫画:kuku动漫-转生史莱姆日记 我们知道,有时候一些小的动漫网站充满广告,而...原创 2018-11-24 10:53:31 · 1379 阅读 · 1 评论