爬虫
QuantCoder
这个作者很懒,什么都没留下…
展开
-
【Python爬虫】:selenium下载pdf
# -*- coding: utf-8 -*-import timeimport reimport iofrom selenium import webdriverfrom selenium.webdriver.common.action_chains import ActionChainsimport sysreload(sys)sys.setdefaultencoding("utf-8") option = webdriver.ChromeOptions()option.add_转载 2021-11-07 00:31:00 · 788 阅读 · 2 评论 -
【Python爬虫】:代理IP的使用 提升访问量
代理IP的简单应用一、代理IP获取代理IP一般有两种方式获取:1、代理网站上的免费公用IP这一步就是通过爬取大量网上的公用IP,建立一个初步的代理IP池,因为是免费的,所以很多IP都不能用,所以要做一个筛查的功能,就是通过访问指定网页,来看返回的网页状态码是否成功。2、购买私密代理12元1000个一天,每个IP平均存活时长1~5分钟Source Codeimport requests# 目标网址target_url = ['***'] # 每次只提取一个IPfor i i原创 2021-11-07 00:31:22 · 1686 阅读 · 1 评论