- 博客(6)
- 收藏
- 关注
RSS订阅原创 爬虫高级篇，教你如何抓取接口
爬虫高级篇，教你如何抓取接口今天要爬取目标网站是极简壁纸，先放张图，这就是我们要爬取的首页，由于网站禁止了右击—>检查，F12,选择Elemets,随便定位一张图片试试，可以看到，这是缩略图，而我们要爬取的是高清原图，去Network查看，发现返回的html并没有我们想要图片数据<div class="view-body" :class="{'view-body-classify':config.page.active == 'classify'}">
2020-10-29 01:47:17
18802
9
原创 python爬取4k高清壁纸（多线程版）
刚学了多线程，于是把上次写的博客拿出来进行改写，原文链接：python爬取4k高清壁纸（再也不怕没有壁纸了）爬取过程已经在上一次写过了，可以点击原文链接查看。废话不多说，直接上多线程代码：import requestsfrom lxml import etreefrom queue import Queueimport threadingimport osheaders = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64
2020-06-28 22:24:25
879
1
原创 python爬取妹子图(小白也能看懂)
我今天发现一个网站很好爬的，非常适合新手，我没有设置请求头什么的爬了很多遍很没有封我ip和给我返回403之类的，所以他对我们第一次玩爬虫的人来说很友好。这个网站就是(手动滑稽)。废话不多说，直接上代码：import requestsfrom lxml import etreeimport reimport os# 定制请求头headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit
2020-06-24 09:26:13
2110
原创 python爬取4k高清壁纸（再也不怕没有壁纸了）
今天突然想换壁纸，在网上找了一圈没有找到满意的，正好学了爬虫，于是我就想把它们全都爬取下来，慢慢挑选。这次爬取的目标是：彼岸图网动漫壁纸接下来，我将详细讲解爬取过程：首先点开网站，右键–检查 观察源码信息：可以发现图片地址就是网站的域名加上上面的地址，接下来就是敲代码的事了。观察可以发现图片总共134页：但为了保证代码实用性，因为今天134页，明天就有可能135，甚至136页，所以首先提取壁纸页数，代码如下：# 启始url url = 'http://pic.netbian.c
2020-06-23 23:10:12
3517
5
原创 Python(二) pip 的安装与使用教程
pip 是 Python 包管理工具，该工具提供了对Python 包的查找、下载、安装、卸载的功能。目前如果你在 python官网（www.python.org）上 下载最新版本的安装包，则是已经自带了该工具。Python 2.7.9 + 或 Python 3.4+ 以上版本都自带 pip 工具。在安装pip前，请确认你的系统中已经安装好了python，如果还没有安装好python可以查看我的...
2020-06-18 22:32:05
584
原创 Python(一)python安装+环境配置(小白最详细安装教程)
在学习python前首先要安装好解释器，下面我会介绍不同操作系统下python解释器的安装一、下载Pythonpython官网：https://www.python.org/downloads/下载和你操作系统一致的python解释器，这里我一python3.7.0为例。二、安装Python(一).在windows下安装python这里记得勾选安装并添加到PAHT ,下一步。一直默认就可以安装完成检测是否安装好python可以打开cmd命令行输入 python 回车，如果出现以下以下界面，即
2020-06-18 21:02:25
13484
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人