爬虫-urllib爬取单张图片的两种方式

最新推荐文章于 2022-03-28 16:47:59 发布
最新推荐文章于 2022-03-28 16:47:59 发布
阅读量552 收藏 2
点赞数
分类专栏： python爬虫
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44737646/article/details/102614699
版权
本文介绍了使用Python的urllib库爬取并保存图片的两种方法。方式一包括复制图片URL，设置伪装请求头，然后发送请求保存图片。方式二则直接通过图片URL获取并保存图片。
摘要由CSDN通过智能技术生成

方式一

1.复制一个图片地址
在这里插入图片描述
2/伪装请求头
在这里插入图片描述

3.发送图片,保存图片
在这里插入图片描述

import urllib.request

# 伪装请求头
headers = {
   
    "User-Agent":
    "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/77.0.3865.90 Safari/537.36"
}
最低0.47元/天 解锁文章
five-four-one
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Python爬虫-获取懂车帝“指定车型”的销量数据
Python进阶专栏《爬虫实战进阶》，《数据分析入门与实战》原创作者
07-09 404
本文是该专栏的第33篇，后面会持续分享python爬虫干货知识。在本专栏之前，笔者有详细介绍关于懂车平台的相关爬虫。对此，感兴趣的同学可以点击翻阅查看。而在本文中，笔者将要介绍的是懂车平台另外一种采集需求——获取“指定车型”的销量数据。具体实现思路和详细逻辑，笔者将在正文结合完整代码进行详细介绍。废话不多说，跟着笔者直接往下看正文详细内容。（附带完整代码）
如何用python实现爬虫自动爬取百度图片原图
我的大学
01-04 1万+
说点什么 其实一直以来，对于python这个语言还是很感兴趣的，但是以前一直在做图像处理相关的东西，所以对这种无法触及底层内存处理的语言一直没怎么关注过，不过最近实在是被C++的字符串处理和复杂芜杂的网络框架给整崩溃了，而且看到大家都说python很好玩，就趁着最近没事来学一下python。 昨天跟着廖雪峰老师的python教程（比较推荐它的基础教程），看了看基本的数据结构和逻辑之后，决定还是直接...
urllib爬取图片
houyujie123的博客
05-05 1764
使用python中urllib模块实现简单的图片爬取： 代码： import urllib.request import re import os def open_url(url): req = urllib.request.Request(url) req.add_header('Referer','http://fanyi.youdao.com/?keyfrom=dict2...
python爬虫爬取图片代码_Python爬虫入门：批量爬取网上图片的两种简单实现方式——基于urllib与requests...
weixin_39833290的博客
11-21 2409
Python到底多强大，绝对超乎菜鸟们（当然也包括我了）的想象。近期我接触到了爬虫，被小小地震撼一下。总体的感觉就两个词——“强大”和“有趣”。今天就跟大家分享一下两个简易的爬虫案例，大牛们请飞过哈。先来科普一下啊“爬虫技术”吧。网络爬虫（又被称为网页蜘蛛，网络机器人，网页追逐者），是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫...
爬虫--爬取单张图片
weixin_56147264的博客
03-21 1226
二.安装所需库 1.在终端中输入pip install requests 2.安装lxml 三.创建images目录 四.创建一个python文件 五.爬取图片 (1).导入所需库 (2).定义网页 (3).模拟发送请求，获取网页内容 ...
Python使用urllib工具抓取图片
panda_225400的博客
11-03 693
文章目录前言一、urllib是什么？二、使用步骤1.引入库2.解析数据3.出现问题总结 前言 使用urllib.urlretrieve(url,filename)时经常遇到下载到一半时，出现urllib.ContentTooShortError错误。为什么呢 一、urllib是什么？ Urllib是python内置的HTTP请求库 包括以下模块 urllib.request 请求模块 urllib.error 异常处理模块 urllib.parse url解析模块 urllib.robotparser
爬虫初步，爬取单张图片
qq_61660518的博客
03-21 1127
https://pic.netbian.com/tupian/18853.html 1.在谷歌浏览器中复制此网站，鼠标指向图片后右键点击“检查”（F12） 实现步骤 （一）创建Python项目 （二）安装所需模块 1.安装requests库 在终端执行命令pipinstallrequests 2.安装lxml库 在终端执行命令pip install lxml （三）创建保存下载图片的目录 创建Python程序-爬取单张图片.py 1.导入...
Python爬虫练习笔记——爬取单个网页里的所有图片（入门）
热门推荐
sinat_34937826的博客
04-14 1万+
最近闲着，想学一下爬虫 先从简单的练习开始吧~ 爬取单个网页里的所有图片，这个没有什么难点，因为不需要翻页哈哈哈哈 我很喜欢一些文章中的配图，比如这篇，里面就会有很多电影中的经典截图 第一步：分析网页 1.首先我们要了解要爬取网站的页面，查看网页源代码。 2.其次要想好代码的步骤和思路。 #获取主页面源代码 #获取章节超链接 #获取小说内容 #下载小说 import requests impor...
爬虫(17)多线程练习 图片爬取案例
m0_46738467的博客
02-01 916
文章目录爬虫(17)多线程练习 图片爬取案例1. 多线程练习2. 王者荣耀案例思路分析2.1 第一种方法：直接在Previews里面找2.2 第二种方法：通过json.cn网站解析 爬虫(17)多线程练习 图片爬取案例 1. 多线程练习 我们对多线程的特点进行一下解释： 进程：系统中正在运行的应用程序。 单核的cpu一次只能执行一个进程，其他的进程处于非运行状态。多软件打开的时候，cpu在快速切换，由于速度之快，我们感受不到切换。 多核的cpu可以同时执行多个进程。 线程：进程中包含的执行单元。 一个进程可
python利用urllib实现爬取京东网站商品图片的爬虫实例
09-21
下面小编就为大家带来一篇python利用urllib实现爬取京东网站商品图片的爬虫实例。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧
python网络爬虫抓取图片
02-05
利用python抓取网络图片的步骤： 1.根据给定的网址获取网页源代码 2.利用正则表达式把源代码中的图片地址过滤出来 3.根据过滤出来的图片地址下载网络图片
urllib库爬取网站图片
ajc_zh的博客
03-06 321
千图网：http://www.58pic.com 首先分析网页结构： 第一页：http://www.58pic.com/haibaomoban/0/id-0.html 第二页：http://www.58pic.com/haibaomoban/0/id-1.html … 对每页的图片缩略图分析： 缩略图：http://pic. qiant ucdn. com/58pic/23/35/02/53n58...
urllibrequest爬虫，爬取彼岸图片
末影的博客
10-03 210
import urllib.request from bs4 import BeautifulSoup def index(page): if page == 1: url = 'https://pic.netbian.com/index.html' else: url = "https://pic.netbian.com/index_{}.html".format(page) # url = 'https://pic.netbian.com/...
python_urllib入门爬取图片
m0_46525584的博客
12-09 586
有感而发几篇博客： "While we teach we learn " 欢迎提问！ 会改文件目录的，能直接run----2021.12.09 ''' 2021-12-09 1.框架结构 .0头信息使用了用户代理（未使用ip代理） .1爬取主页获得图片大类类别名称，并写入5.天堂图片网url爬取(目录).txt .2根据拿出的名称获得其下的图片小类类别名称及url，并追加写入6.天堂图片网url爬取(分目录).txt .3 ''' import time from urllib import reque
通过urllib来利用URL获取图片并保存
SueMagic
07-10 2033
通过urllib来利用URL获取图片并保存.
网络爬虫：爬取单张图片
nasid的博客
03-28 563
一、新建数据库，并在终端安装所需库。 (1).新建python项目。 (2).在终端中输入pip installrequests和pip install lxml。 二、创建存放图片的目录和py文件。 三、爬取图片。 (1).导入库并定义网页地址。 (2).定义headers。 (3).发送模拟请求，获取网页内容。 (4)规则爬取的数据。 分析网页：包含图像标签的<a>的id属性值为img。 利用xpath搜索id...
爬虫 ------爬取网页的图片
Roxannekkk的博客
09-14 1352
借鉴： 添加链接描述 基于小甲鱼视屏的代码修改:（图片的网址经过了base64加密，因此需要解密才能正常使用）： 一般的网页，图片与下一个图片之间，在地址上提现出来就是数字的变化： 第一张的网址为： 而下一张是： 而视屏中的页面对网址用了base64加密 这里的MjAyMDA4MDktMTIx其实就是加密信息： 利用解码可知即是20200809-121 而 121 查看网页的信息：就是当前的第几张图片 获取当前日期的代码： import datetime time = datetime.datet
专题07-python使用urllib.request爬取图片
livan1234的博客
02-14 2529
笔者是一个痴迷于挖掘数据中的价值的学习人，希望在平日的工作学习中，挖掘数据的价值，找寻数据的秘密，笔者认为，数据的价值不仅仅只体现在企业中，个人也可以体会到数据的魅力，用技术力量探索行为密码，让大数据助跑每一个人，欢迎直筒们关注我的公众号，大家一起讨论数据中的那些有趣的事情。 我的公众号为：livandata python在爬虫方面的应用非常灵活，几乎可以解决大部分数据获取问题，笔者在之前...
python爬虫urllib爬取网站
最新发布
08-17
使用urllib库进行网站爬取是一种简单而基础的方法。下面是一个使用urllib进行网站爬取的示例代码： ```python import urllib.request # 指定要爬取的网址 url = 'http://example.com' try: # 发送请求并获取响应 response = urllib.request.urlopen(url) # 读取响应内容 html = response.read() # 打印网页内容 print(html) except urllib.error.URLError as e: # 处理异常情况 print(e.reason) ``` 以上代码中，我们首先使用`urlopen()`方法发送HTTP请求并获取响应对象。然后，可以使用`read()`方法读取响应内容，并对其进行处理，如打印网页内容。 请注意，这只是一个最简单的示例，可能无法处理一些复杂的情况。在实际的网站爬取中，您可能需要处理URL编码、请求头、Cookie等问题，以及解析和提取所需的数据。如果您有更具体的爬取需求或问题，请告诉我，我将尽力帮助您。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值