用python抓取网页的图片

最新推荐文章于 2021-07-30 20:48:46 发布
最新推荐文章于 2021-07-30 20:48:46 发布
阅读量3.4k 收藏 8
点赞数 6
分类专栏： 笔记 python 爬虫 文章标签： python 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lmachi/article/details/106051849
版权
本文介绍了如何使用Python抓取网页上的图片。首先确保安装了Python并配置好环境，创建一个用于存储图片的文件夹，编写getimages.py脚本，并在CMD中运行此脚本来下载图片。如果需要抓取多页，可以通过循环实现，动态更改URL中的页码，即可批量抓取多页图片。
摘要由CSDN通过智能技术生成

python抓取数据

想要做数据分析师就要知道如何将网页上的数据获取。
比如我要去获取http://pic.netbian.com/4kdongman/index_2.html这个网页里所有的图片。

  1. 首先电脑里应该先有安装python和配置好python的环境变量。
  2. 然后我要先建一个文件夹，用来存我抓取到的图片，这个文件夹要建在和我要写python代码的py文件同一个目录里。

在这里插入图片描述

  1. 然后将代码写到我建好的getimages.py中并保存。
 #导入模块
import requests

#找网址
url='http://pic.netbian.com/4kdongman/index_2.html'

res =requests.get(url)

res.encoding='gbk'

from bs4 import BeautifulSoup

html=BeautifulSoup(res.text,'html.parser')

#检查 找到图片所在的列表，并找到列表的类名
parent=html.find('ul',class_='clearfix')
#找到列表中的图片
images=parent.find_all('img')

from urllib import request
for each in images:
最低0.47元/天 解锁文章
@马驰
关注
  • 6
    点赞
  • 踩
  • 8
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
专栏目录
python 爬虫之抓取页面图片
04-18
利用python抓取网站界面中的图片，亲测可用，不同的网站只需修改抓取规则即可
python 抓取网页中所有图片
11-04
python代码抓取网页中所有图片,用于网页中抓取所有图片信息。
python爬虫 抓取页面图片
07-30
python爬虫 抓取页面图片python爬虫 抓取页面图片python爬虫 抓取页面图片
python 爬虫得到网页的图片
weixin_30914981的博客
10-02 165
import urllib.request,os import re # 获取html 中的内容 def getHtml(url): page=urllib.request.urlopen(url) html=page.read() return html path='本地存储位置' # 保存路径 def saveFi...
用Python抓取网页上的图片
NPC27149的博客
03-02 1121
试玩Python 目标：下载某个网页上的图片，保存到本地文件 工具：Python3.6和 Python2.7 一、试运行 一开始安装的是Python3.6版本 配置环境变量，在Path路径上加入Python的路径，然后在控制台输入Python -v，出现版本即可 在IDLE编辑器上输入简单的程序试试 1、先新建一个文件 2、然后在编辑框里输入 pr
python-抓取页面的图片
yws1050731369的专栏
06-16 227
# Author:MG #! /usr/bin/env python # -*-coding:utf-8-*- from bs4 import BeautifulSoup import requests,time,urllib.request,os heard ={"User-Agent":"Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/
python抓取网页中图片并保存到本地
12-24
在上篇文章给大家分享PHP源码批量抓取远程网页图片并保存到本地的实现方法，感兴趣的朋友可以点击了解详情。 #-*-coding:utf-8-*- import os import uuid import urllib2 import cookielib '''获取文件后缀名''' ...
python抓取网页中链接的静态图片
09-20
总的来说，Python抓取网页中链接的静态图片涉及到的关键技术包括HTTP请求、HTML解析和文件操作。`BeautifulSoup`负责解析HTML并定位到图片元素，`urllib.request`处理网络请求和响应，而文件操作则确保图片数据能被...
python抓取网页图片示例(python爬虫)
12-25
复制代码 代码如下:#-*- encoding: utf-8 -*-”’Created on 2014-4-24 @author: Leon Wong”’ import urllib2import urllibimport reimport timeimport osimport uuid #获取二级页面urldef findUrl2(html): ...<!...
python抓取网页图片
09-02
以上就是Python抓取网页图片的核心知识点。在实际应用中，可能还需要考虑其他因素，比如反爬策略、多线程/异步处理提高效率、图片质量优化等。在`reptile`这个文件或项目中，很可能包含了实现这些功能的代码。通过...
python网络爬取图片
08-03
python网络爬取图片demo，直接右键运行就可以。
python 抓取一个网站所有图片并保存
07-27
python 抓取一个网站所有图片并保存
python抓取网页图片并放到指定文件夹
12-23
python抓取网站图片并放到指定文件夹 复制代码 代码如下:# -*- coding=utf-8 -*-import urllib2import urllibimport socketimport osimport redef Docment(): print u’把文件存在E:\Python\图（请输入数字或字母）...
Python抓取网页图片
丘丰寿
03-01 430
#coding=utf-8 import urllib import re def getHtml(url):     page = urllib.urlopen(url)     html = page.read()     return html def getImg(html):     reg = r'src="(.+?\.jpg)" pic_ext'  
Python3抓取页面图片
Abigale1900的专栏
03-17 478
 import urllib import urllib.request import re def getHtml(url):     page=urllib.request.urlopen(url)     html=page.read()     return html def getImg(html):     html=html.decode('utf-8')  
python爬取网页图片
蔡三石的博客
07-30 1913
python爬取网页图片 爬取数据一般分为三步： 爬取网页信息 解析爬取来的数据 保存数据 找到自己想要爬取的网页，找到user-agent 代码实现 首先导入需要用到的包 from bs4 import BeautifulSoup #网页解析，获取数据 import re #正则表达式，进行文字匹配 import urllib.request,urllib.error #制定URL，获取网页数据 import xlwt #进行excel操作 import s
python抓取网站图片_python抓取图片示例 python抓取网页上图片
weixin_39805644的博客
11-23 188
python抓取网页上图片这个错误时是什么意思 下面是代码 import re import urllib.request imp正则表达式匹配的url有错误 for x in add: print x # 这里可以看到报错的时候是 url 错误 dirpath = os.path.join('C:\\Users\\lilinan\\Desktop\\新建文件夹','%s.jpg' % t) ur...
python网页图片抓取_Python爬虫学习笔记一：简单网页图片抓取
weixin_34329874的博客
02-10 213
利用python抓取网络图片的步骤是：1、根据给定的网址获取网页源代码2、利用正则表达式把源代码中的图片地址过滤出来3、根据过滤出来的图片地址下载网络图片以下是比较简单的一个抓取某一个百度贴吧网页的图片的实现：# -*- coding: utf-8 -*-# feimengjuanimport reimport urllibimport urllib2#抓取网页图片#根据给定的网址来获取网页详细信...
Python抓取网页图片代码
最新发布
06-14
在Python中，我们可以使用一些库来抓取网页上的图片。其中最常用的是`requests`库用于发送HTTP请求获取网页内容，`BeautifulSoup`库解析HTML结构，然后利用`os`和`urllib`来下载图片。以下是一个简单的例子： ```python import requests from bs4 import BeautifulSoup import os def download_images(url): # 发送GET请求 response = requests.get(url) # 使用BeautifulSoup解析HTML soup = BeautifulSoup(response.text, 'html.parser') # 查找所有的img标签（图片链接） img_tags = soup.find_all('img') # 确定图片保存路径（这里假设是当前目录下的images子目录） img_dir = "images" if not os.path.exists(img_dir): os.makedirs(img_dir) # 下载图片并保存 for img in img_tags: img_url = img.get('src') or img.get('data-src') # 处理常见的src和data-src属性 if img_url: img_response = requests.get(img_url, stream=True) with open(os.path.join(img_dir, os.path.basename(img_url)), 'wb') as f: for chunk in img_response.iter_content(1024): f.write(chunk) # 使用函数 download_images("http://example.com") # 替换为你想要抓取的网页URL
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值