python爬取有妖气漫画

最新推荐文章于 2024-09-24 15:01:55 发布
最新推荐文章于 2024-09-24 15:01:55 发布
阅读量1.7w 收藏 1
点赞数
分类专栏： 爬虫 文章标签： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42418452/article/details/106759481
版权
本文介绍了如何利用Python的Selenium库爬取有妖气漫画网站上的动态加载图片。由于原始请求无法直接获取图片，作者通过分析浏览器信息发现图片由JS动态生成。解决方案包括安装Selenium和PhantomJS，将PhantomJS添加到环境变量，并成功爬取到像素化的图片。
摘要由CSDN通过智能技术生成

爬取URL=https://www.u17.com/chapter/26636.html#image_id=221085
爬取有妖气漫画，本人谷歌浏览器获取到的信息：
位置selector：#cur_img_221085
属性位置：tc > comic_read_img 盒子下

开始爬取

url='https://www.u17.com/chapter/26636.html#image_id=221085'
resp=requests.get(url)
print(resp.text)

发现并没有img图片，重新摸索浏览器信息，在加载HTML页面是JS部分声明img列表；由此可判断该部分img图片由js动态生成。
原因：requests爬取静态HTML文内容

最低0.47元/天 解锁文章
 lOsEr
关注
专栏目录
18comic
03-10
18漫画
2021-07-16
qq_52895917的博客
07-16 2万+
import io import sys import urllib.request as req import bs4 import re import PIL.Image import time import random from PIL import Image import urllib import os import requests from fake_useragent import UserAgent from multiprocessing import Pool import mu
探索漫画世界的新宝藏：18漫画资源文件下载
最新发布
gitblog_09811的博客
09-24 1348
探索漫画世界的新宝藏：18漫画资源文件下载 18漫画资源文件下载 18漫画资源文件下载本仓库提供了一个名为“18漫画”的资源文件下载 项目地址: https://gitcode.com/open-source-toolkit/a9...
因提供18禁动漫，毒害未成年人，国内最大动漫网站被重罚
热门推荐
欢迎关注公众号：【码农突围】，公号后台回复9999，可以获取一份500页的LeetCode刷题笔记。
04-06 120万+
作为二次元 动漫迷们必备的在线观看漫画工具，那么“动漫之家”肯定是每个人必入坑之一，毕竟它的上线时间也是于2005年的时候。 最早一批的动漫网站，很早二次元喜欢的人，就在里面进行打卡分享番在这网站里的，也有业余大佬汉化组为网站发电提供内容！ 主要吧之前市场的管理制度不算严格，所有漫画没有按照进行审核删减，都是各种类型的漫画因有尽有，然而随后人们版权意识提高，所以各种盗版以及内容是否符合核心价值观也是人们所聊到的话题！ 网上能依稀看到2013年央视点名批评进击巨人，除了点名批评外，在2015年6月8日。
手把手教你搭建一个漫画小说网站？（有斗罗大陆和斗破苍穹漫画的福利哦）
lianzhang861的博客
01-12 2万+
由于《斗罗大陆》和《斗破苍穹》动漫的热播，让我深深沉迷其中，因为动画更新的太慢了，搞得我只能去找小说，找漫画去过瘾，来来回回也刷了不少遍了。 在这个过程中，由于热爱，我甚至把他们的漫画全都下载了下来，想随时随地的看，啊哈哈哈哈哈哈哈哈嗝 然后下载下来图片，在电脑上一张一张翻着看并不方便，所以便萌生了自己搭建一个小说网站的想法，真正的在手机上随时随地的看。 如何搭建一个漫画小说网站？ PS：小说和漫画都有版权，本文主要交流技术，请勿用做商用盈利 ...
Python爬虫----爬取腾讯动漫全站漫画
hjmscanf的博客
04-05 2548
目标网站：https://ac.qq.com/ 实现功能：下载全部漫画到本地文件夹中 实现代码： import requests from lxml import etree from selenium import webdriver from time import sleep from bs4 import BeautifulSoup from selenium.webdriver.chro...
python爬取淘宝商品价格
07-26
Python爬取淘宝商品价格的功能描述如下： 用户输入要查询的淘宝商品名称或关键字。 使用Python的requests库向淘宝网发送GET请求，带上用户输入的关键字作为参数，获取搜索结果页面的HTML内容。 使用BeautifulSoup库...
python爬取微博关键词搜索博文
03-17
python爬取微博关键词搜索博文，只需要修改cookie和url参数
Python爬取今日头条热门文章
01-10
Python脚本文件，使用Python爬取今日头条指定专栏分类的热门文章，并将文章保存到MySQL数据库中 实现今日头条热门文章数据爬取
python爬取携程网评论.zip
11-10
在本项目中，我们主要探讨的是使用Python编程语言进行网络数据爬取，特别是针对携程网上的用户评论。这个过程涉及到的技术主要包括Python的requests库用于发送HTTP请求，BeautifulSoup库用于解析HTML页面，以及可能...
comic_downloader_v0.1.1.exe
06-18
在学习python过程中，写了一个在线漫画自动下载工具，用于收藏自己喜爱的漫画！仅供学习交流使用。有问题可以访问github
python爬取下载有妖气漫画网站免费漫画
weixin_42478037的博客
02-10 10万+
首先获取所有免费漫画的信息 进入开发者模式，由于漫画是采取异步访问的方式，我们直接点击XHR，查看里面的list，可以获得所有漫画的信息 我们尝试在网页访问里面的Headers里面的URL， 得到 显然，网页采取了反爬虫机制，这边我们要设置代理，伪装成浏览器去访问，这边要添加一些头部信息 代码如下： headers = { "Request Method": "POST",...
基于Html+Css+javascript的动漫网站
weixin_46820017的博客
01-17 2万+
1.前端三门技术 学习Web前端技术需要掌握三门基本技术：HTML，CSS，JavaScript： HTML：HTML是网页内容的载体。内容就是网页制作者放在页面上想要用户浏览的信息，可以包含文件、图片、视频等 CSS：CSS样式是表现，就像网页的外衣比字体、颜色变化等 JavaScript：JavaScript用来实现网页上的特效效果。比如鼠标滑过弹出下拉菜单、鼠标滑过北京颜色改变等 本次项目主要是介绍海贼王主题的简介，使用html+css+javascript来制作网站，实现项目的效果； index.h
Haec fortis sequitur illam indocti possident: A linguistic analysis of demonstratives in genres【翻译】
hongfu951的专栏
02-21 893
Acknowledgments I am forever indebted to the ceaseless effort of my advisor, Dr. Eric Acton, who accepted me as an advisee though I had never been his student and had, in fact, not been anyone's stude...
python为在线漫画网站自制非官方API(未完待续)
阿友的专栏
07-04 1万+
接下来将记录我一步一步写一个非官方API的过程，因为一些条件的约束，最后的成品可能很粗暴简陋 现在介绍要准备的所有工具： 系统：ubuntu 14.04 语言：python 2.7 需要自行安装的库：flask，BeautifulSoup４，requests，selenium，pinyin，phantomjs-1.9.8 服务器：Sina App Engine 因为成本原因我选择了Si
动画动漫网址集锦持续更新
crystalNB的专栏
07-13 1万+
http://abowman.com/google-modules/ http://www.xiao-i.com/index.aspx http://comic.qq.com/a/20120321/000020.htm#p=41
python 爬取漫画
08-26
你可以使用Python来爬取漫画。首先，你需要安装一个相关的库，比如`requests`用于发送HTTP请求，`BeautifulSoup`用于解析HTML页面。然后，你可以通过发送HTTP请求获取漫画网站的页面内容，并使用BeautifulSoup解析页面，提取出你所需要的漫画图片链接。最后，你可以使用Python的文件操作功能将图片保存到本地。 以下是一个简单的示例代码： ```python import requests from bs4 import BeautifulSoup # 漫画网页的URL url = 'http://example.com/manga' # 发送HTTP请求获取网页内容 response = requests.get(url) html = response.text # 使用BeautifulSoup解析页面 soup = BeautifulSoup(html, 'html.parser') # 提取漫画图片链接 image_urls = [] for img in soup.find_all('img'): image_urls.append(img['src']) # 下载并保存漫画图片 for i, image_url in enumerate(image_urls): response = requests.get(image_url) with open(f'comic_{i}.jpg', 'wb') as f: f.write(response.content) print('漫画下载完成！') ``` 请注意，这只是一个简单的示例代码，实际情况可能会更复杂。具体的实现方式会根据不同的漫画网站而有所不同，你需要根据具体网站的结构和特点进行相应的调整。另外，请遵守相关网站的使用规则和法律法规。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值