python爬取高清动图

本教程介绍如何使用Python3.8和Pycharm进行高清动图的爬取。首先讲解了Pycharm的下载与配置,包括添加Python环境和第三方库如requests和lxml。接着详细说明了如何从特定网站抓取图片,通过替换URL中的字符串获取高清图。最后,展示了如何实现多页面的图片下载。
摘要由CSDN通过智能技术生成

使用Pycharm以及pytnon3.8进行开发

接下来具体讲述如何使用python进行图片的爬取以及存储。

1.开发环境的配置

下载pycharm以及配置pycharm

  1. 下载pycharm(链接: link.)
  2. 安装完成后对pycharm进行设置
    打开设置打开设置
    选择Add添加python运行环境添加python运行环境
    选择python版本
    添加第三方库文件
    添加第三方库文件
  3. 第三方库主要有requests,time,lxml;后面会用到
    **ps:**如果无法正常添加则需要添加国内镜像库地址
    清华:https://pypi.tuna.tsinghua.edu.cn/simple
    阿里云:http://mirrors.aliyun.com/pypi/simple/
    中国科技大学 https://pypi.mirrors.ustc.edu.cn/simple/
    华中理工大学:http://pypi.hustunique.com/
    山东理工大学:http://pypi.sdutlinux.org/
    豆瓣:http://pypi.douban.com/simple/
    添加方法如下在上述步骤之后点击Manage Repositories
    添加国内镜像源

2.功能实现

1.爬取的网站为https://www.haha.mx/topic/1/new/
首选我们需要添加一个响应头文件,可以通过F12进行查看
查看请求头
定义一个请求头文件

// An highlighted block
headers = {
   
    'User-Agent'
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值