python3 爬取斗图啦网站的表情包图片

最新推荐文章于 2020-04-11 23:03:08 发布

李~妞思

最新推荐文章于 2020-04-11 23:03:08 发布

阅读量1.2k

点赞数 2

分类专栏： Python爬虫文章标签： python3 爬取斗图啦网站表情包

本文链接：https://blog.csdn.net/LWD_XST/article/details/89813332

版权

爬取斗图啦网的表情包

前一阵子在网易云课堂学习了一些关于爬虫的教程，现在来实践一下，当做练习。本人小白，初学编程，如有错误，望不吝告之，多谢。

本人使用的是python3.6版本，引用里的注释是为了记忆相关爬虫模块的知识，请忽略，
相关代码如下：

from urllib import request
import requests
from bs4 import BeautifulSoup
import os
from urllib.error import URLError
# from urllib.request import ProxyHandler, build_opener



headers = {
   
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/73.0.3683.103 Safari/537.36'
}

def get_imgurl_list(url):
    req = requests.get(url=url, headers=headers)
    response = req.text
    soup = BeautifulSoup(response, 'lxml')
    # 找出带有相关class的img标签
    imgurl_list = soup.find_all('img', attrs={
   'class':'img-responsive lazy image_dta'})
    return imgurl_list

def save_imgs(list):
    for img in list:
        try:
            # 获取图片的源地址
            photo_url = img['data-original']
            # 给图片命名为 .jpg 或 .gif
            filename = img['alt']