requests用parsel解析爬取网络表情包

通过PyCharm,利用requests和parsel库成功解析并爬取网络表情包,从此不再愁找不到表情。每天学习进步,今天是打卡的第61天,对python大数据感兴趣的伙伴们欢迎交流讨论。
摘要由CSDN通过智能技术生成
import requests
import parsel
import time
import os



start = time.time()        # 记录程序开始时间
# 判断文件是否存在
if not os.path.exists('./image'):
    # 创建文件
    os.mkdir('./image')

url = "https://fabiaoqing.com/biaoqing/lists/page/{0}.html"
headers = {
    "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/98.0.4758.102 Safari/537.36"
}
count = 0        # 记录爬取图片数量
for i in range(1,6):
    url_i = url.format(i)        # 遍历多页url
    response = requests.get(url=url_i,headers=headers).text    # 请求数据
    sel = parsel.Selector(response)        # 解析
    divs = sel.css(".tagbqppdiv")          # 提取数据
    for div in divs:
        title = div.css("img.ui.image.lazy::attr(title)").get()    # 提取文件名
        img_url = div.css("img.ui.image.lazy::attr(data-original)").get()    # 提取图片url
        suffix = img_u
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值