【Python】百度贴吧图片的爬虫实现(努力努力再努力)

学会爬取图片以后,第一时间去了张艺兴吧,哈哈哈哈哈哈

一定要放上一张爬取的照片,哼唧

import re

import requests

import urllib

class Baidutieba():

    def __init__(self):
        self.url = "http://tieba.baidu.com/p/4876047826?pn={}"#url地址
        self.headers = {"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/66.0.3359.181 Safari/537.36"}

    def parse_url(self,url):
        response = requests.get(url,headers = self.headers)
        return response.content.decode("utf-8")

    def get_image(self,html_str):
        reg = r'src="(http://img.*?\.jpg)"'
        imgre = re.compile(reg)
        image_list = re.findall(reg, html_str)
        print(image_list)
        return image_list

    def download(self,image_list):
        x=1
        for each in image_list:
            print(x)
            print(each)
            urllib.request.urlretrieve(each,"%s.jpg"%x)
            x+=1

    def run(self):
        #1.构造url_list
        url_list = [self.url.format(i) for i in range(1,3)]#页数
        for url in url_list:
            # 2.发送请求,获取响应
            html_str = self.parse_url(url)
            #3.提取数据
            image_list = self.get_image(html_str)
            #4.下载到本地
            self.download(image_list)

if __name__ == '__main__':
    tieba = Baidutieba()
    tieba.run()

参考页面:貌似这两个都是python2的环境 

https://blog.csdn.net/qq_24421591/article/details/52596076

https://blog.csdn.net/z49434574/article/details/51552088

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值