python百度、必应、搜狗根据关键字爬取图片

最新推荐文章于 2023-12-03 23:53:42 发布

北屿白

最新推荐文章于 2023-12-03 23:53:42 发布

阅读量638

点赞数

分类专栏： Python应用

本文链接：https://blog.csdn.net/weixin_45875199/article/details/107177727

版权

Python应用专栏收录该内容

10 篇文章 1 订阅

订阅专栏

百度、搜狗、必应爬取图片
直接运行crawler_img.py。然后根据自己需要下载图片。

import os
import requests
from baidu_img import baidu_pic_url
from sougou_img import sougou_pic_url
from biying_img import biying_pic_url

class Crawler():
    def __init__(self, num, keyword, engine):
        self.num = num
        self.keyword = keyword
        self.engine = engine

    def down_img(self):
        if self.engine == 'baidu':
            pic_url = baidu_pic_url(self.num, self.keyword)
        elif self.engine == 'sougou':
            pic_url = sougou_pic_url(self.num, self.keyword)
        elif self.engine == 'biying':
            pic_url = biying_pic_url(self.num, self.keyword)
        else:
            print('错误的搜索引擎，请重新运行，输入：baidu、sougou、biying')

        if os.path.exists('G:/datalabel/SOUGOU/' + self.engine + '/' + self.keyword):
            pass
        else:
            os.makedirs('G:/datalabel/SOUGOU/' + self.engine + '/' + self.keyword)

        path = 'G:/datalabel/SOUGOU/' + self.engine + '/'
        for index, i in enumerate(pic_url):
            try:
                filename = path + self.keyword + '/' + str(index) + '.jpg'
                print(filename)
                with open(filename, 'wb+') as f:
                    f.write(requests.get(i).content)
            except:
                continue

if __name__ == '__main__':
    keyword = str(input('请搜索关键词：（如：美女）'))
    num = int(input('请输入爬取图片数目：'))
    engine = str(input('请输入：baidu, sougou, biying其中之一'))
    crawler = Crawler(num, keyword, engine)
    crawler.down_img()