python批量采集美女图片数据~这不得看一下

最新推荐文章于 2024-08-10 19:38:49 发布

魔王不会哭

最新推荐文章于 2024-08-10 19:38:49 发布

阅读量753

点赞数 1

分类专栏： python 爬虫文章标签： python 计算机网络编程语言

本文链接：https://blog.csdn.net/python56123/article/details/124066016

版权

前言

嗨喽！大家好呀，这里是魔王~
在这里插入图片描述

“”"
目标网站：
内容：图片
“”"
在这里插入图片描述

# 分金定穴 --- 分析网站
# 数据加载:
#    静态加载
#    动态加载 json
#  -关键字
#  -页码
import json
import urllib.parse
import requests  # 网络请求库   pip
import jsonpath  # json数据解析库

import threading

#设置最大线程锁
thread_lock = threading.BoundedSemaphore(value=20)



# 1. 通过url获取json数据


def get_page(url):
    resp = requests.get(url)
    page = resp.content.decode('utf-8')  # 防止乱码

    return