【python爬虫】中小学人教版教材下载实践

最新推荐文章于 2024-08-25 19:46:18 发布

鸣山乎

最新推荐文章于 2024-08-25 19:46:18 发布

阅读量1.2k

点赞数 1

分类专栏： python爬虫文章标签： python

本文链接：https://blog.csdn.net/qq_36654479/article/details/104732131

版权

参考： https://www.52pojie.cn/forum.php?mod=viewthread&tid=1112067

中小学人教版教材pdf来源：https://bp.pep.com.cn/jc/index.html

代码运行环境

# 运行环境 Anaconda pycharm python3
# python 包下载 
pip install Beautifulsoup4 tqdm lxml

Anaconda环境配置

代码

#!/usr/bin/env python3
# encoding: utf-8

import requests, bs4
from tqdm import tqdm
import winreg

# 获取文件名称和下载地址
def get_soup(url):
    r = requests.get(url)
    r.encoding = 'utf-8'  # 用utf-8解码文档
    rt = r.text
    soup = bs4.BeautifulSoup(rt, 'lxml')
    return soup

# 创建文件夹
def mkdir(path):
    # 引入模块
    i