python爬虫爬取自考平台的学习资料，自考本科，用爬虫爬取学习资料案例，python辅助学习

爱python的小白兔

于 2021-12-28 14:52:14 发布

阅读量6.7k

点赞数

文章标签： python 爬虫数据挖掘

本文链接：https://blog.csdn.net/m0_55234643/article/details/122193359

版权

本文介绍了一个使用Python爬虫技术来快速爬取自考平台学习资料的案例，旨在帮助自考本科的学生提高资料浏览效率。虽然代码仍有提升空间，但已能有效辅助学习。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

#这个爬虫非常的好，加入你有一个自考的心态，这个代码可以帮助你爬取学习资料，大大的加快了你的浏览速率，代码还有待提升，


def zikao():
    # 爬取湖北省自考考生服务平台的东西---这个可以无限量的爬取
    import requests, re
    from bs4 import BeautifulSoup
    for i in range(0, 2):
        link = 'https://www.hbzkw.com/test.aspx?MessageType=&page=' + str(i)
        headers = {
            'user-agent': 'Mzilla/5.0'
        }
        r = requests.get(link, headers=headers)
        r.encoding = ('utf-8')
        soup = BeautifulSoup(r.text, "html.parser")

        '''html=etree.HTML(soup.text)
        title_list=html.xpath('//ul[@class="tg_list time_list clearfix"]//text()')
        print(title_list)'''
        # print(soup.a.['href'])
        first_title = soup.find_all("ul", class_='tg_list time_list clearfix')
        print(

最低0.47元/天解锁文章