python判断对错题_Python爬虫自动化获取华图和粉笔网站的错题(推荐)

这篇博客对于考公人或者其他用华图或者粉笔做题的人比较友好，通过输入网址可以自动化获取华图以及粉笔练习的错题。

粉笔网站

我们从做过的题目组中获取错题

打开某一次做题组，我们首先进行抓包看看数据在哪里

我们发现现在数据已经被隐藏，事实上数据在这两个包中：

https://tiku.fenbi.com/api/xingce/questions

https://tiku.fenbi.com/api/xingce/solutions

一个为题目的一个为解析的。此url要通过传入一个题目组参数才能获取到当前题目数据，而题目组参数在这个包中

以网址的倒数第二个数字串有关

url的规则为'https://tiku.fenbi.com/api/xingce/exercises/'+str(id_)+'?app=web&kav=12&version=3.0.0.0'，id_即为下划线数字

通过请求这个包获取到参数然后通过参数请求上面两个包(

https://tiku.fenbi.com/api/xingce/questions

https://tiku.fenbi.com/api/xingce/solutions

不过粉笔的题目数据有些是图片，而且图片在题目中，选项中，这里以word文档存储操作docx库有些吃力，于是我想到了直接构造HTML代码，然后通过pdfkit转为pdf(具体如何下载可以参考百度，要下载wkhtmltopdf.exe)即可变为错题集在平板或者其他设备中看。

(请求时一定要携带完整的headers，否则很可能获取不到数据)

具体操作看代码解析

###此函数用于解析题目和每道题的答案

def jiexi(liebiao):

new = []

timu_last = []