阿里巴巴Python面试都问些什么Python3爬取猫眼电影爬虫（破解字符集反爬，997页手淘Python面试真题解析火爆全网

PS：如有需要Python学习资料的小伙伴可以加点击下方链接自行获取

python免费学习资料以及群交流解答点击即可加入

---

页面分析

---

首先打开猫眼电影，然后点击一个正在热播的电影（比如：毒液）。打开开发者工具，点击左上角的箭头，然后用鼠标点击网页上的票价，可以看到源码中显示的不是数字，而是某些根本看不懂的字符，这是因为使用了font-face定义字符集，并通过unicode去映射展示，所以我们在网页上看到的是数字，但是在源码中看到的却是别的字符。

碰到这些根本看不懂的字符怎么办呢？不慌，右键选择查看网页源代码，然后找到相应的位置（如下图）。那么是不是“”映射出来就是28呢？

通过查看源码，可以找到如下内容， 而当我们访问这里面的链接的时候，就可以下载相应的字体文件，关于font-face可以点击这里查看了解：

当我下载好字体文件后，满心欢喜的双击想要点开的时候，却发现无法打开（T_T）。查阅资料之后知道了一个叫做FontCreator的软件，用这个软件可以打开我们下载的字体文件，没有安装这个软件的可以进入官网https://www.high-logic.com/下载安装，如果下载得很慢的可以用百度云下载（链接：https://pan.baidu.com/s/1ImxwPhKdzZo2g4bIjiGCZw ，提取码：m0yf ）。下载好之后打开软件，看到如下界面，选择Use Evaluation Version，这个软件我们可以免费使用三十天。

打开软件后，再打开我们下载的字体文件，可以看到数字2和8分别对应的是uniE83B和uniE375，和前面看到的编码是一致的。

那么我们下载好字符集之后，只要将其中的字符编码和数字对应的信息提取出来，再把网页源码中的字符编码替换掉，就能得到我们想要的数据了。这里要用到一个三方库fontTools，利用fontTools可以获取每一个字符对象，这个对象你可以简单的理解为保存着这个字符的形状信息，而且编码可以作为这个对象的id，具有一一对应的关系。不过这里还有一个问题，就是网页每次使用的字符集是随机变化的，我们也就无法使用一个固定的字符集去做到反爬。

解决思路如下：先保存一个字体文件（比如base.woff），然后解析其数字和编码的对应关系，然后爬取的时候把新的字体文件下载下来（比如online.woff），网页中的一个数字的编码（比如ABCD），我们先通过编码ABCD找到这个字符在online.woff中的对象，并且把它和base.woff中的对象逐个对比，直到找到相同的对象，然后获取这个对象在base.woff中的编码，再通过编码确认是哪个数字。

主要代码

---

解析下载的字体文件，由于字体文件中有多余的字符，需要舍弃掉。

1 # 解析字体库

2 def parse_ttf(font_name):

3 “”"

4 :param font_name: 字体文件名

5 :return: 字符-数字字典

6 “”"

7 base_nums = [‘3’, ‘0’, ‘1’, ‘6’, ‘4’, ‘2’, ‘5’, ‘8’, ‘9’, ‘7’]

8 base_fonts = [‘uniEB84’, ‘uniF8CA’, ‘uniEB66’, ‘uniE9DB’, ‘uniE03C’,

9 ‘uniF778’, ‘uniE590’, ‘uniED12’, ‘uniEA5E’, ‘uniE172’]

10 font1 = TTFont(‘base.woff’) # 本地保存的字体文件

11 font2 = TTFont(font_name) # 网上下载的字体文件

12

13 uni_list = font2.getGlyphNames()[1:-1] # 去掉头尾的多余字符

14 temp = {}

15 # 解析字体库

16 for i in range(10):

17 uni2 = font2[‘glyf’][uni_list[i]]

18 for j in range(10):

19 uni1 = font1[‘glyf’][base_fonts[j]]

20 if uni2 == uni1:

21 temp[“&#x” + uni_list[i][3:].lower() + “;”] = base_nums[j]

22 return temp

解析网页源码，把其中的编码替换成数字，这里选择把网页源码保存下来，这样的话编码就不会改变，也就能正确的解析。

1 # 解析网页得到数字信息

2 def get_nums(font_dict):

3 “”"

4 :param font_dict: 字符-数字字典

5 :return: 由评分、评分人数、票房和票价组成的列表

6 “”"

7 num_list = []

8 with open(‘html’, ‘r’, encoding=‘utf-8’) as f:

9 for line in f.readlines():

10 lst = re.findall(‘(&#x.*?)<’, line)

11 if lst:

12 num = lst[0]

13 for i in font_dict.keys():

14 if i in num:

15 num = num.replace(i, font_dict[i])

自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数Python工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但对于培训机构动则几千的学费，着实压力不小。自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年Python开发全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上Python开发知识点，真正体系化！

由于文件比较大，这里只是将部分目录大纲截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且后续会持续更新

如果你觉得这些内容对你有帮助，可以添加V获取：vip1024c （备注Python）

学好 Python 不论是就业还是做副业赚钱都不错，但要学会 Python 还是要有一个学习规划。最后大家分享一份全套的 Python 学习资料，给那些想学习 Python 的小伙伴们一点帮助！

一、Python所有方向的学习路线

Python所有方向路线就是把Python常用的技术点做整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照上面的知识点去找对应的学习资源，保证自己学得较为全面。

二、学习软件

工欲善其事必先利其器。学习Python常用的开发软件都在这里了，给大家节省了很多时间。

三、全套PDF电子书

书籍的好处就在于权威和体系健全，刚开始学习的时候你可以只看视频或者听某个人讲课，但等你学完之后，你觉得你掌握了，这时候建议还是得去看一下书籍，看权威技术书籍也是每个程序员必经之路。

四、入门学习视频

我们在看视频学习的时候，不能光动眼动脑不动手，比较科学的学习方法是在理解之后运用它们，这时候练手项目就很适合了。

五、实战案例

光学理论是没用的，要学会跟着一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。

六、面试资料

我们学习Python必然是为了找到高薪的工作，下面这些面试题是来自阿里、腾讯、字节等一线互联网大厂最新的面试资料，并且有阿里大佬给出了权威的解答，刷完这一套面试资料相信大家都能找到满意的工作。

一个人可以走的很快，但一群人才能走的更远。如果你从事以下工作或对以下感兴趣，欢迎戳这里加入程序员的圈子，让我们一起学习成长！

AI人工智能、Android移动开发、AIGC大模型、C C#、Go语言、Java、Linux运维、云计算、MySQL、PMP、网络安全、Python爬虫、UE5、UI设计、Unity3D、Web前端开发、产品经理、车载开发、大数据、鸿蒙、计算机网络、嵌入式物联网、软件测试、数据结构与算法、音视频开发、Flutter、IOS开发、PHP开发、.NET、安卓逆向、云计算

net/forums/4304bb5a486d4c3ab8389e65ecb71ac0)

AI人工智能、Android移动开发、AIGC大模型、C C#、Go语言、Java、Linux运维、云计算、MySQL、PMP、网络安全、Python爬虫、UE5、UI设计、Unity3D、Web前端开发、产品经理、车载开发、大数据、鸿蒙、计算机网络、嵌入式物联网、软件测试、数据结构与算法、音视频开发、Flutter、IOS开发、PHP开发、.NET、安卓逆向、云计算