python爬取带stonefont字体网页的经历

一、问题描述

在爬取某电影网站票价信息时，使用selenium定位票价元素信息时，发现票价显示“□□”，如下图所示：

而通过chrome浏览器“查看网页源代码”方式查看该元素数值时，显示的是非正常票价数值，如下图所示：

二、 问题解决思路

百度查询相关解决方案，发现该网页使用了web-font字体，网页在打开时调用美团字体库对页面中数值进行渲染，需要找出当前网页使用的字体库，因为每次打开网页调用的字体库不一样， 所以需要每次都与基本库字形进行对比，找出实际对应的数字。在该网页源代码中字体库地址如下图所示：

三、解决流程

1、环境

from  selenium import webdriver
from selenium.webdriver.chrome.options import Options
from fontTools import ttLib

FontCreator软件，用于查看下载的字体库文件，可以比较直观的查看字形定义和字形代码。

2、解决流程

1）下载字体文件

下载网页字体库文件woff,保存到电脑中（文件后缀为woff），用于建立用于后期对比的基本字形库（字形名和字形定义），只下载一次即可。需要使用正则表达式搜索网页源代码中字体下载地址。这部分功能用的requests库，其它用的selenium，其实也可以全部用selenium，requests和selenium在解决该类问题时的区别在后面再说一下。