| 什么是字体反爬就是网页的制作者,他在发布他网页数据的时候。将其中一部分的字体变成乱码。即使你把网页的数据爬取下来,你也获取不到真实数据的样貌。这样就达到了一个反爬虫的目的。 如何解决字体反爬1.下载.ttf文件; 2.将.ttf文件转换成xml文件; 3.分析字体规律找到映射关系。 就是找到字体文件,发现替换关系,将爬取下来的数据替换的过程。 如何找到字体文件1.定位到进行了字体反爬的位置,在对应的styles里面找到font-family; 2.复制font-family里面的值,去网页源码里面搜索; 3.在搜索结果的附近,找到 xxx.ttf 这样的url进行下载; 4.把下载好的 ttf文件用High-Logic FontCreator打开; 5.用python查看ttf文件 from fontTools.ttLib import TTFont
from lxml import etree
from tools import get_js
import requests
sz = TTFont('szec.ttf')
# 加载字体文件 保存成xml格式的文件
# 我们发现通过字体软件打开的里面 能够看到name和code-points属性
# 通过python保存的xml文件中的cmap标签中 能看到name和code属性
# 两者之间包含某种对应关系
# sz.saveXML('sz.xml')
# print(sz.getBestCmap())
 6.找到所对应的关系,将爬取的数据替换。 7.当需要识别图片的时候,对于简单的图片可以使用tesseract,复杂的使用打码平台。 练习网站: 闪职——首页 (spbeen.com) |