python爬虫-32-python字体反爬,网页看到的和实际下载的不一致(理论)

开发者自己创建的一种字体,但是恰恰是由于是自己创造的,所以我们查看网页源代码的时候发现是乱码,因为我们系统识别不到。

但是又因为是前端展示,如果将常见的几千个中文重新全部创建一遍,那么每次访问该网站都需要下载十几兆的内容,所以往往只是对于数字,或者一些敏感的字进行重造。

1、描述

当我们爬取网站过多的时候,是不是会发现一种情况,就是说明明在网页看到了实际的数据,但是当你使用python爬虫爬取下来之后,数据就变成乱码了,识别不到是什么内容。

比如说我们看到了网页的数据是:价钱:100/元

但是当我们使用python爬虫技术获取到该页面的html代码之后,原来能看到的数据看不到了,是乱码了,且我们通过所有常用的编码格式,都无法识别,这就是这个网站的开发者为了数据保密而自行创建的一种字体。

而我们电脑并没有存储这个字体库,所有无法识别到而导致的乱码,那么我们如果需要将乱码转换成明文,我们首先需要了解下如何创建字体。这是一种什么方法。

2、创建-解析字体

这里我们使用一个软件,名字叫做FontCreator,这个软件既可以创建字体,也可以解析字体,由于我们主要是解析,那么我们来演示下解析吧;

软件包获取方法:

微信公众号“运维家”后台回复:FontCreator

即可获取该软件的下载地址了;

然后我们一步步安装之后,打开界面如下:

我们这里选择一个系统自带的字体,看看打开之后是什么样子吧。

首先我们需要知道我们要解析哪个字体库,这里这里我们选择C:\Windows\Fonts这个目录下的任一文件,因为这里存放的是我们自己电脑的所有字体,选择其一复制到其他位置;

点击FontCreator右上角的File--Open,打开我们刚复制的字体库,界面如下:

我们就可以看到有关于这个字体库中,每一个字体的信息。

如果我们想创建一个字体,最简单的方式就是改造已存在的,那就是双击改字体,出现类似界面:

调试其中的锚点,再次保存之后,这个字体就是你独有的了。

3、深层认知

我们通过上面的认知之后,知道了字体是对应网站的开发者为了安全自己创建的字体了,那么我们该如何解决这个问题呢。

这里我们来认识四个概念;

1、字体本身

就是说这个汉字或者数字本身的一个值;

2、形体

就是说这个汉字的样子是什么,可以简单的理解成一幅画;

3、name

这个汉字在对应字体库中的名字是什么;

4、code

这个汉字的名字,对应的代码是什么;

我们在浏览器页面看到的,展示出来的是字体本身,查看源代码的时候,显示的**code*;

4、常见反爬

有两种方法:

第一:直接生成一个新的字体库,里面的四要素是稳定的,不会产生变化的;

第二:每次请求都随机生成一个新的字体库;

针对第一种方法我们处理的时候比较简单,直接解析好将值自行存储起来即可;

第二种方法就比较复杂了,但是说复杂呢,也不是很复杂,因为四要素中,字体本身、形体、name,这三要素一般都不会变化,变化的仅仅是我们看到的code,那么我们是不是可以反推出来呢?

本文只是理论知识,下一篇我们来手把手实操一下子。

支持,本文结束,相关内容每日更新。 

更多内容请转至VX公众号 “运维家” ,获取最新文章。

------ “运维家”  ------

------ “运维家”  ------

------ “运维家”  ------

linux系统下,mknodlinux,linux目录写权限,大白菜能安装linux吗,linux系统创建文件的方法,领克linux系统怎么装软件,linux文本定位;

ocr识别linux,linux锚定词尾,linux系统使用记录,u盘有linux镜像文件,应届生不会Linux,linux内核64位,linux自启动管理服务;

linux计算文件夹大小,linux设备名称有哪些,linux能用的虚拟机吗,linux系统进入不了命令行,如何创建kalilinux,linux跟so文件一样吗。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,544评论 6 501
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,430评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 162,764评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,193评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,216评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,182评论 1 299
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,063评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,917评论 0 274
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,329评论 1 310
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,543评论 2 332
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,722评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,425评论 5 343
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,019评论 3 326
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,671评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,825评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,729评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,614评论 2 353

推荐阅读更多精彩内容