Python 简明教程 --- 9,Python 编码

当你选择了一种语言,意味着你还选择了一组技术、一个社区。
—— Joshua Bloch

目录

1,什么是计算机编码

编码

信息从一种形式转换到另一种形式的过程,就叫做编码。说白了,编码就是信息的一种转换过程。

比如,信息的加密解密,这就是信息的一种转换过程,它是信息的明文与密文之间的转换过程。

还有不同国家文字的翻译,这是语言之间的一种转换过程。

那么,编码也是一种信息的转换过程。

计算机编码

计算机编码是信息的人类可读形式与计算机可读形式之间的一种转换过程。

实际上,计算机是一种人造的,很“”的机器,它只认识01 这样的二进制数据,也称为机器码

提示:计算机优势在于它的计算速度很快。

那么,计算机要想能够存储/展现我们人类可读的,丰富多彩的信息(比如文字,图片,音频,视频等),这就涉及到了计算机编码

ASCII 码

ASCII 码(美国信息交换标准码),是最早的,也是较为简单的一种计算机编码。其主要用于表示英文字符,数字和一些标点符号。

比如,二进制数字01000001 (十进制为65)就表示大写字母A

GB2312

ASCII 码 虽能表示英文,但是无法表示其它语言,比如中文,韩文等。

为了表示中文,中国国家标准总局发布了GB2312(信息交换用汉字编码字符集),专门用于表示中文信息。

比如,十六进制D6D0 表示汉字

Unicode 码

世界上有很多的国家,每个国家都需要表示自己的文字,这就有了各种各样的计算机编码。每个国家都有自己的编码,这就不方便统一,也没有通用性。

为了统一不同国家的编码,表示不同国家的文字,诞生了Unicode 码,俗称万国码Unicode 码为每种语言中的每个字符设定了统一且唯一的二进制编码。

比如,十六进制4E2D 表示汉字

UTF8

Unicode 码 实际上是一个字符集,它只规定了二进制各个字符之间的对应关系,并没有规定如何在磁盘上存储(用几个字节来表示)。

提示:字节是计算机存储的最小单位
1024 字节为1 K
1024 K 为1 M
1024 M 为1 G

UTF32Unicode 码 的一种实现,一般用4个字节表示一个字符,这样比较浪费存储空间。因为,一个英文字符只用1 个字节就可表示,一个常用汉字用2 个字节就可表示。

为了节省存储空间,UTF8 一般用1 到4 个字节表示一个字符,比如英文字符用1 个字节,常用汉字用2 个字节。

注意:UTF8Unicode 码的一种实现,比较常用。UTF8使用变长字节来表示字符,意思就是,使用的字节数是可变的。

2,Python3 源文件编码

Python2.x 中,Python 源代码文件默认以ASCII 码格式编码。因此,在Python2.x中,默认情况下,是不支持中文的。如果强制写中文,则会出现以下错误:

SyntaxError: Non-ASCII character ...

如果想在Python2.x源代码文件中输入中文字符,可以使用UTF8编码,需要在代码文件的开头添加:

# -*- coding: UTF-8 -*-

或者:

# coding=utf-8

Python3.x 中,Python 源代码文件会统一采用Unicode 编码,默认以UTF8格式编码,就不需要在代码开头添加上面的代码。

3,Python3 字符串与编码

str 类型

上一节介绍了Python 字符串的相关操作,这里我们介绍一下Python 字符串与编码。

Python3 中的字符串类型<class 'str'>统一采用Unicode 编码,因此支持多种语言。

>>> print('中文')     # 中文
中文
>>> 
>>> print('english')    # 英文
english

bytes 类型

str 类型需要磁盘存储或者网络传输时,就需要转换为bytes 类型。

bytes 是一个二进制类型,它需要在str 之前加上b

>>> type(b'abc')
<class 'bytes'>

bytes 中只能包含ASCII 字符,若有非ASCII 字符,则会报错:

>>> s = b'中国'
  File "<stdin>", line 1
SyntaxError: bytes can only contain ASCII literal characters.

str 转为 bytes

str 类型转换为bytes 类型,需要使用str 中的encode 方法,参数utf8 是编码格式:

>>> s = '中国'
>>> s.encode('utf8')
b'\xe4\xb8\xad\xe5\x9b\xbd'

bytes 转为 str

bytes 类型转换为str 类型,需要使用bytes 中的decode 方法,参数utf8 是编码格式:

>>> s = b'\xe4\xb8\xad\xe5\x9b\xbd'
>>> s.decode('utf8')
'中国'

注意:当str 类型与bytes 类型互转时,推荐使用UTF8 编码

strUnicode 互转

str 转换为Unicode

>>> '中国'.encode('unicode-escape')
b'\\u4e2d\\u56fd'

Unicode 转换为str

>>> b'\\u4e2d\\u56fd'.decode('unicode-escape')
'中国'

4,ord()chr()

ord() 函数用于获取一个字符的十进制整数表示,chr()ord() 的反操作:

>>> ord('a')
97
>>> chr(97)
'a'
>>> ord('中')
20013
>>> chr(20013)
'中'

(完。)


推荐阅读:

Python 简明教程 --- 3,Python 基础概念
Python 简明教程 --- 4,Python 变量与基本数据类型
Python 简明教程 --- 5,Python 表达式与运算符
Python 简明教程 --- 6,Python 控制流
Python 简明教程 --- 7,Python 字符串
Python 简明教程 --- 8,Python 字符串函数

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 217,826评论 6 506
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,968评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,234评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,562评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,611评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,482评论 1 302
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,271评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,166评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,608评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,814评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,926评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,644评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,249评论 3 329
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,866评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,991评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,063评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,871评论 2 354

推荐阅读更多精彩内容