redis--压缩列表

压缩列表

当一个列表键只包含少量列表项,并且每个列表项要么是小整数值,要么是长度比较短的字符串,那么redis就会使用压缩列表来作为列表键的实现。

压缩列表的实现

压缩列表是由一系列特殊编码的连接内存块组成的顺序数据结构。一个压缩列表可以包含任意多个节点,每个节点可以保存一个字节数组或者一个整数值。

压缩列表
属性 类型 长度 用途
zlbytes unit32_t 4字节 记录整个压缩列表占用的内存字节数:在对列表进行内存重分配或者计算zlend的位置使用
zltail unit32_t 4字节 记录压缩列表表尾节点距离压缩列表起始地址有多少字节:通过这个偏移量,程序无需遍历整个列表就可以确定表尾节点的地址
zllen unit16_t 2字节 记录压缩列表包含的节点数量,当这个值小于UNIT16_MAX(65535)时,这个属性的值就是压缩列表包含的节点的数量;当等于这个值时,节点的真实数量需要遍历整个列表才能计算出
entryN 列表节点 不定 压缩列表的各个节点,长度由节点保存的内容决定
alend unit8_t 1字节 特殊值0xFF,用于标记压缩列表的末端
压缩列表节点

字节数组可以是以下三种长度之一:

  • 小于等于63(2^6 -1)字节的字节数组;
  • 小于等于16383(2^14 -1)字节的字节数组;
  • 小于等于4294967295(2^32 -1)字节的字节数组;

整数值可以是以下六种长度之一:

  • 4位长,介于0至12之间的无符号整数;
  • 1字节长的有符号整数
  • 3字节长的有符号整数
  • int16_t类型整数
  • int32_t类型整数
  • int64_t类型整数

每个节点都由previous_entry_length、encoding、content三个部分组成。

previous_entry_length

节点的previous_entry_length属性以字节为单位,记录了压缩列表中前一个字节的长度。previous_entry_length属性的长度可以是1个字节或者5个字节。

  • [ ] 如果前一节点的长度小于254字节,那么previous_entry_length的长度就为1字节。
  • [ ] 如果前一节点的长度大于等于254字节,那么previous_entry_length的长度就为5字节。
encoding

节点的encoding属性记录了节点的content属性保存的数据的类型以及长度。

字节数组编码如下表:

编码 编码长度 content属性保存的值
00bbbbbb 1字节 长度小于等于63字节的字节数组
01bbbbbb xxxxxxxx 2字节 长度小于等于16383字节的字节数组
10------ aaaaaaaa bbbbbbbb cccccccc dddddddd 5字节 长度小于等于4294967295字节的字节数组

整数编码如下表:

编码 编码长度 content属性保存的值
11000000 1字节 int16_t类型整数
11010000 1字节 int32_t类型整数
11100000 1字节 int64_t类型整数
11110000 1字节 24位有符号整数
11111110 1字节 8位有符号整数
1111xxxx 1字节 使用这一编码的节点没有对应的content属性,因为编码本身的xxxx四位已经保存了一个介于0至12之间的值,所以无需content属性
content

节点content属性负责保存节点的值,节点的值可以是一个字节数组或者整数,值得长度和类型由节点的encoding属性决定。

连锁更新

这种情况发生在插入和删除操作中,例如压缩列表中有N个节点大小都小于254个字节,当我们需要插入一个大于254自己的新节点时,后续节点的previous_entry_length属性由原来的1字节变为5字节,出现连锁的变化。更新需要重新分配内存空间,最坏的复杂度为O(N^2)。但是这种更新并不一定发生,可能性比较低。

压缩列表API
函数 作用 复杂度
ziplistNew 创建一个新的压缩列表 O(1)
ziplistPush 创建一个包含给定值得新节点,并将这个节点添加到压缩列表的表头或者表尾 平均O(N),最坏O(N^2)
ziplistInsert 将包含给定值的新节点插入到给定节点之后 平均O(N),最坏O(N^2)
ziplistIndex 返回压缩列表给定索引上的节点 O(N)
ziplistFind 在压缩列表中查找并返回包含了给定值的节点 O(N^2)
ziplistNext 返回给定节点的下一个节点 O(1)
ziplistPrev 返回给定节点的上一个节点 O(1)
ziplistGet 获取给定节点保存的值 O(1)
ziplistDelete 从压缩列表中删除给定的节点 平均O(N),最坏O(N^2)
ziplistDeleteRange 删除压缩列表在给定索引上的连续多个节点 平均O(N),最坏O(N^2)
ziplistBlobLen 返回压缩列表目前占用的内存字节数 O(1)
ziplistLen 返回压缩列表目前包含的节点数目 节点少于65535时为O(1),大于时为O(N)
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 213,099评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,828评论 3 387
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,540评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,848评论 1 285
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,971评论 6 385
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,132评论 1 291
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,193评论 3 412
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,934评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,376评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,687评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,846评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,537评论 4 335
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,175评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,887评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,134评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,674评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,741评论 2 351

推荐阅读更多精彩内容

  • 构成 压缩列表是 Redis 为了节约内存而开发的, 由一系列特殊编码的连续内存块组成的顺序型(sequentia...
    来年花惜阅读 2,204评论 0 2
  • Evaの分享 2019年5月25日 曾经一度认为能回答出问题的人优秀,这样的人博学。于是为了锻炼自己的能力上各种平...
    Eva_分享阅读 329评论 1 1
  • “你神经吧,天都没亮你能看清楚吗?”谢宏杰有点不信。 但是牛博文的回答仿佛很认真,他似乎从没这么认真过。“我当时...
    林右衽阅读 391评论 0 2
  • 如果我已经有了归意 这里的一山一水 一花一草 是否会挽留 我还没有去西塘泛舟 让落日余晖把我嵌进古镇里 也还没有去...
    那畔千浔阅读 505评论 4 3