Redis | 第4章 Redis中的数据库《Redis设计与实现》

前言

参考资料:《Redis设计与实现 第二版》;

第二部分为单机数据库的实现,主要由以下模块组成:数据库持久化事件客户端服务器

本篇将介绍 Redis 中的数据库;

与本章相关的 Redis 命令总结在下篇文章,欢迎点击收藏,本篇将不再重复:

《Redis常用命令及示例总结(API)》https://www.jianshu.com/p/f8eb9afaa908


1. Redis中的数据库

  • Redis服务器的所有数据库保存在redis.h/redisService结构的db数组中:

    struct redisService{
        //...
        //保存所有数据库的数组
        redisDB *db;
      
        //服务器的数据库数量
        int dbnum;
        //...
    }
    
    • dbnum属性由服务器配置的 database 选项决定,默认为 16;
  • Redis客户端数据库保存在在redisClient结构的db属性:

    typedef struct redisClient{
        //...
        //记录客户端当前正在使用的数据库
        redisDB *db;
    } redisClient;
    
    • 客户端通过修改目标数据库指针,让它指向 redisService.db 数组中的不同元素;
    • 可以通过 SELECT index 命令来切换数据库;
      客户端的目标数据库.png
  • 数据库的定义在redis.h/redisDb结构中:

    typedef struct redisDb{
        //...
        //数据库键空间,保存数据库中所有的键值对
        dict *dict;
        
        //过期字典,保存着键的过期时间
        dict *expires;
    } redisDb;
    
    • 键空间的键是数据库的键,每个键是一个字符串对象;
    • 键空间的值是数据库的值,每个值可以是字符串对象列表对象哈希表对象集合对象有序集合对象中的一种;
带过期字典的数据库.png


2. 数据库的键空间

  • 数据库键空间是一个字典,所有针对数据库的操作都是通过键空间字典来操作的;
  • 在对键空间进行读写操作时,Redis 还会进行一些维护操作:
    • 读取键后,会根据键是否存在更新服务器的键空间命中 keyspace_hits 次数或键空间不命中 keyspace_misses 次数。通过 INFO stats 命令查看属性;
    • 读取键后,服务器会更新键的 LRU(最后一次使用时间)。通过 ONBJECT idlettime [key] 命令查看key的闲置时间;
    • 服务器在读取键时发现键已经过期,会先删除这个过期键;
    • 如果有客户端使用 WATCH 命令监视某个键,服务器对该键修改后会标记上脏 dirty,让事务处理程序注意;
    • 服务器每修改一个键后,会对脏 dirty 键计数器值增 1,计数器会触发服务器的持久化以及复制操作;


3. 键的生成时间与过期时间

  • 键的时间相关设置命令参看《Redis常用命令及示例总结》1.3 生存时间的功能
  • 生存时间:
    • 客户端可以通过 EXPIREPEXPIRE 命令以秒或毫秒精度为数据库中某个键设置生存时间(Time To Live,TTL)。经过指定时间后,服务器自动删除生存时间为0的键;
    • 可以通过 SETEX 命令在设置字符串键同时设置过期时间;
    • 使用 TTLPTTL 命令获取键的剩余生存时间;
  • 过期时间:
    • 客户端设置过期时间的命令是 EXPIREATPEXPIREAT
    • 过期时间是一个 UNIX 时间戳;
  • EXPIREPEXPIREEXPIREAT 三个命令都会转换成 PEXPIREAT 命令实现;


4. Redis中的过期键删除策略

  • 有三种删除过期键的策略:

    • 定时删除:主动策略。对内存最友好,到期就释放内存。缺点是对CPU事件不友好,当过期键比较多时,会占用一部分CPU时间;
    • 惰性删除:被动策略。对CPU时间最友好。每次从键空间获取键时,检查取得的键是否过期,过期则删除。缺点是对内存不友好;
    • 定期删除:主动策略。前两种策略的整合与折中。每隔一段时间执行一次删除过期键操作,并通过限制删除操作执行的时长与频率减少删除操作对CPU时间的影响。缺点是难以确定删除操作执行的时长和频率;
  • 惰性删除策略由 db.c/expireIfNeeded 函数实现,流程如下:

惰性删除策略的执行流程.png
  • 定期删除策略由 redis.c/activeExpireCycle 函数实现,每当Redis的服务器周期性操作 redis.c/serverCron 函数执行时,activeExpireCycle 函数会被调用。在规定的时间内,分多次遍历服务器各个数据库,从数据库的 expires 字典中随机检查一部分过期时间,删除其中过期键;


5. AOF、RDB和复制功能对过期键的处理

5.1 生成 RDB 文件

  • 在执行 SAVEBGSAVE 命令创建一个新的 RBG 文件时,程序会对数据库中的键进行检查,已过期的键不会被保存到新创建的 RDB 文件中;

5.2 载入 RDB 文件

  • 载入 RDB 文件时:
    • 若服务器以主服务器模式运行,过期键不载入;
    • 若服务器以从服务器模式运行,所有键都会载入;

5.3 AOF 文件写入

  • 当服务器以 AOF 持久化模式运行时,未被惰性删除和定期删除的过期键不会对 AOF 文件产生影响;
  • 当过期键被惰性删除或定期删除后,程序会向 AOF 文件追加(append)一条 DEL 命令,显示记录该键已被删除;

5.4 AOF 重写

  • 与 RDB 文件类似,在执行 AOF 重写过程中,程序会对数据库中的键进行检查,已过期的键不会被保存到重写后的 AOF 文件中;

5.5 复制

  • 当服务器运行在复制模式下时,从服务器的过期键删除动作由主服务器控制;


    客户端访问从服务器.png
客户端访问主服务器.png.png


6. 数据库通知

  • 数据库通知是 Redis 2.8 版本新增的功能;
  • 数据库通知可以让客户端通过订阅给定的频道或模式,来获知数据库中键的变化,以及数据库中命令的执行情况;
  • Redis 命令对数据库进行修改后,服务器会根据配置向客户端发送数据库通知;
  • 通知的相关命令可以参考 《Redis常用命令及示例总结》7. Pub/Sub(发布/订阅)
  • 两类通知类型:
    • 键空间通知 key-space notification:关注 “某个键执行了什么命令”;SUBSCRIBE channel:message
    • 键事件通知 key-event notification:关注 “某个命令被什么键执行了”;SUBSCRIBE channel:del
  • 服务器配置的 notify-keyspace-events 选项决定服务器所发送通知的类型:
    • AKE:发送所有类型的键空间和键事件通知;
    • AK:发送所有类型的键空间通知;
    • AE:发送所有类型的键事件通知;
    • K$:只发送字符串有关的键空间通知;
    • EL:只发送列表键有关的键事件通知;
  • 发送数据库通知的功能是由 notify.c/notifyKeyspaceEvent 函数实现;



最后

\color{blue}{\rm\small{新人制作,如有错误,欢迎指出,感激不尽!}}

\color{blue}{\rm\small{欢迎关注我,并与我交流!}}

\color{blue}{\rm\small{如需转载,请标注出处!}}

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 213,254评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,875评论 3 387
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,682评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,896评论 1 285
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,015评论 6 385
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,152评论 1 291
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,208评论 3 412
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,962评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,388评论 1 304
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,700评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,867评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,551评论 4 335
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,186评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,901评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,142评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,689评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,757评论 2 351

推荐阅读更多精彩内容