Redis 学习笔记

Redis 学习笔记

原文:硬核!16000 字 Redis 面试知识点总结,建议收藏!

Redis 基础知识

Redis C语言开发的一个开源的高性能键值对(key-value)内存数据库,可以用作数据库、缓存、消息中间件等。

  • 性能优秀,直接内存操作,读写速度快,支持10W QPS 并发。
  • 单进程、单线程,线程安全,采用IO多路复用,提高吞吐量。
  • 丰富的数据类型: String, Hash, List, Set, Sorted Set。
  • 支持数据持久化,主从复制,哨兵。
  • 分布式锁、消息中间件,支持发布订阅。

Redis 数据类型

类型 简介 特性 场景
String 二进制安全,Value 可以是String,也可以是 数字。 String 最大能存储 512M。 可以包含任何数据,图片或者序列化对象 --
Hash 键值对集合, map类型 适合存储对象,并且可以更新其中某一项属性 存储、读取、修改用户属性
List 通过双向链表实现,支持push、pop 增删快,提高操作某一元素的API 最新消息排行, 消息队列
Set hash表,元素不重复 添加、删除、查找复杂度都是O(1),提供交集、并集、差集操作 共同好友,统计访问网址的IP
Sorted Set set中的元素新增一个score参数,有序排列。底层通过HashMap 和 跳跃表skipList实现 数据插入时天然排序 排行榜,带权重的消息队列

Redis 缓存

显示调用:RedisTemplate

默认只支持 RedisTemplate<String, String>, 需要自定义模板。

redisCacheTemplate.opsForValue().set("userkey", new User(1, "张三", 25));
User user = (User) redisCacheTemplate.opsForValue().get("userkey");

隐式调用: 注解

@EnableCaching、@Cachable 、@CachePut、@CacheEvict

@Service
public class UserServiceImpl implements UserService{

    public static Logger logger = LogManager.getLogger(UserServiceImpl.class);

    private static Map<Integer, User> userMap = new HashMap<>();
    static {
        userMap.put(1, new User(1, "肖战", 25));
        userMap.put(2, new User(2, "王一博", 26));
        userMap.put(3, new User(3, "杨紫", 24));
    }


    @CachePut(value ="user", key = "#user.id")
    @Override
    public User save(User user) {
        userMap.put(user.getId(), user);
        logger.info("进入save方法,当前存储对象:{}", user.toString());
        return user;
    }

    @CacheEvict(value="user", key = "#id")
    @Override
    public void delete(int id) {
        userMap.remove(id);
        logger.info("进入delete方法,删除成功");
    }

    @Cacheable(value = "user", key = "#id")
    @Override
    public User get(Integer id) {
        logger.info("进入get方法,当前获取对象:{}", userMap.get(id)==null?null:userMap.get(id).toString());
        return userMap.get(id);
    }
}

Redis 缓存问题

缓存 & 数据库 一致性问题

如果项目要求强一致性,建议不要使用缓存。
可以采取合适策略来降低数据不一致的概率:先更新数据库,然后及时更新缓存。 缓存失败后增加重试机制。

缓存雪崩

缓存雪崩:缓存同时大面积失效,导致某一时刻所有请求直接到数据库。
解决方案:Key失效时间增加一个随机值。将热点数据均匀分布在不同的Redis库。

缓存穿透

缓存穿透:是指缓存和数据库中都没有的数据,但仍让不断请求该数据。
例如请求 id = -1的数据,而系统的id都是大于0的。
解决方案:用户鉴权,参数检验,非法参数直接return。 布隆过滤器

缓存击穿

缓存击穿:一个Key非常热点,不停的扛着大量的请求。当某个失效的瞬间,大量的请求直接落到了数据库,这时就是缓存击穿了。
解决方案:热点数据设置永不过期,加上互斥锁。

public static String getData(String key) throws InterruptedException {
        //从Redis查询数据
        String result = getDataByKV(key);
        //参数校验
        if (StringUtils.isBlank(result)) {
            try {
                //获得锁
                if (reenLock.tryLock()) {
                    //去数据库查询
                    result = getDataByDB(key);
                    //校验
                    if (StringUtils.isNotBlank(result)) {
                        //插进缓存
                        setDataToKV(key, result);
                    }
                } else {
                    //睡一会再拿
                    Thread.sleep(100L);
                    result = getData(key);
                }
            } finally {
                //释放锁
                reenLock.unlock();
            }
        }
        return result;
    }

Redis 为何那么快

官方数据: 10万+ QPS

Redis 是单进程单线程的模型。
正常项目采用多线程模型的目的是在于提高CPU的利用率。因为Redis完全是基于内存操作,CPU不是瓶颈,其最有可能的瓶颈是机器内存的大小或者网络带宽。

为什么单线程的Redis可以那么快:

  • Redis 完全基于内存,绝大部分请求是纯粹的内存操作,非常迅速。并且数据存在内存中类似 HashMap 的结构中, 所有查找和操作的时间复杂度是O(1).
  • 数据结构简单,对数据操作也简单。
  • 单线程,不需要上下文切换和竞争条件,所以不需要考虑各种锁的问题,不用切换CPU。
  • 使用多路复用IO模型,非阻塞IO。

Redis 和 Mencached 区别:

Redis Memcached
存储方式 主要在内存中,部分在硬盘中,支持数据持久化 全部在内存中,数据不能超过内存大小
数据类型 支持5中数据类型 只支持简单的key-value
底层模型 直接构建VM机制,因为调用系统函数比较耗时
Value 大小 1GB 1MB

Redis 淘汰策略

策略 描述
volatile-lru 从已设置过期时间的KV集中优先对最近最少使用(less recently used)的数据淘汰
volatile-ttl 从已设置过期时间的KV集中优先对剩余时间短(time to live)的数据淘汰
volatile-random 从已设置过期时间的KV集中随机选择数据淘汰
allkeys-lru 从所有KV集中优先对最近最少使用(less recently used)的数据淘汰
allkeys-random 从所有KV集中随机选择数据淘汰
noeviction 不淘汰策略,若超过最大内存,返回错误信息
volatile-lfu Redis 4.0新增:从已设置过期时间的KV集中优先对访问频率最低使用(least frequency used))的数据淘汰
allkeys-lfu Redis4.0新增:从所有KV集中优先对访问频率最低(least frequency used)的数据淘汰。

Reids 持久化

Redis 为了保证效率,数据缓存在内存中,但是会周期性的把更新的数据写入磁盘,或者把修改的操作写入追加的记录文件中,以保证数据的持久化。

Redis 数据持久化策略有两种:
  • RDB:Redis DataBase,快照模式,有个单独的子进程在指定时间间隔内将内存的数据集快照写入磁盘dump.rdb文件。

Redis 默认的持久化方式是快照模式 RDB:
redis.conf

save <seconds> <changes>
# save ""
save 900 1            
save 300 10
save 60 10000

官方出厂配置默认是 900秒内有1个更改,300秒内有10个更改以及60秒内有10000个更改,则将内存中的数据快照写入磁盘。
若不想用RDB方案,可以把 save "" 的注释打开,下面三个注释。

  • AOF:Append Only FIle,文件追加模式,把所有对Redis服务器进行修改的命令都存到 appendonly.aof 文件中 。
appendfsync yes   
appendfsync always     #每次有数据修改发生时都会写入AOF文件。
appendfsync everysec   #每秒钟同步一次,该策略为AOF的缺省策略。

Redis 主从复制

主从配置结合哨兵模式能解决单点故障问题,提高 Redis 可用性。

哨兵:


image.png

哨兵的任务:

  • 监控:不断检查主服务器和从服务器是否正常运行。
  • 通知:当被监控的某个 Redis 服务器出现问题,Sentinel 通过 API 脚本向管理员或者其他应用程序发出通知。
  • 自动故障转移:当主节点不能正常工作时,Sentinel 会开始一次自动的故障转移操作,它会将与失效主节点是主从关系的其中一个从节点升级为新的主节点,并且将其他的从节点指向新的主节点,这样人工干预就可以免了。
  • 配置提供者:在 Redis Sentinel 模式下,客户端应用在初始化时连接的是 Sentinel 节点集合,从中获取主节点的信息。
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 194,491评论 5 459
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 81,856评论 2 371
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 141,745评论 0 319
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,196评论 1 263
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 61,073评论 4 355
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,112评论 1 272
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,531评论 3 381
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,215评论 0 253
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,485评论 1 290
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,578评论 2 309
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,356评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,215评论 3 312
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,583评论 3 299
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 28,898评论 0 17
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,174评论 1 250
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,497评论 2 341
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,697评论 2 335

推荐阅读更多精彩内容