缓存技术在分布式中的实践与原理(一.redis入门)

引言

在大型分布式项目中,会存在大量的查询请求,在数据库层面会进行扩容、分库分表、集群化主从复制等操作进行负载能力的提升。但是DB层面的磁盘IO还是比较高昂的操作,如下图(计算机硬件延迟对比图):

所以在分布式领域出现了很多NoSQL方案去优化大型网站等项目的查询请求。

NoSQL百花齐放,如何选择?总体上这些NoSQL主要用于解决以下几种问题:

1.少量数据存储,高速读写访问。

2.海量数据存储,分布式系统支持,数据一致性保证,方便的集群节点添加/删除。

3.这方面最具代表性的是dynamo和bigtable 2篇论文所阐述的思路。前者是一个完全无中心的设计,节点之间通过gossip方式传递集群信息,数据保证最终一致性,后者是一个中心化的方案设计,通过类似一个分布式锁服务来保证强一致性,数据写入先写内存和redo log,然后定期compat归并到磁盘上,将随机写优化为顺序写,提高写入性能。

4.Schema free,auto-sharding等。比如目前常见的一些文档数据库都是支持schema-free的,直接存储json格式数据,并且支持auto-sharding等功能,比如MongoDB

所以在分布式项目里,越来越多的性能需求在 all in memory层面,这也是redis最适合的场景,当然,它也支持持久化。

本专题围绕大型分布式项目中对缓存技术的使用展开,内容会涉及redis以及memcached在网络IO模型、内存管理机制、集群方案、all in memory与persistence选择、主从复制、性能优化、pipelining、LRU等细节。

简介:本篇博客主要讲redis入门安装以及使用,以及常用命令介绍。

目录:

1.redis安装使用

2.常用命令

正文:

redis简介:

Redis是一个使用ANSI C编写的开源、支持网络、基于内存、可选持久性键值对存储数据库。从2015年6月开始,Redis的开发由Redis Labs赞助,而2013年5月至2015年6月期间,其开发由Pivotal赞助。在2013年5月之前,其开发由VMware赞助。根据月度排行网站DB-Engines.com的数据显示,Redis是最流行的键值对存储数据库。

官方网站:https://redis.io/

unix下安装使用:

首先进入https://redis.io/站点,点击download导航,进入到installation提示

打开linux或者macos终端,按照Installation提示命令依次输入即可成功安装至unix系统下

安装成功以后会有redis文件夹出现:


上述是我电脑上安装redis以后的文件目录结构,我的习惯是复制一份conf,之后启动server端使用自己的配置文件

具体方法如下:

-> sudo  cp redis.conf  xx/xx/test.conf

之后用redis-server test.conf启动server服务


出现上图表示redis服务已经成功启动,端口是6379,pid是9289(kill9忍不住?)

server端成功启动以后就另启一个终端,进入redis-client端


上图右侧就是redis-cli端,进入127.0.0.1:6379之后就可以使用redis命令进行通讯了。

以上就完成了redis在macos下的安装与使用,linux同理啦,windows的话更简单,下载一下zip包,解压,就不多介绍了.


关于redis更多命令,可以直接在redis官网的Documentation中查找,里面内容很全面,每个数据操作的命令均有时间复杂度说明以及数据结构选型说明等,博主就不一一示范了,感兴趣的可以自己尝试。

最后讲一下redis服务端关闭的方法:

直接在cli端终端输入shutdown即可,如果shutdown异常,ps aux|grep redis还出现redis服务,多半是因为dump.rdb没有权限,可以 sudo chmod 757 6379或者进入到redis.conf指定的dir路径里 ls -l查看权限,给dump.rdb添加g+w即可,测试环境还有一种暴力的方式就是kill -9 pid。这一块东西涉及到conf配置文件详解以及rdb aof等同步方式。本节不细讲,留待后续章节进行原理分析,本节就简单介绍一下redis入门。

以后章节将介绍redis的网络IO模型(epoll)以及集群方案(cluster、客户端hash等)、内存使用效率(对molloc free的封装)、异步主从复制(SYNC PSYNC rdb aof等)以及跟memcached对比(memcached Slab Allocation内存管理与redis molloc封装在内存利用率 性能上对比等)、LRU淘汰、事务实现等实践与原理。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 217,826评论 6 506
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,968评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,234评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,562评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,611评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,482评论 1 302
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,271评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,166评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,608评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,814评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,926评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,644评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,249评论 3 329
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,866评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,991评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,063评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,871评论 2 354

推荐阅读更多精彩内容