Codis集群安装配置

一.借用网上codis架构图(https://github.com/CodisLabs/codis

clipboard.png

各组件作用说明

1.codis-proxy 相当于redis,是底层codis-server集群代理、

2.codis-group 是一个虚拟的节点机制通过槽位映射机制实现proxy与server的映射(一个组有一个master和多个slave组成,默认1024个槽位,redis cluster默认16384个槽位,不同的槽位内容放在不同group,通过zk查询key记录位置)

3.codis-fe 集群管理界面

4.codis-dashboard 集群管理中心

二. 环境搭建配置

系统centos7.1 64位系统

环境包

jdk1.8.0.91

go1.7.3 https://storage.googleapis.com/golang/go1.7.3.linux-amd64.tar.gz

zookeeper3.4.6 http://mirrors.shuosc.org/apache/zookeeper/zookeeper-3.4.10/zookeeper-3.4.10.tar.gz

QQ截图20180424175938.png

zk集群简要配置(需要安装jdk--步骤略)

[root@codis01 ~]# sed '/^$/ d;/^#/ d' /usr/local/zookeeper/conf/zk1.cfg

tickTime=2000

initLimit=10

syncLimit=5

dataDir=/usr/local/zookeeper/data

clientPort=2181

server.1=192.168.10.5:2888:3888

server.2=192.168.10.6:2888:3888

server.3=192.168.10.7:2888:3888


echo 1 > /usr/local/zookeeper/data/myid

codis02 上操作类似 echo 2 > /usr/local/zookeeper/data/myid

codis03 上操作类似 echo 3 > /usr/local/zookeeper/data/myid

启动zk集群,检测zk状态是否正常

go环境编译安装

[root@codis01 ~]# tar zxvf go1.7.3.linux-amd64.tar.gz

[root@codis01 ~]# mv go /usr/local

[root@codis01 ~]# mkdir /usr/local/codis

配置环境变量 vi /etc/profile

export PATH=$PATH:/usr/local/go/bin

export GOROOT=/usr/local/go

export GOPATH=/usr/local/codis

path=$PATH:$HOME/bin:$GOROOT/bin:$GOPATH/bin

source /etc/profile

验证是否生效

[root@codis01 ~]# go version

go version go1.7.3 linux/amd64

[root@codis01 ~]# echo $GOPATH

/usr/local/codis

codis安装

mkdir -p $GOPATH/src/github.com/CodisLabs************************此目录不能为别的名

[root@codis01 ~]# cd /usr/local/codis/src/github.com/CodisLabs/

[root@codis01 ~]# git clone https://github.com/CodisLabs/codis.git -b release3.2

进行编译 cd /usr/local/codis/src/github.com/CodisLabs/codis

make ---------执行全部指令后,会在 bin 文件夹内生成 codis-proxy、codis-server三个可执行文件

clipboard1.png

修改配置信息

启动方式有两种

[root@codis01 codis]# sed '/^#/ d;/^$/ d' config/dashboard.toml (修改了红字信息)

coordinator_name = "zookeeper"

coordinator_addr = "192.168.10.5:2181,192.168.10.6:2181,192.168.10.7:2181"

product_name = "codis-protal"

product_auth = ""

admin_addr = "0.0.0.0:18080"

migration_method = "semi-async"

migration_parallel_slots = 100

migration_async_maxbulks = 200

migration_async_maxbytes = "32mb"

migration_async_numkeys = 500

migration_timeout = "30s"

sentinel_client_timeout = "10s"

sentinel_quorum = 2

sentinel_parallel_syncs = 1

sentinel_down_after = "30s"

sentinel_failover_timeout = "5m"

sentinel_notification_script = ""

sentinel_client_reconfig_script = ""


[root@codis01 codis]# sed '/^#/ d;/^$/ d' config/proxy.toml (修改了红字信息)

product_name = "codis-protal"

product_auth = ""

session_auth = ""

admin_addr = "0.0.0.0:11080"

proto_type = "tcp4"

proxy_addr = "0.0.0.0:19000"

jodis_name = "zookeeper"

jodis_addr = "192.168.10.5:2181,192.168.10.6:2181,192.168.10.7:2181"

jodis_auth = ""

jodis_timeout = "20s"

jodis_compatible = true


新建4个codis-server节点(redis配置修改红字部分)

[root@codis01 opt]# sed '/^#/ d;/^$/ d' /opt/redis-6379/redis.conf

protected-mode no

port 6379

tcp-backlog 511

timeout 0

tcp-keepalive 300

daemonize yes

supervised no

pidfile "/opt/redis-6379/redis_6379.pid"

loglevel notice

logfile "/opt/redis-6379/redis_6379.log"

databases 16

save 900 1

save 300 10

save 60 10000

stop-writes-on-bgsave-error yes

rdbcompression yes

rdbchecksum yes

dbfilename "dump_6379.rdb"

dir "/opt/redis-6379"

slave-serve-stale-data yes

slave-read-only yes

repl-diskless-sync no

repl-diskless-sync-delay 5

repl-disable-tcp-nodelay no

slave-priority 100


服务启动【自带脚本方式】

cd $GOPATH/src/github.com/CodisLabs/codis/admin

./admin/codis-dashboard-admin.sh start 启动CODIS-DASHBOARD 外部存储

./admin/codis-proxy-admin.sh start 启动CODIS-PROXY 并加入CODIS-DASHBOARD管理

./admin/codis-server-admin.sh start 启动CODIS-SERVER

./admin/codis-fe-admin.sh start 启动CODIS-FE,可以通过127.0.0.1:9090访问管理界面

【手动运行命令后台运行】

./bin/codis-dashboard --ncpu=1 --config=config/dashboard.toml --log=dashboard.log --log-level=WARN &

./bin/codis-proxy --ncpu=1 --config=config/proxy.toml --log=proxy.log --log-level=WARN &

./bin/codis-fe --ncpu=1 --log=fe.log --log-level=WARN --zookeeper=192.168.10.5:2181 --listen=192.168.10.5:8090 & --管理页面端口

./bin/codis-server /opt/redis-6379/redis.conf

./bin/codis-server /opt/redis-6380/redis.conf

./bin/codis-server /opt/redis-6381/redis.conf

./bin/codis-server /opt/redis-6382/redis.conf

clipboard2.png

三.通过fe管理页面管理codis机器

浏览器访问http://192.168.10.5:8090进入管理页面

clipboard3.png

添加proxy代理

clipboard4.png

先添加4个分组,每个256个槽位,然后把codis-server加入到分组,组成一组两从

clipboard5.png
clipboard6.png

测试codis集群功能。停掉192.168.10.5:19000 这个proxy节点。检测工作是否正常

tag: 在10.5的节点上写入key,停掉10.5工作节点,在10.6上查询key

[root@codis01 codis]# ./bin/redis-cli -h 192.168.10.5 -p 19000

192.168.10.5:19000> set fctee hello-world

OK

[root@codis02 codis]# ./bin/redis-cli -h 192.168.10.6 -p 19000

192.168.10.6:19000> get fctee

"hello-world"

结果工作正常

tag:测试redis-key值写入,分配均衡

!/bin/bash

for ((i=0;i<20000;i++))

do

echo -en "helloworld" | redis-cli -h 192.168.10.5 -p 19000 -x set name$i >>redis.log

done

------------参考链接

http://www.cnblogs.com/reblue520/p/6874925.html

http://blog.csdn.net/liaoyoujinb/article/details/70800860

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,542评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,596评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,021评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,682评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,792评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,985评论 1 291
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,107评论 3 410
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,845评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,299评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,612评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,747评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,441评论 4 333
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,072评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,828评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,069评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,545评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,658评论 2 350

推荐阅读更多精彩内容