Centos6.4下搭建redis集群

1.  redis集群

1.1. 集群原理

1.1.1.  redis-cluster架构图

架构细节:

(1)所有的redis节点彼此互联(PING-PONG机制),内部使用二进制协议优化传输速度和带宽.

(2)节点的fail是通过集群中超过半数的节点检测失效时才生效.

(3)客户端与redis节点直连,不需要中间proxy层.客户端不需要连接集群所有节点,连接集群中任何一个可用节点即可

(4)redis-cluster把所有的物理节点映射到[0-16383]slot上,cluster
负责维护node<->slot<->value

Redis
集群中内置了 16384
个哈希槽，当需要在 Redis
集群中放置一个 key-value
时，redis
先对 key
使用 crc16
算法算出一个结果，然后把结果对 16384
求余数，这样每个 key
都会对应一个编号在 0-16383
之间的哈希槽，redis
会根据节点数量大致均等的将哈希槽映射到不同的节点

1.1.2.  redis-cluster投票:容错

 


(1)领着投票过程是集群中所有master参与,如果半数以上master节点与master节点通信超过(cluster-node-timeout),认为当前master节点挂掉.

(2):什么时候整个集群不可用(cluster_state:fail)? 

    a:如果集群任意master挂掉,且当前master没有slave.集群进入fail状态,也可以理解成集群的slot映射[0-16383]不完成时进入fail状态.
ps : redis-3.0.0.rc1加入cluster-require-full-coverage参数,默认关闭,打开集群兼容部分失败.

    b:如果集群超过半数以上master挂掉，无论是否有slave集群进入fail状态.

  ps:当集群不可用时,所有对集群的操作做都不可用，收到((error) CLUSTERDOWN The cluster
is down)错误

1.2  集群结构

集群中有三个节点的集群，每个节点有一主一备。需要6台虚拟机。

搭建一个伪分布式的集群，使用6个redis实例来模拟。

1.3  集群的搭建

需要先安装redis单机版 不懂的参考此文章 http://blog.csdn.net/xzk821648509/article/details/78077053

1.4 ruby环境

redis集群管理工具redis-trib.rb依赖ruby环境，首先需要安装ruby环境：

 安装ruby

yum install ruby

yum install rubygems

redis集群管理工具redis-trib.rb

[root@bogon ~]# cd redis-3.0.0

[root@bogon redis-3.0.0]# cd src

[root@bogon src]# ll *.rb

-rwxrwxr-x.1 root root 48141 Apr  1 07:01 redis-trib.rb


脚本需要的ruby包：http://download.csdn.net/download/xzk821648509/9992904


需要上传到linux服务。

安装ruby的包：

gem install redis-3.0.0.gem

[root@bogon ~]# gem install redis-3.0.0.gem 

1.5  集群的搭建

在 /usr/local/ 下创建一个redis-cluster文件夹

进入单机版的redis目录 复杂bin目录下所有的文件到redis-cluster,并修改名字 创建6个实例

[root@localhost redis]# cp bin/ ../redis-cluster/redis01

[root@localhost redis]# cp bin/ ../redis-cluster/redis02

[root@localhost redis]# cp bin/ ../redis-cluster/redis03

[root@localhost redis]# cp bin/ ../redis-cluster/redis04

[root@localhost redis]# cp bin/ ../redis-cluster/redis05

[root@localhost redis]# cp bin/ ../redis-cluster/redis06

复制完后，要修改每一个的配置文件

1.修改端口号（可以随便定，但不要和其它服务重复 我这里是 7001~7006）



2.打开cluster-enable前面的注释



3.把创建集群的ruby脚本复制到redis-cluster目录下。

[root@localhost src]# cp *.rb /usr/local/redis-cluster/

4.启动6个redis实例 （可以创建一个脚本）

[root@localhost redis-cluster]# vi startall.sh

cd redis01
./redis-server redis.conf
cd ..
cd redis02
./redis-server redis.conf
cd ..
cd redis03
./redis-server redis.conf
cd ..
cd redis04
./redis-server redis.conf
cd ..
cd redis05
./redis-server redis.conf
cd ..
cd redis06
./redis-server redis.conf
cd ..:wq 保存
[root@localhost redis-cluster]# chmod +x startall.sh

[root@localhost redis-cluster]# ./startall.sh 
执行

[root@localhost redis-cluster]# ps aux | gerp redis  此命令是查看6个redis实例是否开启

5.创建集群

[root@localhost redis-cluster]#  ./redis-trib.rb create --replicas 1192.168.25.153:7001 192.168.25.153:7002 192.168.25.153:7003 192.168.25.153:7004192.168.25.153:7005  192.168.25.153:7006
ip地址是虚拟机的ip地址 后面是redis的端口号

>>> Creating cluster

Connecting to node 192.168.25.153:7001: OK

Connecting to node 192.168.25.153:7002: OK

Connecting to node 192.168.25.153:7003: OK

Connecting to node 192.168.25.153:7004: OK

Connecting to node 192.168.25.153:7005: OK

Connecting to node 192.168.25.153:7006: OK

>>> Performing hash slotsallocation on 6 nodes...

Using 3 masters:

192.168.25.153:7001

192.168.25.153:7002

192.168.25.153:7003

Adding replica 192.168.25.153:7004 to192.168.25.153:7001

Adding replica 192.168.25.153:7005 to192.168.25.153:7002

Adding replica 192.168.25.153:7006 to192.168.25.153:7003

M: 5a8523db7e12ca600dc82901ced06741b3010076192.168.25.153:7001

  slots:0-5460 (5461 slots) master

M: bf6f0929044db485dea9b565bb51e0c917d20a53192.168.25.153:7002

  slots:5461-10922 (5462 slots) master

M: c5e334dc4a53f655cb98fa3c3bdef8a808a693ca192.168.25.153:7003

  slots:10923-16383 (5461 slots) master

S: 2a61b87b49e5b1c84092918fa2467dd70fec115f192.168.25.153:7004

  replicates 5a8523db7e12ca600dc82901ced06741b3010076

S: 14848b8c813766387cfd77229bd2d1ffd6ac8d65192.168.25.153:7005

  replicates bf6f0929044db485dea9b565bb51e0c917d20a53

S: 3192cbe437fe67bbde9062f59d5a77dabcd0d632192.168.25.153:7006

  replicates c5e334dc4a53f655cb98fa3c3bdef8a808a693ca

Can I set the above configuration? (type'yes' to accept): yes

>>> Nodes configuration updated

>>> Assign a different configepoch to each node

>>> Sending CLUSTER MEET messagesto join the cluster

Waiting for the cluster to join.....

>>> Performing Cluster Check(using node 192.168.25.153:7001)

M: 5a8523db7e12ca600dc82901ced06741b3010076192.168.25.153:7001

  slots:0-5460 (5461 slots) master

M: bf6f0929044db485dea9b565bb51e0c917d20a53192.168.25.153:7002

  slots:5461-10922 (5462 slots) master

M: c5e334dc4a53f655cb98fa3c3bdef8a808a693ca192.168.25.153:7003

  slots:10923-16383 (5461 slots) master

M: 2a61b87b49e5b1c84092918fa2467dd70fec115f192.168.25.153:7004

  slots: (0 slots) master

  replicates 5a8523db7e12ca600dc82901ced06741b3010076

M: 14848b8c813766387cfd77229bd2d1ffd6ac8d65192.168.25.153:7005

  slots: (0 slots) master

  replicates bf6f0929044db485dea9b565bb51e0c917d20a53

M: 3192cbe437fe67bbde9062f59d5a77dabcd0d632192.168.25.153:7006

  slots: (0 slots) master

  replicates c5e334dc4a53f655cb98fa3c3bdef8a808a693ca

[OK] All nodes agree about slotsconfiguration.

>>> Check for open slots...

>>> Check slots coverage...

[OK]All 16384 slots covered.