Redis的主从复制与集群配置实践

时间:2022-09-21 13:04:31

关于Redis的主从复制  -- 在slave的配置文件中指定master的ip和端口即可 

1.主从复制 (Master-slaves)  --- master可以读写,slaves可以是多个,只读

配置:
1.slave的配置文件中加入如下配置:
slaveof 192.168.1.1 6379 #制定master的ip和端口
2.启动slave Redis
redis-server /etc/redis/redis.conf --- 通过指定redis的配置文件,启动Redis服务

3.特别注意:
Redis的配置文件redis.conf可以改为其他的名字
配置文件中可以设置Redis服务的端口,和主从信息


Redis的集群        

                               --- Redis 3.0之后,至少需要3(Master)+3(Slave)才能建立集群,Redis建立集群后,会自动的分配主从-Master和Slave,

                                         为了保证安全每个Master节点可以做主从复制,进行纵向集群


1、源码下载,make
2、新建6个instance,3个master,3个slave;
3、新建实例之前要改一下redis.conf的内容,先改端口号,再改下面的cluster配置项

参考:
redis3.0.0 集群安装详细步骤:http://blog.csdn.net/xu470438000/article/details/42971091

建立Redis集群的步骤:-- 需要依赖Ruby环境
1.Linux下需要的环境,gcc, ruby,yum,rubygems, redis
1.安装gcc
sudo apt-get install gcc
2.安装ruby和yum
sudo apt-get install ruby 和 yum
3.安装rubygems -- 使用 yum安装
yum install rubygems
4.使用gem安装redis
gem install redis

2.下载redis的编译包或直接安装,放到指定目录中 --- 要想搭建集群,必须在编译后生成 二进制文件: redis-trib.rb
tax xvf tar xvf redis-3.0.1.tar.gz
make

注意: 安装报错 error: jemalloc/jemalloc.h: No such file or directory解决方法

使用 make MALLOC=libc 代替 make 对redis进行编译

eg:
$ make MALLOC=libc

3.更改redis配置文件 -- redis.conf

注意:默认redis端口是
port 6379
修改内容如下:
cluster-enabled yes
cluster-config-file nodes-6379.conf
cluster-node-timeout 5000
appendonly yes


4.完成以上操作后,将Redis文件夹复制5份到其他目录,并在没份中更改其redis配置 redis.conf,只需要更改端口即可

复制到其他文件夹下

eg:
cp -r redis1 redis2

eg:
redis1 -- port 6379
redis2 -- port 6381
redis3 -- port 6382
redis4 -- port 6385
redis5 -- port 6386
redis6 -- port 6387

5.分别启动每个Redis服务: ./redis-server ../redis.conf -- 按照指定配置文件,启动Redis服务

注意:如果是使用apt-get install 方式安装的Redis,则只需要复制多份redis.conf,更改Redis端口后, 分别安装配置文件启动Redis即可
eg:
redis-server /home/develop/redis/redis1.conf
redis-server /home/develop/redis/redis2.conf
...
redis-server /home/develop/redis/redis5.conf
redis-server /home/develop/redis/redis6.conf

6.启动完各个Redis服务后,开始建立集群:
找到编译后的src目录下的 redis-trib.rb,执行集群命令:

./redis-trib.rb create --replicas 1 127.0.0.1:6379 127.0.0.1:6381 127.0.0.1:6382 127.0.0.1:6385 127.0.0.1:6386 127.0.0.1:6387

可能会询问是否保存设置
Can I set the above configuration? (type 'yes' to accept):
回答yes
再输出一连串信息后,会显示OK
[OK] All 16384 slots covered.
这样redis-cluster集群就启动了


7.连接Redis集群 注意: 必须使用参数 -c 表示使用集群

$> redis-cli -c -p 6379

1. 查看集群状况:
$> cluster info
2.测试存值取值:
127.0.0.1:6379> set foo bar
-> Redirected to slot [12182] located at 127.0.0.1:6381
OK
127.0.0.1:6381> set hello world
-> Redirected to slot [866] located at 127.0.0.1:6379
OK
127.0.0.1:6379> get foo
-> Redirected to slot [12182] located at 127.0.0.1:6381
"bar"
127.0.0.1:6381> get hello
-> Redirected to slot [866] located at 127.0.0.1:6379
"world"



结果验证

配置正确的Redis集群:
develop@ubuntu14-dev3:~/redis/redis/redis1/redis-3.0.1/src$ sudo ./redis-trib.rb create --replicas 1 127.0.0.1:6379 127.0.0.1:6381 127.0.0.1:6382 127.0.0.1:6385 127.0.0.1:6386 127.0.0.1:6387
>>> Creating cluster
Connecting to node 127.0.0.1:6379: OK
Connecting to node 127.0.0.1:6381: OK
Connecting to node 127.0.0.1:6382: OK
Connecting to node 127.0.0.1:6385: OK
Connecting to node 127.0.0.1:6386: OK
Connecting to node 127.0.0.1:6387: OK
>>> Performing hash slots allocation on 6 nodes...
Using 3 masters:
127.0.0.1:6379
127.0.0.1:6381
127.0.0.1:6382
Adding replica 127.0.0.1:6385 to 127.0.0.1:6379
Adding replica 127.0.0.1:6386 to 127.0.0.1:6381
Adding replica 127.0.0.1:6387 to 127.0.0.1:6382
M: dcb32d4581552facd6dd68ae7d8a0fa9a058b980 127.0.0.1:6379
slots:0-5460 (5461 slots) master
M: f53789853498701a164984187594745d532a191b 127.0.0.1:6381
slots:5461-10922 (5462 slots) master
M: 5d9495f36c8a3b3b2a717cfd948a237ddec85eec 127.0.0.1:6382
slots:10923-16383 (5461 slots) master
S: 052062e69da1b4d467cd102037e287f3091d15df 127.0.0.1:6385
replicates dcb32d4581552facd6dd68ae7d8a0fa9a058b980
S: d97796e6c0f0f858c4db807d490483cbb1954bf7 127.0.0.1:6386
replicates f53789853498701a164984187594745d532a191b
S: c0335c2de4b471d23da87c6a77a9d554b11e92c0 127.0.0.1:6387
replicates 5d9495f36c8a3b3b2a717cfd948a237ddec85eec
Can I set the above configuration? (type 'yes' to accept): yes
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join...
>>> Performing Cluster Check (using node 127.0.0.1:6379)
M: dcb32d4581552facd6dd68ae7d8a0fa9a058b980 127.0.0.1:6379
slots:0-5460 (5461 slots) master
M: f53789853498701a164984187594745d532a191b 127.0.0.1:6381
slots:5461-10922 (5462 slots) master
M: 5d9495f36c8a3b3b2a717cfd948a237ddec85eec 127.0.0.1:6382
slots:10923-16383 (5461 slots) master
M: 052062e69da1b4d467cd102037e287f3091d15df 127.0.0.1:6385
slots: (0 slots) master
replicates dcb32d4581552facd6dd68ae7d8a0fa9a058b980
M: d97796e6c0f0f858c4db807d490483cbb1954bf7 127.0.0.1:6386
slots: (0 slots) master
replicates f53789853498701a164984187594745d532a191b
M: c0335c2de4b471d23da87c6a77a9d554b11e92c0 127.0.0.1:6387
slots: (0 slots) master
replicates 5d9495f36c8a3b3b2a717cfd948a237ddec85eec
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.



测试集群: --- 特别注意参数: -c 只有加上这个参数才能使用集群

$ redis-cli -c -p 6379
127.0.0.1:6379> keys *
(empty list or set)
127.0.0.1:6379> set a aa #a存储在节点6382上
-> Redirected to slot [15495] located at 127.0.0.1:6382
OK
127.0.0.1:6379> set b bb #b存储在节点6379上
-> Redirected to slot [3300] located at 127.0.0.1:6379
OK
127.0.0.1:6379> set c cc #a存储在节点6381上
-> Redirected to slot [7365] located at 127.0.0.1:6381
OK
127.0.0.1:6379> set d dd #d和e存储在节点6382上
-> Redirected to slot [11298] located at 127.0.0.1:6382
OK
127.0.0.1:6379> set e ee
OK
127.0.0.1:6379> set f ff #f存储在节点6379上
-> Redirected to slot [3168] located at 127.0.0.1:6379
OK
127.0.0.1:6379> keys *
1) "f"
2) "b"
127.0.0.1:6379> get c #从节点6381上,取c的值
-> Redirected to slot [7365] located at 127.0.0.1:6381
"cc"



Redis动态添加和删除节点

Redis集群添加节点

1:首先把需要添加的节点启动

cd /usr/local/cluster/

mkdir 7006

cp /usr/local/cluster/redis.conf  /usr/local/cluster/7006/

cd /usr/local/cluster/7006/

vi redis.conf

##修改redis.conf中的port参数的值为7006

redis-server redis.conf

2:执行以下命令,将这个新节点添加到集群中

cd /usr/local/redis3.0/src/

./redis-trib.rb add-node 127.0.0.1:7006 127.0.0.1:7000

 Redis的主从复制与集群配置实践

3:执行命令redis-cli -c -p 7000 cluster nodes,查看刚才新增的节点

 Redis的主从复制与集群配置实践

4:增加了新的节点之后,这个新的节点可以成为主节点或者是从节点

4.1 把这个节点变成主节点,使用redis-trib程序,将集群中的某些哈希槽移动到新节点里面, 这个新节点就成为真正的主节点了。

执行下面的命令对集群中的哈希槽进行移动

cd /usr/local/redis3.0/src

./redis-trib.rb reshard 127.0.0.1:7000

系统会提示我们要移动多少哈希槽,这里移动1000

 Redis的主从复制与集群配置实践

然后还需要指定把这些哈希槽转移到哪个节点上,

 Redis的主从复制与集群配置实践

输入我们刚才新增的节点的ID

f32dc088c881a6b930474fc5b52832ba2ff71899

然后需要我们指定转移哪几个几点的哈希槽

 Redis的主从复制与集群配置实践

输入all 表示从所有的主节点中随机转移,凑够1000个哈希槽

然后再输入yesredis集群就开始分配哈希槽了。

至此,一个新的主节点就添加完成了,执行命令查看现在的集群中节点的状态

redis-cli -c -p 7000 cluster nodes

 Redis的主从复制与集群配置实践

 

4.2:把这个节点变成从节点

前面我们已经把这个新节点添加到集群中了,现在我们要让新节点成为127.0.0.1:7001的从节点,只需要执行下面的命令就可以了,命令后面的节点ID就是127.0.0.1:7001的节点ID

redis-cli -c -p 7006 cluster replicate 0b00721a509444db793d28448d8f02168b94bd38

使用下面命令来确认一下127.0.0.1:7006是否已经成为127.0.0.1:7001的从节点

 redis-cli -p 7000 cluster nodes | grep slave | grep 0b00721a509444db793d28448d8f02168b94bd38

看到下面图片中的情况就表示添加成功

 

 Redis的主从复制与集群配置实践

 

 

Redis集群删除节点

1:如果删除的节点是主节点,这里我们删除127.0.0.1:7006节点,这个节点有1000个哈希槽

首先要把节点中的哈希槽转移到其他节点中,执行下面的命令

cd /usr/local/redis3.0/src

./redis-trib.rb reshard 127.0.0.1:7000

系统会提示我们要移动多少哈希槽,这里移动1000个,因为127.0.0.1:7006节点有1000个哈希槽

然后系统提示我们输入要接收这些哈希槽的节点的ID,这里使用127.0.0.1:7001的节点ID

然后要我们选择从那些节点中转出哈希槽,这里一定要输入127.0.0.1:7006这个节点的ID,最后输入 done  表示输入完毕

最后一步,使用下面的命令把这个节点删除

cd /usr/local/redis3.0/src/

./redis-trib.rb del-node 127.0.0.1:7006 127.0.0.1:7006

2:如果节点是从节点的,直接使用下面的命令删除即可。

cd /usr/local/redis3.0/src/

./redis-trib.rb del-node 127.0.0.1:7006 127.0.0.1:7006