十、Redis 有了主从复制, 为什么还需要搭建集群?以及如何搭建Redis集群详细图解

前言

对于一个初学者来说,心里一直有一个疑惑,主从复制不就是集群嘛(一主多从),干嘛还要搭建集群。主从复制和集群又是什么关系呢?接下来就让我来带大家一起了解一下!

主从复制

十、Redis 有了主从复制, 为什么还需要搭建集群?以及如何搭建Redis集群详细图解
对于主从复制是不是集群, 在这个概念上,我上百度查询了一下, 并没有一个明确的回答。 那么我就以自己的理解跟大家来讲一下,有什么不对的地方, 欢迎下方评论区留言。我认为主从复制准确的来讲,是一种数据冗余技术。何为数据冗余技术:数据冗余技术是使用一组或多组存储数据的副本,这就叫数据冗余技术。比如镜像就是一种数据冗余技术。说直白一点就是一份数据有多个副本, 存储在不同的地方。但是主从复制 又具备集群的功能, 例如每次访问的数据, 可能并不是从同一台Redis实例中读取出来的。 这里我先称之为 “伪集群”。

Redis集群

十、Redis 有了主从复制, 为什么还需要搭建集群?以及如何搭建Redis集群详细图解
在这里请大家思考一个问题, 上面我们讲到一主多从, 但是只有主(Master) 服务器才具备 的功能, 服务器是只有的功能的。然而 Redis官方给出的读写速度大概在 100000 / 秒。 想象一下, 像 BAT 这种大公司, 100000 / 秒 的读写速度够用吗?答案肯定是不够用的,那么我们就想, 能不能有多台 主(Master) 服务器呢,就这样 Redis 集群出现了。Redis 集群很好的解决了 不够的问题。 注:Redis 集群是 Redis 3.0 版本以后才有的功能, 3.0 以前的版本是没有的

搭建Redis集群

准备搭建一个 三主三从 的Redis集群

环境准备

1、创建配置文件

首先在每台服务器的 /usr/local/ 路径下创建 redis-cluster 文件夹, 然后在 redis-cluster 文件夹在创建 master , slave 文件夹,并且把 /opt/redis-6.2.5/redis.conf 配置文件在每台服务器的 master ,slave 文件夹中复制一份。

[root@TR ~]# cd /usr/local/
[root@TR local]# mkdir redis-cluster
[root@TR local]# cd redis-cluster
[root@TR redis-cluster]# mkdir master
[root@TR redis-cluster]# mkdir slave
[root@TR redis-cluster]# ll
total 0
drwxr-xr-x 2 root root 6 Oct 16 20:36 master
drwxr-xr-x 2 root root 6 Oct 16 20:37 slave

# 复制配置文件
[root@TR ~]# cd /opt/redis-6.2.5
[root@TR redis-6.2.5]# cp redis.conf /usr/local/redis-cluster/master/
[root@TR redis-6.2.5]# cp redis.conf /usr/local/redis-cluster/slave/
 

2、修改配置文件

  1. 守护进程运行 daemonize yes
  2. 将6个配置文件中的端口一次修改成 port 6379 、port 6380 、port 6381、 port 6382 、port 6383、port 6384
  3. 修改 bind 绑定的地址, 改成对应服务器的 ip 即可(注:这里的 ip 不是云服务器的Ip , 需要填写 eth0网卡的ip
  4. 修改数据目录 dir , 改成 redis.conf配置文件的位置即可, 例如:dir /usr/local/redis-cluster/master
  5. 启动集群 cluster-enabled yes
  6. 修改 cluster-config-file nodes-6379.conf (这里的 nodes-63XX.conf最好和port 对应上)
  7. cluster-node-timeout 5000
  8. appendonly yes

3、启动6个Redis实例

# 106.14.157.48 服务器
redis-server /usr/local/redis-cluster/master/redis.conf
redis-server /usr/local/redis-cluster/slave/redis.conf

# 49.232.112.117 服务器
redis-server /usr/local/redis-cluster/master/redis.conf
redis-server /usr/local/redis-cluster/slave/redis.conf

# 101.34.253.57 服务器
redis-server /usr/local/redis-cluster/master/redis.conf
redis-server /usr/local/redis-cluster/slave/redis.conf


# 查询redis 运行情况 , 这里只有两个redis 实例,是因为这是查询一台服务器的原因
[root@TR ~]# ps -ef | grep redis
root      109791       1  0 18:24 ?        00:00:00 redis-server 10.0.4.7:6383 [cluster]
root      109805       1  0 18:24 ?        00:00:00 redis-server 10.0.4.7:6384 [cluster]
root      109945  104144  0 18:25 pts/0    00:00:00 grep --color=auto redis
[root@TR ~]# 

4、启动集群

启动集群的时候,如果遇到 Waiting for the cluster to join 的字样, 请看我的另外一篇文章:搭建Redis集群遇到的问题:Waiting for the cluster to join~~~

# 1.进入 Redis 源码的src 文件夹
[root@TR opt]# cd /opt/redis-6.2.5/src/

# 2. 执行启动集群的命令
# 命令最后一个参数 ‘1’ 的意思是 “一主一从”的配置。是通过计算得来的, 计算方式为: master 总数量 / slave 总数量
[root@TR src]# ./redis-cli --cluster create 106.14.157.48:6379 49.232.112.117:6381 101.34.253.57:6383 106.14.157.48:6380 49.232.112.117:6382 101.34.253.57:6384 --cluster-replicas 1
>>> Performing hash slots allocation on 6 nodes...
Master[0] -> Slots 0 - 5460
Master[1] -> Slots 5461 - 10922
Master[2] -> Slots 10923 - 16383
Adding replica 49.232.112.117:6382 to 106.14.157.48:6379
Adding replica 101.34.253.57:6384 to 49.232.112.117:6381
Adding replica 106.14.157.48:6380 to 101.34.253.57:6383
M: 2d9ab9c1c95c13478758ae6ec45434fdb620688c 106.14.157.48:6379
   slots:[0-5460] (5461 slots) master
M: edd1856f57ffbb50ee5ce690964b5e780118608e 49.232.112.117:6381
   slots:[5461-10922] (5462 slots) master
M: 5998783763f617cc7ff40dd2d55ad0cbce72ea66 101.34.253.57:6383
   slots:[10923-16383] (5461 slots) master
S: f0fdd2cd69c1e37ff510cf990ae381005609fc81 106.14.157.48:6380
   replicates 5998783763f617cc7ff40dd2d55ad0cbce72ea66
S: b2893c8a996c726264096a49b84df367509b9ceb 49.232.112.117:6382
   replicates 2d9ab9c1c95c13478758ae6ec45434fdb620688c
S: 560ef0cd7c6799a12a75c930cb0063cc2d613cb4 101.34.253.57:6384
   replicates edd1856f57ffbb50ee5ce690964b5e780118608e
Can I set the above configuration? (type 'yes' to accept): yes
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join

>>> Performing Cluster Check (using node 106.14.157.48:6379)
M: 2d9ab9c1c95c13478758ae6ec45434fdb620688c 106.14.157.48:6379
   slots:[0-5460] (5461 slots) master
   1 additional replica(s)
M: edd1856f57ffbb50ee5ce690964b5e780118608e 49.232.112.117:6381
   slots:[5461-10922] (5462 slots) master
   1 additional replica(s)
S: f0fdd2cd69c1e37ff510cf990ae381005609fc81 106.14.157.48:6380
   slots: (0 slots) slave
   replicates 5998783763f617cc7ff40dd2d55ad0cbce72ea66
S: b2893c8a996c726264096a49b84df367509b9ceb 49.232.112.117:6382
   slots: (0 slots) slave
   replicates 2d9ab9c1c95c13478758ae6ec45434fdb620688c
M: 5998783763f617cc7ff40dd2d55ad0cbce72ea66 101.34.253.57:6383
   slots:[10923-16383] (5461 slots) master
   1 additional replica(s)
S: 560ef0cd7c6799a12a75c930cb0063cc2d613cb4 101.34.253.57:6384
   slots: (0 slots) slave
   replicates edd1856f57ffbb50ee5ce690964b5e780118608e
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
[root@TR src]# 

到这里集群就搭建完成了。现在简单的来测试一下。

# 连接集群
# 参数解释:
#	-c: cluster集群的意思
#	-h: host 主机的意思
#	-p: port 端口的意思
[root@TR redis-6.2.5]# redis-cli -c -h 106.14.157.48 -p 6379
106.14.157.48:6379> set name "zhangsan"
-> Redirected to slot [5798] located at 49.232.112.117:6381
OK
49.232.112.117:6381> get name
"zhangsan"

测试二: 将 6379的master主机“宕机”后, 发现 6379 的slave 服务器的角色编程了master
十、Redis 有了主从复制, 为什么还需要搭建集群?以及如何搭建Redis集群详细图解

集群其余常用命令

# 查询集群的状态
cluster info 

# 查看集群节点列表
cluster nodes
上一篇:k8s - cluster concept


下一篇:分布式TF入门学习整理(一)