【docker】【redis】2.docker上设置redis集群---Redis Cluster部署【集群服务】【解决在docker中redis启动后，状态为Restarting，日志报错：Configured to not listen anywhere, exiting.问题】【Waiting for the cluster to join...问题】

2023-08-02 10:45:40

参考地址：https://www.cnblogs.com/zhoujinyi/p/6477133.html

https://www.cnblogs.com/cxbhakim/p/9151720.html

https://blog.csdn.net/qq442270636/article/details/79254240/

承接上一篇，【docker】【redis】1.docker安装redis【单点redis服务】

1.docker上拉取了redis镜像后，再从docker资源库获取ruby镜像

docker pull redis:4.0.8

docker pull ruby

此时docker容器中的镜像有【mysql与此无关】

redis和ruby就是redis cluster所有工具

2.搭建redis cluster环境

2.1 在根目录创建apps/目录，在apps目录下创建redis-cluster 目录

进入新创建的redis-cluster目录下，创建一个文件redis-cluster.tmpl

touch redis-cluster.tmpl

编辑新创建的文件

vi redis-cluster.tmpl

编辑文件进入后

i 进行插入操作

复制一下文件内容到文件中【红字部分需要添加，否则会引起3中最后的问题Waiting for the cluster to join...】

port ${PORT}
protected-mode no

cluster-enabled yes

cluster-config-file nodes.conf

cluster-node-timeout 5000

cluster-announce-ip 39.10X.XX.XX //自己服务器IP

cluster-announce-port ${PORT}

cluster-announce-bus-port 1${PORT}

appendonly yes

复制完成，esc退出，

输入：wq保存并退出vim编辑器

操作完成查看文件内容：

cat redis-cluster.tmpl

2.2 创建自定义的network

还是在该目录下

执行命令

docker network create redis-net

2.3 在/apps/redis-cluster下生成conf和data目标，并生成配置信息

直接执行脚本，在redis-cluster目录下生成conf和data目标，并生成配置信息【注意，此处生成配置信息后，配置内容中未指定确切端口，仍然是${port}，因此需要修改配置文件指定端口，详情请查看2.4》解决在docker中redis启动后，状态为Restarting，日志报错：Configured to not listen anywhere, exiting.问题】

for port in `seq 7000 7005`; do \

  mkdir -p ./${port}/conf \ && PORT=${port} envsubst < ./redis-cluster.tmpl > ./${port}/conf/redis.conf \ && mkdir -p ./${port}/data; \

done

效果如下：

粘贴脚本后，点击回车，执行完成后，

输入 ls -al命令，查看已经创建成功7000-7005文件夹以及内部的配置

共生成6个文件夹，从7000到7005，每个文件夹下包含data和conf文件夹，同时conf里面有redis.conf配置文件

================================如果没有出错，此段忽略--START========================================

如果创建出错，可以使用删除文件夹命令进行递归删除操作

centOS 删除文件夹命令【删除文件夹以及文件夹下所有的内容】

rm -rf 文件夹名

例如：在当前目录下删除文件夹7000以及文件夹下所有的文件和目录

rm -rf 7000

=================================如果没有出错，此段忽略--END=======================================

2.3 创建6个redis容器

跟上一步一样，直接复制脚本并执行，创建6个redis容器

for port in `seq 7000 7005`; do \

  docker run -d -ti -p ${port}:${port} -p 1${port}:1${port} \

  -v /apps/redis-cluster/${port}/conf/redis.conf:/usr/local/etc/redis/redis.conf \

  -v /apps/redis-cluster/${port}/data:/data \

  --restart always --name redis-${port} --net redis-net \

  --sysctl net.core.somaxconn=1024 redis:4.0.8 redis-server /usr/local/etc/redis/redis.conf; \

done

效果如下：

执行 docker ps命令，查看创建的redis6个容器的运行情况

然后会发现，所有的redis启动容器的状态都是Restarting 状态。【如果所有的状态都是Up状态，则直接跳过本问题的处理】

并且使用桌面工具测试连接连接不上。

　　2.4》解决在docker中redis启动后，状态为Restarting，日志报错：Configured to not listen anywhere, exiting.问题

要解决上面的问题

是因为7000-7005目录下生成的conf目录下的redis.conf文件中的配置并未完善，分别修改${PORT}修改为对应的具体端口

原本配置文件中的内容：

修改后的文件内容：

修改完成后，

分别停止并移除 redis容器

然后重新执行启动redis容器的脚本

for port in `seq 7000 7005`; do \

  docker run -d -ti -p ${port}:${port} -p 1${port}:1${port} \

  -v /apps/redis-cluster/${port}/conf/redis.conf:/usr/local/etc/redis/redis.conf \

  -v /apps/redis-cluster/${port}/data:/data \

  --restart always --name redis-${port} --net redis-net \

  --sysctl net.core.somaxconn=1024 redis:4.0.8 redis-server /usr/local/etc/redis/redis.conf; \

done

此时可以使用Redis Desktop Manager这个redis桌面工具连接测试是否可以连接成功

3.最后，通过启动ruby来实现集群

跟上一步一样，粘贴脚本后，回车执行脚本

echo yes | docker run -i --rm --net redis-net ruby sh -c '\

  gem install redis && wget http://download.redis.io/redis-stable/src/redis-trib.rb  && ruby redis-trib.rb create --replicas 1 \

  '"$(for port in `seq 7000 7005`; do \

    echo -n "$(docker inspect --format '{{ (index .NetworkSettings.Networks "redis-net").IPAddress }}' "redis-${port}")":${port} ' ' ; \

  done)"

效果如下：

最后依旧没有解决

Waiting for the cluster to join.............................................................................................................................................................................

的问题，即使加了protected-mode no 属性也没有解决！！！！

=============================================问题Waiting for the cluster to join..问题暂未解决========================================================

如果未在最开始的redis-cluster.tmpl文件中，未配置属性

【同样，这个配置文件会在创建7000-7005目录时将文件中的配置同步复制到这几个目录下的conf目录中的redis.conf文件中，因此如果redis-cluster.tmpl文件中未配置，则还需要修改这几个目录下的所有redis.conf文件中的配置】

#是否开启保护模式，默认开启。要是配置里没有指定bind和密码。开启该参数后，redis只会本地进行访问，拒绝外部访问。要是开启了密码   和bind，可以开启。否   则最好关闭，设置为no。
protected-mode no

那么如果未写本属性，则默认为yes开启保护模式，则会导致下面的Waiting for the cluster to join..问题

解决方法：

就是上面说的，分别在redis.conf文件中加上属性【protected-mode no】

同时，

还应该停止并删除所有的redis容器，

当然，如果走到这一步了，说明ruby也启动了，所以ruby容器也应该停止

补充完善redis.conf中的属性后，重新批量启动redis容器。

=========================================问题：Node 172.20.0.3:7001 is not empty. Either the node already knows other nodes (check with CLUSTER NODES) or contains some key in database 0=======================

在执行第3点，启动ruby来实现集群的脚本后，出现这个问题

参考地址：https://blog.csdn.net/vtopqx/article/details/50235737

第一步：

删除7000-7005每个目录下的data目录下的.aof和nodes.conf文件还有.rdb后缀的文件（网上方法有第三个文件，我这里暂时没有）