twemproxy是twitter开发的一个redis代理proxy,Twemproxy可以把多台redis server当作一台使用,开发人员通过twemproxy访问这些redis servers 的时候不用关心到底去哪一台redis server读取k-v数据或者把k-v数据更新到数据集中,也解决了多台服务器中redis共享的问题。如果借助于redis的master-slave replication,能保证在任何一台redis不能工作情况下,仍然能够保证能够存在一个整个的数据集。
下面介绍一下twemproxy的安装和配置:
1、安装twemproxy前需要先安装m4、autoconf、automake、libtool、gcc,不然会报各种错
安装m4
wget http://mirrors.kernel.org/gnu/m4/m4-1.4.13.tar.gz
&& tar -xzvf m4-1.4..tar.gz
&& cd m4-1.4.
&& ./configure --prefix=/usr/local
make && make install
安装autoconf、automake、libtool、gcc
yum -y install autoconf automake libtool gcc
2、安装twemproxy
git clone https://github.com/twitter/twemproxy.git
autoreconf -fvi #生成configure文件
./configure
make && make install
3、编辑配置文件
vim conf/nutcracker.yml
alpha:
listen: 127.0.0.1: #监听端口
hash: fnv1a_64 #key值hash算法,默认fnv1a_64
distribution: ketama #分布算法
#ketama一致性hash算法;modula非常简单,就是根据key值的hash值取模;random随机分布
auto_eject_hosts: true #摘除后端故障节点
redis: true #是否是redis缓存,默认是false
timeout: #代理与后端超时时间,毫秒
server_retry_timeout: #摘除故障节点后重新连接的时间,毫秒
server_failure_limit: #故障多少次摘除
servers:
- 172.16.175.145::
- 172.16.175.122::
4、更改redis配置文件
redis监听的ip和端口要与twemproxy对应(因为我只是在其中的一台机器上装了twemproxy,如果两台都装的话可以不用改)
分别更改两台服务器redis.conf中的bind选项,将127.0.0.1改为本例中的172.16.175.145和172.16.175.122
5、开启twemproxy
nutcracker -t -c /twemproxy/conf/nutcracker.yml
#测试配置文件 如果不加-c 默认是检测conf/nutcracker.yml
nutcracker -d -c /twemproxy/conf/nutcracker.yml -p -o /data/logs/twemproxy/redisproxy.log
#启动并将日志记录到/data/logs/twemproxy/redisproxy.log
6、将项目中的redis连接改为twemproxy的ip和端口
我项目使用的是laravel,只需将.env中的REDIS_HOST和REDIS_PORT设置上面的为127.0.0.1和22121
注意,还需要将config文件夹下的database.php中的redis配置里的 'database' => 0注释掉,predis 对这个配置默认执行 select 操作,会导致连接错误。
做一下redis的读写测试,不出意外的话,twemproxy就可以正常使用啦!