laravel项目利用twemproxy部署redis集群的完整步骤

前言

twemproxy是twitter开发的一个redis代理proxy，Twemproxy可以把多台redis server当作一台使用，开发人员通过twemproxy访问这些redis servers 的时候不用关心到底去哪一台redis server读取k-v数据或者把k-v数据更新到数据集中，也解决了多台服务器中redis共享的问题。如果借助于redis的master-slave replication，能保证在任何一台redis不能工作情况下，仍然能够保证能够存在一个整个的数据集。

Twemproxy有何用途呢？它可以：

• 通过代理的方式减少缓存服务器的连接数
• 自动在多台缓存服务器间共享数据
• 通过不同的策略与散列函数支持一致性散列
• 通过配置的方式禁用失败的结点
• 运行在多个实例上，客户端可以连接到首个可用的代理服务器
• 支持请求的流式与批处理，因而能够降低来回的消耗

下面介绍一下twemproxy的安装和配置：

1、安装twemproxy前需要先安装m4、autoconf、automake、libtool、gcc，不然会报各种错

安装m4

wget http://mirrors.kernel.org/gnu/m4/m4-1.4.13.tar.gz
&& tar -xzvf m4-1.4.13.tar.gz
&& cd m4-1.4.13
&& ./configure ?Cprefix=/usr/local 
make && make install

安装autoconf、automake、libtool、gcc

yum -y install autoconf automake libtool gcc 

2、安装twemproxy

git clone https://github.com/twitter/twemproxy.git
autoreconf -fvi #生成configure文件
.configure
make && make install

3、编辑配置文件

vim conf/nutcracker.yml  

alpha:
 listen: 127.0.0.1:22121 #监听端口
 hash: fnv1a_64  #key值hash算法，默认fnv1a_64
 distribution: ketama  #分布算法 
#ketama一致性hash算法；modula非常简单，就是根据key值的hash值取模；random随机分布
 auto_eject_hosts: true  #摘除后端故障节点 
 redis: true   #是否是redis缓存，默认是false
 timeout: 400   #代理与后端超时时间，毫秒
 server_retry_timeout: 200000 #摘除故障节点后重新连接的时间，毫秒
 server_failure_limit: 1  #故障多少次摘除
 servers:
 - 172.16.175.145:6379:1 
 - 172.16.175.122:6379:1

4、更改redis配置文件

redis监听的ip和端口要与twemproxy对应（因为我只是在其中的一台机器上装了twemproxy，如果两台都装的话可以不用改）

分别更改两台服务器redis.conf中的bind选项,将127.0.0.1改为本例中的172.16.175.145和172.16.175.122

5、开启twemproxy

nutcracker -t -c /twemproxy/conf/nutcracker.yml 
#测试配置文件 如果不加-c 默认是检测conf/nutcracker.yml

nutcracker -d -c /twemproxy/conf/nutcracker.yml -p -o /data/logs/twemproxy/redisproxy.log 
#启动并将日志记录到/data/logs/twemproxy/redisproxy.log

6、将项目中的redis连接改为twemproxy的ip和端口

我项目使用的是laravel，只需将.env中的REDIS_HOST和REDIS_PORT设置上面的为127.0.0.1和22121

注意，还需要将config文件夹下的database.php中的redis配置里的 'database' => 0注释掉，predis 对这个配置默认执行 select 操作，会导致连接错误。

做一下redis的读写测试，不出意外的话，twemproxy就可以正常使用啦！

总结