Redis集群搭建与维护
一、概述
Redis3.0版本之后支持Cluster.
二、redis cluster安装
1、下载和解包
cd /usr/local/ wget http://download.redis.io/releases/redis-3.2.1.tar.gz tar -zxvf ./redis-3.2.1.tar.gz
2、 编译安装
确认安装了gcc
yum install gcc cd redis-3.2.1 make MALLOC=libc make install
创建集群目录
我们计划集群中 Redis 节点的端口号为 9001-9006
,端口号即集群下各实例文件夹。数据存放在 端口号/data
文件夹中。
mkdir /usr/local/redis-cluster cd redis-cluster/ mkdir -p 9001/data 9002/data 9003/data 9004/data 9005/data 9006/data
2.复制执行脚本
在 /usr/local/redis-cluster
下创建 bin
文件夹,用来存放集群运行脚本,并把安装好的 Redis 的 src
路径下的运行脚本拷贝过来。看命令
mkdir redis-cluster/bin cd /usr/local/redis/src cp mkreleasehdr.sh redis-benchmark redis-check-aof redis-cli redis-server redis-trib.rb /usr/local/redis-cluster/bin
3.复制新 Redis 实例
我们现在从已安装好的 Redis 中复制一个新的实例到 9001
文件夹,并修改 redis.conf
配置。
cp -rf /usr/local/redis/* /usr/local/redis-cluster/9001
注意,修改 /usr/local/redis-cluster/9001/redis.conf
配置和单点唯一区别是下图部分,其余还是常规的这几项:
port 9001(每个节点的端口号) daemonize yes bind 192.168.119.131(绑定当前机器 IP) dir /usr/local/redis-cluster/9001/data/(数据文件存放位置) pidfile /var/run/redis_9001.pid(pid 9001和port要对应) cluster-enabled yes(启动集群模式) cluster-config-file nodes9001.conf(9001和port要对应) cluster-node-timeout 15000 appendonly yes
集群搭建配置重点就是取消下图中的这三个配置的注释:
再复制出五个新 Redis 实例
我们已经完成了一个节点了,其实接下来就是机械化的再完成另外五个节点,其实可以这么做:把 9001 实例
复制到另外五个文件夹中,唯一要修改的就是 redis.conf
中的所有和端口的相关的信息即可,其实就那么四个位置。开始操作,看图:
cp -rf /usr/local/redis-cluster/9001/* /usr/local/redis-cluster/9002 cp -rf /usr/local/redis-cluster/9001/* /usr/local/redis-cluster/9003 cp -rf /usr/local/redis-cluster/9001/* /usr/local/redis-cluster/9004 cp -rf /usr/local/redis-cluster/9001/* /usr/local/redis-cluster/9005 cp -rf /usr/local/redis-cluster/9001/* /usr/local/redis-cluster/9006
修改 9002-9006 的 redis.conf 文件
其实非常简单了,你通过搜索会发现其实只有四个点需要修改,我们全局替换下吧,进入相应的节点文件夹,做替换就好了。命令非常简单,看图:
vim redis.conf
:%s/9001/9002/g
其实我们也就是替换了下面这四行:
port 9002 dir /usr/local/redis-cluster/9002/data/ cluster-config-file nodes-9002.conf pidfile /var/run/redis_9002.pid
到这里,我们已经把最基本的环境搞定了,接下来就是启动了。
1.启动 9001-9006 六个节点
/usr/local/bin/redis-server /usr/local/redis-cluster/9001/redis.conf /usr/local/bin/redis-server /usr/local/redis-cluster/9002/redis.conf /usr/local/bin/redis-server /usr/local/redis-cluster/9003/redis.conf /usr/local/bin/redis-server /usr/local/redis-cluster/9004/redis.conf /usr/local/bin/redis-server /usr/local/redis-cluster/9005/redis.conf /usr/local/bin/redis-server /usr/local/redis-cluster/9006/redis.conf
可以检查一下是否启动成功:netstate -nltp | grep redis
2.随便找一个节点测试试
/usr/local/redis-cluster/bin/redis-cli -h 192.168.119.131 -p 9001
set name mafly
连接成功了,但好像报错了阿???
这是因为虽然我们配置并启动了 Redis 集群服务,但是他们暂时还并不在一个集群中,互相直接发现不了,而且还没有可存储的位置,就是所谓的slot(槽)。
3.安装集群所需软件
由于 Redis 集群需要使用 ruby 命令,所以我们需要安装 ruby 和相关接口
yum install ruby
yum install rubygems
gem install redis
安装redis时出错:
看样子要升级ruby版本
升级Ruby的版本
安装rvm,我不知道这是个什么东西,但是感觉像是Ruby的一个包管理器。
curl -L get.rvm.io | bash -s stable
WTF,又出问题了
气急败坏的照着他说的做
# gpg2 --recv-keys 409B6B1796C275462A1703113804BB82D39DC0E3 gpg: keyring `/root/.gnupg/secring.gpg' created gpg: requesting key D39DC0E3 from hkp server keys.gnupg.net gpg: /root/.gnupg/trustdb.gpg: trustdb created gpg: key D39DC0E3: public key "Michal Papis (RVM signing) <mpapis@gmail.com>" imported gpg: no ultimately trusted keys found gpg: Total number processed: 1 gpg: imported: 1 (RSA: 1)
然后重新下载rvm安装,成功了
curl -L get.rvm.io | bash -s stable
source /usr/local/rvm/scripts/rvm
查看Ruby可用版本
可以看到最新的版本是2.6,保守起见安装2.4.4
rvm install 2.4.4
至此,我们升级了Ruby的版本。
重新安装gem redis接口
gem install redis
建立集群:
/usr/local/redis-cluster/bin/redis-trib.rb create --replicas 1 192.168.119.131:9001 192.168.119.131:9002 192.168.119.131:9003 192.168.119.131:9004 192.168.119.131:9005 192.168.119.131:9006
简单解释一下这个命令:调用 ruby 命令来进行创建集群,--replicas 1
表示主从复制比例为 1:1,即一个主节点对应一个从节点;然后,默认给我们分配好了每个主节点和对应从节点服务,以及 solt 的大小,因为在 Redis 集群中有且仅有 16383 个 solt ,默认情况会给我们平均分配,当然你可以指定,后续的增减节点也可以重新分配。
上图则代表集群搭建成功啦!!!
这里需要注意的是,当防火墙端口号没有打开全,会报waiting for the cluster to join....一直等待的情况,这是因为:
集群不仅需要开通redis客户端连接的端口,而且需要开通集群总线端口
验证一下:
依然是通过客户端命令连接上,通过集群命令看一下状态和节点信息等。
/usr/local/redis-cluster/bin/redis-cli -c -h 192.168.119.131 -p 9001
cluster info
cluster nodes
通过命令,可以详细的看出集群信息和各个节点状态,主从信息以及连接数、槽信息等。这么看到,我们已经真的把 Redis 集群搭建部署成功啦!
设置一个 mafly:
你会发现,当我们 set name mafly
时,出现了 Redirected to slot
信息并自动连接到了9002
节点。这也是集群的一个数据分配特性,这里不详细说了。
重启集群服务
通过pkill -9 redis杀死 reids 进程之后,重新启动各个节点,集群自动创建成功。
注意:如果在创建集群的时候,创建失败了,如果将来再想重新创建需要删除data目录下的*.aof和*.conf,*,rdb文件,再重新启动所以redis服务再创建集群即可。