redis学习(集群篇)
本次演练采用两台服务器,6个节点,redis版本采用3.2.4版本,两台的服务器地址分别是(192.168.205.128),(192.168.205.129)
1.安装过程传送门http://www.cnblogs.com/smileWwww/p/6623914.html,本文就不在说明了请自行安装就好了
2.笔者将redis安装在/usr/etc/redis目录下,然后将安装好的redis-3.2.4目录下的src中的 redis-trib.rb移动到/usr/local/bin目录下。
使用命令:
cp /usr/etc/redis/redis-3.2.4 /usr/local/bin
3.创建redis的节点,分别在(192.168.205.128)与(192.168.205.129)下的/usr/etc/reids下创建cluster目录,然后在(192.168.205.128)的cluster目录下创建7000,7001,7002三个目录,在(192.168.205.129)下创建7003,7004,7005,并将安装后redis中的redis.conf文件分别复制到这6个目录
使用命令:
mkdir /usr/etc/redis/cluster; mkdir /usr/etc/redis/cluster/7000; ...
//复制文件
cp /usr/etc/redis/redis-3.2.4/redis.conf /usr/etc/redis/cluster/7000
...
4.修改安装后的redis配置文件redis.conf,修改规则如下:
port 7000 //端口7000,7002,7003 bind 本机ip //默认ip为127.0.0.1 需要改为其他节点机器可访问的ip 否则创建集群时无法访问对应的端口,无法创建集群 daemonize yes //redis后台运行 pidfile /var/run/redis_7000.pid //pidfile文件对应7000,7001,7002 cluster-enabled yes //开启集群 把注释#去掉 cluster-config-file nodes_7000.conf //集群的配置 配置文件首次启动自动生成 7000,7001,7002 cluster-node-timeout 15000 //请求超时 默认15秒,可自行设置 appendonly yes //aof日志开启 有需要就开启,它会每次写操作都记录一条日志
两台服务器上都是同样操作,除了节点目录不同。
5.启动各个节点.
#第一台机器上 redis-server /usr/etc/redis/cluster/7000/redis.conf redis-server /usr/etc/redis/cluster/7001/redis.conf redis-server /usr/etc/redis/cluster/7002/redis.conf #第二台机器上 redis-server /usr/etc/redis/cluster/7003/redis.conf redis-server /usr/etc/redis/cluster/7004/redis.conf redis-server /usr/etc/redis/cluster/7005/redis.conf
6.查看各个节点的运行状态
7.创建集群
Redis 官方提供了 redis-trib.rb 这个工具,就在解压目录的 src 目录中,第二步中已将它复制到 /usr/local/bin 目录中,可以直接在命令行中使用了。使用下面这个命令即可完成安装。
redis-trib.rb create --replicas 1 192.168.205.128:7000 192.168.205.128:7001 192.168.205.128:7002 192.168.205.129:7003 192.168.205.129:7004 192.168.205.129:7005
其中,前三个 ip:port 为第一台机器的节点,剩下三个为第二台机器。
等等,出错了。这个工具是用 ruby 实现的,所以需要安装 ruby。安装命令如下:
yum -y install ruby ruby-devel rubygems rpm-build gem install redis
输入yes,确认。
创建集群成功.(ps:其中可能出现sorry,can't connect to node xxx.xxx.xxx.xxx:xxxx,这里无法连接到另外一台机器,在另外一台机器上使用iptables -F命令就好了)
验证集群环境:
连接上一个节点:redis-cli -c -h 192.168.205.128 -p 7000
添加一个key为"hi",value为"123"的数据
连接上另外一个节点:redis-cli -c -h 192.168.205.129 -p 7004
在另外一个节点拿到key为"hi"的值。验证成功。
简单说一下原理
redis cluster在设计的时候,就考虑到了去中心化,去中间件,也就是说,集群中的每个节点都是平等的关系,都是对等的,每个节点都保存各自的数据和整个集群的状态。每个节点都和其他所有节点连接,而且这些连接保持活跃,这样就保证了我们只需要连接集群中的任意一个节点,就可以获取到其他节点的数据。
Redis 集群没有并使用传统的一致性哈希来分配数据,而是采用另外一种叫做哈希槽 (hash slot)
的方式来分配的。redis cluster 默认分配了 16384 个slot,当我们set一个key 时,会用CRC16
算法来取模得到所属的slot
,然后将这个key 分到哈希槽区间的节点上,具体算法就是:CRC16(key) % 16384。所以我们在测试的时候看到set 和 get 的时候,直接跳转到了7000端口的节点。
Redis 集群会把数据存在一个 master 节点,然后在这个 master 和其对应的salve 之间进行数据同步。当读取数据时,也根据一致性哈希算法到对应的 master 节点获取数据。只有当一个master 挂掉之后,才会启动一个对应的 salve 节点,充当 master 。
需要注意的是:必须要3个或以上
的主节点,否则在创建集群时会失败,并且当存活的主节点数小于总节点数的一半时,整个集群就无法提供服务了。