【原】Redis分区
Redis高级篇
-
分区
为什么分区？
Redis中的分区主要有两个目的：
- 允许用多台机器的内存存放更大的数据集。如果没有分区，那么你只能存放单台机器内存的最大值的数据集。
- 允许用多核和多台机器提高计算能力和网络带宽。
分区简单了解
分区方法
假设有4个Redis实例（服务器）R0，R1，R2，R3，代表user的许多keys如user:1,user:2..等，那么就有多种方法实现将给定的key映射到对应的Redis服务器上。
最简单的方式之一是用range partitioning，即将一个范围内的object映射到具体的Redis实例中。例如，将ID从0到1000放到实例R0上，从1001到2000放到R1上。实践中也在用这种方法，然而，它的缺点是映射表，因为Redis中的每个object都需要该表，所以效率低下。
另一种分区方式是hash partitioning。这种方式不要求key的形式必须是object_name:
分区缺点
- 多个keys的操作例如交集不支持。
- 多个keys的事务不能用。
- 分区粒度
- 增加了数据处理的复杂度，比如数据的添加与删除等操作。
存储数据 or 缓存数据
如果Redis用来缓存数据，那么用一致性hash是比较容易实现扩展的。
如果Redis用来存储数据，那么key常对应固定的Redis实例，所以节点必须是固定的并且不能改变。
使用Redis实现多重复制应注意如下问题：
- 在新server中启动Redis服务
- 移动数据并配置新的实例作为集群的slaves节点
- 停止clients
- 更新移动的实例和新Server的Ip地址
- 在新的slave节点上执行SLAVEOF NO ONE命令
- 重启Clients
- 最后关闭不再使用的实例
Redis分区的实现
Redis Cluster
Redis Cluster提供自动分片和高可用性的首选方案。
详情了解Cluster tutorial
Twemproxy
Twemproxy是twitter为Memcached和Redis开发的代理。它是单线程的，用c语言编写，运行较快。它支持在多个Redis实例中自动分区，和可选的节点选举方案。
Twemproxy基本上是一个处于client和Redis实例中的之间层，负责分区的处理。
详情了解in this antirez blog post
Clients supporting consistent hashing
另外一种Twemporxy的实现方式是用一个client实现client端的分区通过一致性hash或类似算法。比较著名的有 Redis-rb and Predis.
