【Redis】内存模型

内存模型

Redis可以存储键与5 种数据结构类型之间的映射,分别为:

  • STRING 字符串
  • LIST 列表
  • SET 集合
  • HASH 哈希
  • ZSET 有序集合

下表对比了Redis 提供的5 种结构,说明结构存储值并简单介绍其语义:

结构类型 结构类型的值 结构的读写能力
STRING(字符串) 字符串、整数、浮点数 对整个字符串或者字符串的其中一部分执行操作;对整数或浮点数执行自增(increment)或自减(decrement)操作
LIST(列表) 一个链表,链表上每个节点都包含一个字符串 从链表的两端推入或者弹出元素;根据偏移量对链表进行修剪(trim);读取单个或多个元素;根据值查找或获取元素
SET(集合) 包含字符串的无序收集器(unordered collection),并且被包含的每个字符串都是独一无二、各不相同的 添加、获取、移除单个元素;检查一个元素是否存在于集合中;计算交集、并集、差集;从集合里随机获取元素
HASH(哈希) 包含键值对的无序哈希表 添加、获取、移除单个键值对;获取所有键值对
ZSET(有序集合) 字符串成员(member)与浮点数分值(score)之间的有序映射,元素的排列顺序由分值的大小决定 添加、获取、删除单个元素;根据分值范围(range)或者成员来获取元素

内部编码

实际上每种数据结构都有自己底层的内部编码实现,而且是多种实现,Redis会在合适的场景选择合适的内部编码。对应关系如下表所示:

数据结构 内部编码
string raw、int、embstr
hash hashtable、ziplist
list linkedlist、ziplist
set hashtable、intset
zset skiplist、ziplist

通过object encoding [key]命令可以查询key内部编码

String(字符串)

字符串类型是Redis最基础的数据结构。字符串类型的值实际可以是字符串、数字(整数、浮点数),甚至是二进制,但是值最大不能超过512MB。

命令

设置值

set key value [ex seconds] [px milliseconds] [nx|xx]

set命令选项如下:

  • ex seconds:为键设置秒级过期时间
  • px milliseconds:为键设置毫秒级过期时间
  • nx:键必须不存在才可以设置成功,用于添加
  • xx:与nx相反,键必须存在才可以设置成功,用于更新

除set选项外,Redis还提供了setex和setnx两个命令:

setex key seconds value # 更新value并重新设置过期时间,此命令可保证原子性操作
setnx key value # set if not exists,key不存在则set,存在无操作

setex可以作为分布式锁的一种实现方案,官方实现:http://redis.io/topics/distlock

获取值

get key

批量设置值

mset key value [key value ...]

批量获取值

mget key [key ...]

计数

incr key # 自增
decr key # 自减
incrby key increment # 自增指定数字
decrby key decrement # 自减指定数字
incrbyfloat key increment # 自增浮点数

其他命令

append key value # 追加值
strlen key # 字符串长度
getset key value # 设置并返回原值
setrange key offeset value # 设置指定位置的字符
getrange key start end # 获取部分字符串

内部编码

字符串类型的内部编码有三种:

  • int:8个字节的长整形
  • embstr:小于等于39个字节的字符串
  • raw:大于39个字节的字符串

Redis会根据当前值的类型和长度决定使用哪种内部编码实现。

使用场景

  • 缓存功能
  • 计数
  • 共享session
  • 限速

Hash(哈希)

Redis 的哈希可以存储多个键值对之间的映射,和字符串一样,哈希存储的值可以是字符串也可以是数字,并且可以对哈希存储的数字值执行自增或者自减操作。

哈希类型中的映射关系是field -> value

操作

命令

hset key field value # 设置值
hget key field # 获取值
hdel key field [field] # 删除一个或多个值

hlen key # 计算field个数

hmget key field [field] # 批量获取field值
hmset key field value [field value] # 批量设置field

hexists key field # 判断field是否存在

hkeys key # 获取所有field
hvals key # 获取所有value
hgetall key # 获取所有field-value

hincrby key field increment # field值增加increment
hincrbyfloat key field increment # field值加上浮点数增量increment

hstrlen key field # 计算value的字符串长度

内部编码

哈希类型的内部编码有两种:

  • ziplist(压缩列表):当哈希类型元素个数小于hash-max-ziplist-entries配置(默认512个)、同时所有值小于hash-max-ziplist-value配置(默认64字节)时,Redis会使用ziplist作为哈希内部实现,ziplist使用更加紧凑的结构实现多个元素的连续存储,更加节省内存。
  • hashtable(哈希表):当哈希类型无法满足ziplist条件时,Redis会使用hashtable作为哈希内部实现,因为此时ziplist的读写效率会下降,而hashtable读写时间复杂度是O(1)。

使用场景

  • 存储对象信息

哈希类型与关系型数据库不同之处:

  • 哈希类型是稀疏的,关系型数据库是完全结构化的。例如哈希类型可以每个键有不同的field,而关系型数据库每行列一致。
  • 关系型数据库可以做复杂的关系查询,而Redis模拟关系型复杂查询开发困难,维护成本高。

List(列表)

列表(list)类型用来存储多个有序的字符串。列表中每个字符串称为元素,一个列表最多可以存储2^32-1个元素。在Redis中,可以对列表两端插入(push)和弹出(pop),还可以获取指定范围的元素列表、获取指定索引下标的元素等。

命令

添加操作

rpush key value [value ...] # 从右边插入元素
lpush key value [value ...] # 从左边插入元素
linsert key before|after pivot value # 查找等于pivot的元素,在其前/后插入新元素

查询操作

lrange key start end # 获取指定范围内的元素列表,从左到右是0 ~ (N-1),从右到左是-1 ~ -N,lrange key 0 -1 查询所有
lindex key index # 获取列表指定索引下标的元素
llen key # 获取列表长度

删除操作

lpop key # 从列表左侧弹出元素
rpop key # 从列表右侧弹出元素

lrem key count value # 删除指定元素
                     # count > 0,从左到右删除最多count个元素
                     # count < 0,从右到左删除最多count绝对值的元素
                     # count = 0,删除所有

ltrim key start end # 按照索引范围修剪列表

修改操作

lset key index newValue # 修改指定索引下标的元素

阻塞操作

blpop key [key ...] timeout
brpop key [key ...] timeout

blpop和brpop是lpop和rpop的阻塞版本,它们除了弹出方向不同,使用方法基本相同,所以下面以brpop命令进行说明,brpop命令包含两个参数:

  • key [key...]:多个列表的键
  • timeout:阻塞时间(单位:秒)

如果blpop/brpopkey时,key对应的列表为空,timeout=n,则客户端等待n秒后返回,如果timeout=0,则客户端一直阻塞,直到列表中被添加元素。如果列表不为空则直接返回。

如果使用的是多个键,redis会从左到右遍历键,一旦有一个键可以弹出元素,则客户端立即返回。

内部编码

列表类型的内部编码有两种:

  • ziplist(压缩列表):当列表元素个数小于hash-max-ziplist-entries配置(默认512个)、同时列表中每个元素值都小于hash-max-ziplist-value配置(默认64字节)时,Redis会选用ziplist作为列表的内部实现来减少内存的使用。
  • linkedlist(链表):当列表类型无法满足ziplist的条件时,Redis会使用linkedlist作为列表的内部实现。

使用场景

  • 消息队列:Redis的lpush+brpop命令组合即可实现阻塞队列,生产者使用lrpush从列表左侧插入元素,多个消费者使用brpop命令阻塞式“抢”列表尾部的元素。
  • 文章列表

实际上列表的使用场景很多,在选择时可以参考以下口诀:

lpush + lpop = Stack(栈)
lpush + rpop = Queue(队列)
lpush + ltrim = Capped Collection(有限集合)
lpush + brpop = Message Queue(消息队列)

Set(集合)

集合(set)类型也是用来存储多个字符串元素,集合与列表的区别在于集合中不允许有重复元素,并且集合中的元素是无序的,不能使用索引下标获取元素。

一个集合中最多可以存储2^32-1个元素。Redis除了支持集合内的增删改查,同时还支持多个集合取交集、并集、差集。

命令

集合内操作

sadd key element [element ...] # 添加元素,结果为成功添加个数
srem key element [element ...] # 删除元素,结果为成功删除个数

scard key # 计算元素个数
sismember key element # 判断元素是否在集合中

srandmember key [count] # 随机从集合返回指定个数元素,count默认值为1,仅返回不删除
spop key # 从集合随机弹出一个元素,并删除

smember key # 获取所有元素

集合间操作

sinter key [key ...] # 求多个集合的交集
suinon key [key ...] # 求多个集合的并集
sdiff key [key ...] # 求多个集合的差集

内部编码

集合类型的内部编码有两种:

  • intset(整数集合):当集合中元素都是整数且元素个数小于set-max-intset-enties配置(默认512个)时,Redis会选用intset作为集合的内部实现,从而减少内存的使用。
  • hashtable(哈希表):当集合类型无法满足intset条件时,Redis会使用hashtable作为集合内部实现。

Zset(有序集合)

有序集合和集合一样也是字符串类型元素的集合,且不允许重复的成员。不同的是每个元素都会关联一个double类型的分数(score)。Redis正是通过分数来为集合中的成员进行从小到大的排序。

有序集合的成员是唯一的,但分数(score)却可以重复。

列表、集合、有序集合三者异同点如下表所示:

数据结构 是否允许重复元素 是否有序 有序实现方式 应用场景
列表 索引下标 时间轴、消息队列等
集合 - 标签、社交等
有序集合 分值 排行榜系统、社交等

命令

集合内操作

zadd key score member [score member ...] # 添加元素,返回成功添加的成员个数
zcard key # 计算成员个数
zscore key member # 计算某个成员的分数

zrank key member # 计算成员排名,分数从低到高
zrevrank key member # 计算成员排名,分数从高到低

zrem key member [member ...] # 删除成员

zincrby key increment member # 增加成员的分数

zrange key start end [withscores] # 返回指定排名范围的成员,分数从低到高,加withscores选项会返回成员的分数
zrevrange key start end [withscores] # 返回指定排名范围的成员,分数从高到低

zrangebyscore key min max [withscores] [limit offset count] # 返回指定分数范围的成员,按分数从低到高返回
                        # withscores选项会同时返回分数,
                        # [limit offset count]选项可以限制输出的起始位置和个数
                        # min和max还支持开区间(小括号)和闭区间(中括号),-inf和+inf分别代表无限小和无限大
zrevrangebyscore key max min [withscores] [limit offset count] # 返回指定分数范围的成员,按分数从高到低返回

zcount key min max # 返回指定分数范围成员个数
zremrangebyrank key start end # 删除指定排名内的升序元素
zremrangebyscore key min max # 删除指定分数范围的成员

集合间操作

zinterstore destination numkeys key [key ...] [weights weight [weight ...]] [aggregate sum|min|max] # 交集
    # destination:交集计算结果保存到这个键
    # numkeys:需要做交集计算键的个数
    # key [key ...]:需要做交集计算的键
    # weights weight [weight ...]:每个键的权重,在做交集计算时,每个键中的每个member会将自己分数乘以这个权重,每个键的权重默认是1
    # aggregate sum|min|max:计算成员交集后,分值可以按照sum(和)、min(最小值)、max(最大值)做汇总,默认值是sum
            
zunionstore destination numkeys key [key ...] [weights weight [weight ...]] [aggregate sum|min|max] # 并集

内部编码

有序集合类型的内部编码有两种:

  • ziplist(压缩列表):当有序集合的元素个数小于zset-max-ziplist-entries配置(默认128个),同时每个元素的值都小于zset-max-ziplist-value配置(默认64字节)时,Redis会用ziplist来作为有序集合的内部实现,ziplist可以有效减少内存的使用。
  • skiplist(跳跃表):当ziplist条件不满足时,有序集合会使用skiplist作为内部实现,因为此时ziplist的读写效率会下降。

使用场景

有序集合比较典型的使用场景就是排行榜系统。例如视频网站需要对用户上传的视频做排行榜,榜单的维度可能是多个方面的:按照时间、按照播放数量、按照获得的赞数。本节使用赞数这个维度,记录每天用户上传视频的排行榜。

posted @ 2021-01-15 23:17  天上的白云贼白了  阅读(193)  评论(0编辑  收藏  举报