战狂粗人张

  博客园 :: 首页 :: 博问 :: 闪存 :: 新随笔 :: 联系 :: 订阅 订阅 :: 管理 ::

需求:

MySQL里有2000w数据,redis中只存20w的数据,如何保证redis中的数据都是热点数据?

1、限定 Redis 占用的内存

Redis 会根据自身数据淘汰策略,加载热数据到内存。

所以,计算一下 20W 数据大约占用的内存,然后设置一下 Redis 内存限制即可。

 

2、问题是什么数据?

比如用户数据。数据库有2000w条。

活跃用户:

redis sortSet里放两天内(为方便取一天内活跃用户)登录过的用户,登录一次ZADD一次,如set已存在则覆盖其分数(登录时间)。

键:login:users,值:分数 时间戳、value userid。设置一个周期任务,比如每天03:00:00点删除sort set中前一天3点前的数据(保证set不无序增长、留近一天内活跃用户)。

取时,拿到当前时间戳(int 10位),再减1天就可按分数范围取过去24h活跃用户。

 

3、提供一种简单实现缓存失效的思路: LRU(最近少用的淘汰)

即redis的缓存每命中一次,就给命中的缓存增加一定ttl(过期时间)(根据具体情况来设定, 比如10分钟).

一段时间后, 热数据的ttl都会较大, 不会自动失效, 而冷数据基本上过了设定的ttl就马上失效了。

 

4.redis 内存数据集大小上升到一定大小的时候,会施行数据淘汰策略。

redis 提供 6种数据淘汰策略:

(1)volatile-lru:从已设置过期时间的数据集(server.db[i].expires)中挑选最近最少使用的数据淘汰;

(2)volatile-ttl:从已设置过期时间的数据集(server.db[i].expires)中挑选将要过期的数据淘汰;

(3)volatile-random:从已设置过期时间的数据集(server.db[i].expires)中任意选择数据淘汰;

(4)allkeys-lru:从数据集(server.db[i].dict)中挑选最近最少使用的数据淘汰;

(5)allkeys-random:从数据集(server.db[i].dict)中任意选择数据淘汰;

(6)no-enviction(驱逐):禁止驱逐数据。

 

posted on 2020-03-25 00:56  战狂粗人张  阅读(594)  评论(0编辑  收藏  举报