redis - 随笔分类 - gqtc

Redis使用：聚合类型为空时，会自动被Redis删除

摘要：项目中使用Redis来记录用户的上线和下线信息，其中用到了集合（sets）类型，某用户上线时，向sets中添加数据，下线时将相应数据从sets中删除，考虑当该用户的所有实例都下线时，需要将sets删除。因为是并发操作，就考虑到判断为空后进行删除操作的原子性，查了一堆资料，都已经写好了相应的lua脚阅读全文

posted @ 2017-10-13 11:23 gqtc 阅读(1964) 评论(0) 推荐(0) 编辑

Redis源码解析：30发布和订阅

摘要：Redis的发布与订阅功能，由SUBSCRIBE，PSUBSCRIBE，UNSUBSCRIBE，PUNSUBSCRIBE，以及PUBLISH等命令实现。通过执行SUBSCRIBE命令，客户端可以订阅一个或多个频道。当有客户端通过PUBLISH命令向某个频道发布消息... 阅读全文

posted @ 2016-07-13 12:52 gqtc 阅读(321) 评论(0) 推荐(0) 编辑

Redis源码解析：29事务

摘要：Redis通过MULTl，EXEC，WATCH，DISCARD等命令来实现事务（transaction）功能。事务从MULTI命令开始，之后，该客户端发来的其他命令会被排队，客户端发来EXEC命令之后，Redis会依次执行队列中的命令。并且在执行期间，服务器不会中... 阅读全文

posted @ 2016-07-06 20:47 gqtc 阅读(266) 评论(0) 推荐(0) 编辑

Redis源码解析：28集群(四)手动故障转移、从节点迁移

摘要：一：手动故障转移 Redis集群支持手动故障转移。也就是向从节点发送”CLUSTER FAILOVER”命令，使其在主节点未下线的情况下，发起故障转移流程，升级为新的主节点，而原来的主节点降级为从节点。为了不丢失数据，向从节点发送”CLUSTER FAILOVE... 阅读全文

posted @ 2016-07-05 12:30 gqtc 阅读(730) 评论(0) 推荐(0) 编辑

Redis源码解析：27集群(三)主从复制、故障转移

摘要：一：主从复制在集群中，为了保证集群的健壮性，通常设置一部分集群节点为主节点，另一部分集群节点为这些主节点的从节点。一般情况下，需要保证每个主节点至少有一个从节点。集群初始化时，每个集群节点都是以独立的主节点角色而存在的，通过向集群节点发送”CLUSTER MEE... 阅读全文

posted @ 2016-07-05 12:22 gqtc 阅读(2372) 评论(0) 推荐(0) 编辑

Redis源码解析：26集群(二)键的分配与迁移

摘要：Redis集群通过分片的方式来保存数据库中的键值对：一个集群中，每个键都通过哈希函数映射到一个槽位，整个集群共分16384个槽位，集群中每个主节点负责其中的一部分槽位。当数据库中的16384个槽位都有节点在处理时，集群处于上线状态；相反，如果数据库中有任何一个槽没... 阅读全文

posted @ 2016-06-25 11:46 gqtc 阅读(1664) 评论(0) 推荐(0) 编辑

Redis源码解析：25集群(一)握手、心跳消息以及下线检测

摘要：Redis集群是Redis提供的分布式数据库方案，通过分片来进行数据共享，并提供复制和故障转移功能。一：初始化1：数据结构在源码中，通过server.cluster记录整个集群当前的状态，比如集群中的所有节点；集群目前的状态，比如是上线还是下线；集群当前的纪元等... 阅读全文

posted @ 2016-06-20 19:34 gqtc 阅读(2351) 评论(1) 推荐(2) 编辑

Redis源码解析：24sentinel(五)TLIT模式、执行脚本

摘要：十一：TILT模式根据之前的介绍可知，哨兵的运行，非常依赖于系统时间，但是当系统时间被调整，或者哨兵中的流程因为某种原因（比如负载较高、IO发生阻塞、进程被信号停止等）而被阻塞时，哨兵的行为就会变得不可预知了。所谓TILT模式，就是一种特殊的保护模式。进入TILT... 阅读全文

posted @ 2016-06-05 10:47 gqtc 阅读(546) 评论(0) 推荐(0) 编辑

Redis源码解析：23sentinel(四)故障转移流程

摘要：十：故障转移流程中的状态转换当哨兵针对某个主节点进行故障转移时，该主节点的故障转移状态master->failover_state，要依次经历下面六个状态：SENTINEL_FAILOVER_STATE_WAIT_STARTSENTINEL_FAILOVER_STATE_SELEC... 阅读全文

posted @ 2016-06-05 10:38 gqtc 阅读(1392) 评论(0) 推荐(1) 编辑

Redis源码解析：22sentinel(三)客观下线以及故障转移之选举领导节点

摘要：八：判断实例是否客观下线当前哨兵一旦监测到某个主节点实例主观下线之后，就会向其他哨兵发送”is-master-down-by-addr”命令，询问其他哨兵是否也认为该主节点主观下线了。如果有超过quorum个哨兵（包括当前哨兵）反馈，都认为该主节点主观下线了，则当前哨兵就将该主节点... 阅读全文

posted @ 2016-06-05 10:24 gqtc 阅读(1284) 评论(0) 推荐(1) 编辑

Redis源码解析：21sentinel(二)定期发送消息、检测主观下线

摘要：六：定时发送消息哨兵每隔一段时间，会向其所监控的所有实例发送一些命令，用于获取这些实例的状态。这些命令包括：”PING”、”INFO”和”PUBLISH”。 “PING”命令，主要用于哨兵探测实例是否活着。如果对方超过一段时间，还没有回复”PING”命令，则认为其是... 阅读全文

posted @ 2016-05-29 13:05 gqtc 阅读(972) 评论(0) 推荐(0) 编辑

Redis源码解析：20sentinel(一)初始化、建链

摘要：sentinel(哨兵)是redis的高可用解决方案。由一个或多个sentinel实例组成的分布式系统，可以监控任意多个主节点，以及它们属下的所有从节点。当某个主节点下线时，sentinel可以将下线主节点属下的某个从节点升级为新的主节点。一：哨兵进程哨兵，本质... 阅读全文

posted @ 2016-05-29 12:34 gqtc 阅读(1014) 评论(0) 推荐(1) 编辑

Redis源码解析：19Hiredis异步API代码解析

摘要：Hiredis中的异步API函数需要与事件库（libevent,libev, ev）一起工作。因为事件循环的机制，异步环境中的命令是自动管道化的。因为命令是异步发送的，因此发送命令时，必要情况下，需要提供一个回调函数，以便在收到命令回复时调用该函数。异步API涉及... 阅读全文

posted @ 2016-05-12 09:40 gqtc 阅读(1147) 评论(0) 推荐(1) 编辑

Redis源码解析：18Hiredis同步API和回复解析API代码解析

摘要：Redis的sentinel模式使用了Hiredis代码，Hiredis是redis数据库一个轻量级的C语言客户端库。它实现的向Redis发送命令的API函数redisCommand，使用方法类似于printf。因此只要熟悉redis命令，就可以很容易的使用该函数将redis命令字... 阅读全文

posted @ 2016-05-08 09:55 gqtc 阅读(1696) 评论(0) 推荐(0) 编辑

Redis源码解析：17Resis主从复制之主节点的部分重同步流程及其他

摘要：本文主要讲解主节点部分重同步的实现，以及主从复制中的其他功能。本文是Redis主从复制机制的最后一篇文章。主节点在收到从节点发来的PSYNC命令之前，主节点的部分重同步流程，与完全重同步流程是一样的。在收到PSYNC命令后，主节点调用masterTryParti... 阅读全文

posted @ 2016-04-30 17:31 gqtc 阅读(1014) 评论(0) 推荐(0) 编辑

Redis源码解析：16Resis主从复制之主节点的完全重同步流程

摘要：主从复制过程中，主节点根据从节点发来的命令执行相应的操作。结合上一章中讲解的从节点在主从复制中的流程，本章以及下一篇文章讲解一下主节点在主从复制过程中的流程。本章主要介绍完全重同步流程。一：从节点建链和握手从节点在向主节点发起TCP建链，以及复... 阅读全文

posted @ 2016-04-25 12:20 gqtc 阅读(880) 评论(0) 推荐(0) 编辑

Redis源码解析：15Resis主从复制之从节点流程

摘要：Redis的主从复制功能，可以实现Redis实例的高可用，避免单个Redis 服务器的单点故障，并且可以实现负载均衡。一：主从复制过程 Redis的复制功能分为同步(sync)和命令传播(commandpropagate)两个操作：同步操作用于将... 阅读全文

posted @ 2016-04-17 10:43 gqtc 阅读(994) 评论(0) 推荐(0) 编辑

Redis源码解析：14Redis服务器与客户端间的交互

摘要：Redis服务器是典型的一对多服务器程序，通过使用由IO多路复用技术实现的文件事件处理器，Redis服务器使用单线程单进程的方式来处理命令请求，并与多个客户端进行网络通信。 Redis客户端与服务器之间通过TCP协议进行通信。TCP协议是一种流式协议，数据以字节流... 阅读全文

posted @ 2016-04-09 17:07 gqtc 阅读(2267) 评论(0) 推荐(0) 编辑

Redis源码解析：13Redis中的事件驱动机制

摘要：Redis中，处理网络IO时，采用的是事件驱动机制。但它没有使用libevent或者libev这样的库，而是自己实现了一个非常简单明了的事件驱动库ae_event，主要代码仅仅400行左右。没有选择libevent或libev的原因大概在于，这些库为了迎合通用性造... 阅读全文

posted @ 2016-04-03 10:55 gqtc 阅读(639) 评论(0) 推荐(0) 编辑

Redis源码解析：12AOF持久化

摘要：除了RDB持久化功能之外，Redis还提供了AOF(AppendOnly File)持久化功能。与RDB持久化通过保存数据库中的键值对来记录数据库状态不同，AOF持久化是通过保存Redis服务器所执行的写命令来记录数据库状态的。与RDB持久化相比，AOF持久化可能丢失的数据更少，但... 阅读全文

posted @ 2016-03-29 12:55 gqtc 阅读(512) 评论(0) 推荐(0) 编辑

程序员的自我修养

随笔分类 - redis

公告