随笔分类 -  redis

摘要:项目中使用Redis来记录用户的上线和下线信息,其中用到了集合(sets)类型,某用户上线时,向sets中添加数据,下线时将相应数据从sets中删除,考虑当该用户的所有实例都下线时,需要将sets删除。 因为是并发操作,就考虑到判断为空后进行删除操作的原子性,查了一堆资料,都已经写好了相应的lua脚 阅读全文
posted @ 2017-10-13 11:23 gqtc 阅读(1973) 评论(0) 推荐(0) 编辑
摘要:Redis的发布与订阅功能,由SUBSCRIBE,PSUBSCRIBE,UNSUBSCRIBE,PUNSUBSCRIBE,以及PUBLISH等命令实现。 通过执行SUBSCRIBE命令,客户端可以订阅一个或多个频道。当有客户端通过PUBLISH命令向某个频道发布消息... 阅读全文
posted @ 2016-07-13 12:52 gqtc 阅读(321) 评论(0) 推荐(0) 编辑
摘要:Redis通过MULTl,EXEC,WATCH,DISCARD等命令来实现事务(transaction)功能。 事务从MULTI命令开始,之后,该客户端发来的其他命令会被排队,客户端发来EXEC命令之后,Redis会依次执行队列中的命令。并且在执行期间,服务器不会中... 阅读全文
posted @ 2016-07-06 20:47 gqtc 阅读(266) 评论(0) 推荐(0) 编辑
摘要:一:手动故障转移 Redis集群支持手动故障转移。也就是向从节点发送”CLUSTER FAILOVER”命令,使其在主节点未下线的情况下,发起故障转移流程,升级为新的主节点,而原来的主节点降级为从节点。 为了不丢失数据,向从节点发送”CLUSTER FAILOVE... 阅读全文
posted @ 2016-07-05 12:30 gqtc 阅读(738) 评论(0) 推荐(0) 编辑
摘要:一:主从复制 在集群中,为了保证集群的健壮性,通常设置一部分集群节点为主节点,另一部分集群节点为这些主节点的从节点。一般情况下,需要保证每个主节点至少有一个从节点。 集群初始化时,每个集群节点都是以独立的主节点角色而存在的,通过向集群节点发送”CLUSTER MEE... 阅读全文
posted @ 2016-07-05 12:22 gqtc 阅读(2380) 评论(0) 推荐(0) 编辑
摘要:Redis集群通过分片的方式来保存数据库中的键值对:一个集群中,每个键都通过哈希函数映射到一个槽位,整个集群共分16384个槽位,集群中每个主节点负责其中的一部分槽位。 当数据库中的16384个槽位都有节点在处理时,集群处于上线状态;相反,如果数据库中有任何一个槽没... 阅读全文
posted @ 2016-06-25 11:46 gqtc 阅读(1671) 评论(0) 推荐(0) 编辑
摘要:Redis集群是Redis提供的分布式数据库方案,通过分片来进行数据共享,并提供复制和故障转移功能。 一:初始化1:数据结构 在源码中,通过server.cluster记录整个集群当前的状态,比如集群中的所有节点;集群目前的状态,比如是上线还是下线;集群当前的纪元等... 阅读全文
posted @ 2016-06-20 19:34 gqtc 阅读(2362) 评论(1) 推荐(2) 编辑
摘要:十一:TILT模式 根据之前的介绍可知,哨兵的运行,非常依赖于系统时间,但是当系统时间被调整,或者哨兵中的流程因为某种原因(比如负载较高、IO发生阻塞、进程被信号停止等)而被阻塞时,哨兵的行为就会变得不可预知了。 所谓TILT模式,就是一种特殊的保护模式。进入TILT... 阅读全文
posted @ 2016-06-05 10:47 gqtc 阅读(553) 评论(0) 推荐(0) 编辑
摘要:十:故障转移流程中的状态转换 当哨兵针对某个主节点进行故障转移时,该主节点的故障转移状态master->failover_state,要依次经历下面六个状态:SENTINEL_FAILOVER_STATE_WAIT_STARTSENTINEL_FAILOVER_STATE_SELEC... 阅读全文
posted @ 2016-06-05 10:38 gqtc 阅读(1409) 评论(0) 推荐(1) 编辑
摘要:八:判断实例是否客观下线 当前哨兵一旦监测到某个主节点实例主观下线之后,就会向其他哨兵发送”is-master-down-by-addr”命令,询问其他哨兵是否也认为该主节点主观下线了。如果有超过quorum个哨兵(包括当前哨兵)反馈,都认为该主节点主观下线了,则当前哨兵就将该主节点... 阅读全文
posted @ 2016-06-05 10:24 gqtc 阅读(1288) 评论(0) 推荐(1) 编辑
摘要:六:定时发送消息 哨兵每隔一段时间,会向其所监控的所有实例发送一些命令,用于获取这些实例的状态。这些命令包括:”PING”、”INFO”和”PUBLISH”。 “PING”命令,主要用于哨兵探测实例是否活着。如果对方超过一段时间,还没有回复”PING”命令,则认为其是... 阅读全文
posted @ 2016-05-29 13:05 gqtc 阅读(978) 评论(0) 推荐(0) 编辑
摘要:sentinel(哨兵)是redis的高可用解决方案。由一个或多个sentinel实例组成的分布式系统,可以监控任意多个主节点,以及它们属下的所有从节点。当某个主节点下线时,sentinel可以将下线主节点属下的某个从节点升级为新的主节点。 一:哨兵进程 哨兵,本质... 阅读全文
posted @ 2016-05-29 12:34 gqtc 阅读(1014) 评论(0) 推荐(1) 编辑
摘要:Hiredis中的异步API函数需要与事件库(libevent,libev, ev)一起工作。因为事件循环的机制,异步环境中的命令是自动管道化的。因为命令是异步发送的,因此发送命令时,必要情况下,需要提供一个回调函数,以便在收到命令回复时调用该函数。 异步API涉及... 阅读全文
posted @ 2016-05-12 09:40 gqtc 阅读(1157) 评论(0) 推荐(1) 编辑
摘要:Redis的sentinel模式使用了Hiredis代码,Hiredis是redis数据库一个轻量级的C语言客户端库。它实现的向Redis发送命令的API函数redisCommand,使用方法类似于printf。因此只要熟悉redis命令,就可以很容易的使用该函数将redis命令字... 阅读全文
posted @ 2016-05-08 09:55 gqtc 阅读(1710) 评论(0) 推荐(0) 编辑
摘要:本文主要讲解主节点部分重同步的实现,以及主从复制中的其他功能。本文是Redis主从复制机制的最后一篇文章。 主节点在收到从节点发来的PSYNC命令之前,主节点的部分重同步流程,与完全重同步流程是一样的。在收到PSYNC命令后,主节点调用masterTryParti... 阅读全文
posted @ 2016-04-30 17:31 gqtc 阅读(1030) 评论(0) 推荐(0) 编辑
摘要:主从复制过程中,主节点根据从节点发来的命令执行相应的操作。结合上一章中讲解的从节点在主从复制中的流程,本章以及下一篇文章讲解一下主节点在主从复制过程中的流程。 本章主要介绍完全重同步流程。 一:从节点建链和握手 从节点在向主节点发起TCP建链,以及复... 阅读全文
posted @ 2016-04-25 12:20 gqtc 阅读(884) 评论(0) 推荐(0) 编辑
摘要:Redis的主从复制功能,可以实现Redis实例的高可用,避免单个Redis 服务器的单点故障,并且可以实现负载均衡。 一:主从复制过程 Redis的复制功能分为同步(sync)和命令传播(commandpropagate)两个操作: 同步操作用于将... 阅读全文
posted @ 2016-04-17 10:43 gqtc 阅读(999) 评论(0) 推荐(0) 编辑
摘要:Redis服务器是典型的一对多服务器程序,通过使用由IO多路复用技术实现的文件事件处理器,Redis服务器使用单线程单进程的方式来处理命令请求,并与多个客户端进行网络通信。 Redis客户端与服务器之间通过TCP协议进行通信。TCP协议是一种流式协议,数据以字节流... 阅读全文
posted @ 2016-04-09 17:07 gqtc 阅读(2274) 评论(0) 推荐(0) 编辑
摘要:Redis中,处理网络IO时,采用的是事件驱动机制。但它没有使用libevent或者libev这样的库,而是自己实现了一个非常简单明了的事件驱动库ae_event,主要代码仅仅400行左右。 没有选择libevent或libev的原因大概在于,这些库为了迎合通用性造... 阅读全文
posted @ 2016-04-03 10:55 gqtc 阅读(641) 评论(0) 推荐(0) 编辑
摘要:除了RDB持久化功能之外,Redis还提供了AOF(AppendOnly File)持久化功能。与RDB持久化通过保存数据库中的键值对来记录数据库状态不同,AOF持久化是通过保存Redis服务器所执行的写命令来记录数据库状态的。与RDB持久化相比,AOF持久化可能丢失的数据更少,但... 阅读全文
posted @ 2016-03-29 12:55 gqtc 阅读(513) 评论(0) 推荐(0) 编辑