Redis

Redis:

KV cache and store

    In-memory

    持久化

    主从(借助于sentinel实现一定意义上的HA)

    Clustering(分布式，即读写操作在多个节点上进行)

数据结构服务器：

     String，List，Hash，Set，Sorted Set ，Bitmap，HyperLoglog

 

存储系统有三类：

    RDBMS

    NoSQL:

        KV NoSQL:redis

        Column Family NoSQL:HBase

        Documentation NoSQL:MongoDB

    NewSQL

 

Redis的组件：

    Redis.io

Redis守护进程：

    监听端口：6379/tcp

 

    String:

       SET[NX|XX]

       GET

       INCR

       DECR

       EXIST

 

    List:

       LPUSH

       RPUSH

       LPOP

       RPOP

       LINDEX

       LSET

 

Sets:

       SADD

       SINTER

       SUNION

       SPOP

       SISMEMBER

 

    Sorted Sets:

        ZADD

        ZRANGE

        ZCARD

        ZRANK

    Hashes:

        HSET

        HSETNX

        HGET

        HKEYS

        HVALS

        HDEL

 

    Bitmaps,HyperLogLog

 

认证实现方法：

（1）       redis.conf

requirepass PASSWORD

（2）       redis-cli

AUTH PASSWORD

 

清空数据库：

    FLUSHDB:清空当前库

    FLUSHALL:清空所有库

 

事务：通过MULTI，EXEC,WATCH等命令实现事务功能：将一个或多个命令给并为一个操作提示服务器按顺序执行的机制：不支持回滚操作；

      MULTI：启动一个事务；

      EXEC：执行事务：

           一次性将事务中的所有操作执行完成后返回给客户端；

          WATCH：乐观锁；在EXEC命令执行之前，用于监视指定数量键；如果监视中的某任意键数据被修改，则服务器拒绝执行事务；

 

       Connection相关的命令：

           AUTH    ECHO     PING     QUIT     SELECT

       Server相关的命令：

           CLIENT SETNAME connection-name

           CLIENT GETNAME

           CLIENT KILL ip:port

             

           CONFIG RESETSTAT

           CONFIG SET parameter value

           CONFIG REWRITE

 

           DBSIZE

            

           BGSAVE

           SAVE

           LASTSAVE

 

发布与订阅(publish/subscribe)

    频道：消息队列

    SUBSCRIBE:订阅一个或多个队列；

    PUBLISH:向频道发布消息；

 

    UNSUBSCRIBE:退订此前订阅的频道

    PSUBSCRIBE:模式订阅

 

Redis的持久化：RDB和AOF

    RDB:snapshot,二进制格式；按照事先制定的策略，周期性地将数据保存至磁盘；数据文件默认认为dump.rdb;客户端也可显式使用SAVE或BGSAVE命令启动快照保存机制:

         SAVE:同步，在主线程中保存快照；此时会阻塞所有客户端请求；

         BGSAVE：异步；

    AOF:Append Only File

         记录每一次写操作至指定的文件尾部实现持久化；当redis重启时，可通过重新执行文件中的命令在内存重建数据库；

         BGREWRITEAOF：AOF文件重写；

             不会读取正在使用AOF文件，而通过将内存中的数据以命令的方式保存到临时文件中，完成之后替换原来的AOF文件；

 

    RDB:

        SAVE 900 1

        SAVE 300 10

        SAVE 60 10000

 

        Stop-writes-on-bgsave-error yes

        Rdbcompression yes

        Rdbchecksum yes

        Dbfilename dump.rdb

        Dir /var/lib/redis

AOF:

    重写过程：

（1）       redis主进程通过fork创建子进程；

（2）       子进程根据redis内存中的数据创建数据库重建命令序列于临时文件中；

（3）       父进程集成client的请求，并会把这些请求中的写操作继续追加至原来AOF文档；额外地，这些新的写请求还会被放置于一个缓冲队列中；

（4）       子进程重写完成，会通知父进程；父进程把缓冲中的命令写到临时文件中

（5）       父进程用临时文件替换老的aof文件；

             相关参数：appendonly no

                       Appendfilename ‘appendonly.aof’

                       Appendfsync {always|everysec|no}

                       No-appendfsync-on-rewrite no

                       Auto-aof-rewrite-pecentage 100

                       Auto-aof-rewrite-min-size 64mb

               注意：持久本身不能取代备份；还应该指定备份策略，对redis数据库定期进行备份；

            RDB与AOF同时启用：

(1)     BGSAVE和BGREWRITEAOF不会同时执行；

(2)     在Redis服务器启动用于恢复数据时，会优先使用AOF;

        复制：

            特点：

                一个Master可以有多个Slave；

                支持链式复制；

                Master以非阻塞方式同步数据至slave；

            Slave：

• SLAVAOF MASTER_IP MASTER_PORT

            注意：如果master使用requirepass开启了认证功能，从服务器是哦那个masterauth<PASSWORD>来连入服务请求使用此密码进行认证；

 

Sentinel：用于管理多个redis服务实现HA:

监控  通知   自动故障转移    流言协议，投票协议

 

程序：

    Redis-sentinel /path/to/file.conf

    Redis-server /path/to/file.conf –sentinel

(1)     服务器自身初始化，运行redis-server中国专用于sentinel功能的代码；

(2)     初始化sentinel状态，根据给定的配置文件，初始化监控的master服务器列表

(3)     创建连向master的连接；

 

专用配置文件：/etc/redis-sentinel.conf

    #sentinel monitor <master-name> <ip> <redis-port> <quorum>

    Sentinel monitor mymaster 127.0.0.1 6379 2

 

sentinel down-after –milliseconds <master-name> <milliseconds>

sentinel down-after-milliseconds mymaster 30000

 

sentinel parallel-syncs <master-name> <numslaves>

sentinel parallel-syncs mymaster 1

 

sentinel failover-timeout <master-name> <milliseconds>

sentinel failover-timeout mymaster 180000

   

主观下线，客观下线：

    主观下线：一个sentinel实例判断出某节点下线；

    客观下线：多个sentinel节点协商后判断出某节点下线；

 

专用命令：

    SENTINEL maters

    SENTINEL slaves <master name>

    SENTINEL get-master-addr-by-name <master name>

Clustering:

    分布式数据库，通过分片机制进行数据分布，clustering内的每个节点仅数据库的一部分数据；

        每个节点持有全局元数据，但仅持有一部分数据