redis部署及内容讲解
Redis介绍
Redis,是REmote DIctionary Server的缩写。是一个开源、基于C语言、基于内存亦可持久化的高性能NoSQL数据库,同时,它还提供了多种语言的API。它是一款由意大利人由Salvatore Sanfilippo所写的,依据BSD开源协议发行的高性能Key-Value存储系统(cache and store)。它通常被称为数据结构服务器,提供了一些丰富的数据结构,包括 字符串(String), 哈希(Map), 列表(list), 集合(sets) 和 有序集合(sorted sets)等类型。Redis当然还包括了对这些数据结构的丰富操作。
Redis能运行在大多数POSIX(Linux, *BSD, OS X 和Solaris等)系统上,官方没有支持Windows的版本。
Redis的数据都保存在内存中,而且底层实现上是自己写了epoll event loop部分,而没有采用开源的libevent等通用框架,所以读写效率很高。为了实现数据的持久化,Redis支持定期刷新(可通过配置实现)或写日志的方式来保存数据到磁盘。
Redis的优点
性能极高 – Redis能支持超过 100K+ 每秒的读写频率。
丰富的数据类型 – Redis支持二进制案例的 Strings, Lists, Hashes, Sets 及 Ordered Sets 数据类型操作。
原子 – Redis的所有操作都是原子性的,同时Redis还支持对几个操作全并后的原子性执行。
丰富的特性 – Redis还支持 publish/subscribe, 通知, key 过期等等特性。
Redis大事件
从2010年3月15日起,Redis的开发工作由VMware主持。
2015年4月1日,Redis 3.0.0在经过6个RC版本后,其正式版终于发布了。Redis 3.0.0的最重要特征是对Redis集群的支持,此外,该版本相对于2.8版本在性能、稳定性等方面都有了重大提高。
2015年5月5日,Redis 3.0.1发布, 主要是修复了 Sentinel 内存泄漏问题(只在某种特定的非常规状态下才能触发)。同时还解决了一个 Lua 输出缓冲限制问题,如果你的 Redis 从不崩溃,那么就没有影响。
Redis之父Salvatore Sanfilippo针对Redis 3.0正式版的发布这样说到:
自己相信Redis 3.0将能够完全改变Redis的面貌,人们将认识到Redis是一个全新的东西,它的自动扩展、容错和高可用性都有了很大的改进,从此,它将能够在更大范围内承担更关键的任务。Redis 3.0标志着一个新阶段和新开发模式的开始。以后,大量已经开发的新功能将不再急于进入稳定版本,实际上Redis 3.0就放弃了很多新功能,从而保证用户能够马上使用新的稳定版本。
Redis 3.0.1 安装和配置
一、下载,解压和编译Redis
cd /tmp wget http://download.redis.io/releases/redis-3.0.1.tar.gz tar xzf redis-3.0.1.tar.gz cd redis-3.0.1 make |
二、下载、安装tclsh
测试编译: make test
得到如下错误信息: cd src && make test make[1]: Entering directory `/tmp/redis-3.0.1/src' You need tcl 8.5 or newer in order to run the Redis test make[1]: *** [test] Error 1 make[1]: Leaving directory `/tmp/redis-3.0.1/src' make: *** [test] Error 2 |
Redis在make test有使用到tclsh对Redis进行测试,所有需要将tclsh安装好。
tclsh下载可以直接从官网http://www.tcl.tk/software/tcltk/download.html下载其最新版
cd /tmp wget http://prdownloads.sourceforge.net/tcl/tcl8.6.4-src.tar.gz tar xzvf tcl8.6.4-src.tar.gz cd tcl8.6.4/unix #windows进入tcl8.6.4/win ./configure --prefix=/usr/local/tcl8.6.4 --enable-64bit #enable-64bit对64系统生效 make && make install |
安装完成之后需要将tclsh添加到PATH中,并使其生效
vim /etc/profile
PATH=/usr/local/tcl8.6.4/bin:$PATH source /etc/profile |
这样tclsh就已经安装完成了。
三、再次测试编译
cd /tmp/redis-3.0.1 make test
将会收到信息:
|
四、简单试用(生产环境略过)
在src目录下,编译后的二进制文件可用。运行Redis服务端:
src/redis-server
你可以用内置的客户端与Redis交互:
src/redis-cli
redis> set foo bar
OK
redis> get foo
"bar"
五、安装redis到指定目录
也可以将redis安装到指定的/usr/local/redis目录下:
make PREFIX=/usr/local/redis install
六、配置redis
为redis配置PATH:
vi /etc/profile #添加下行内容
PATH=$PATH:/usr/local/redis/bin
export PATH
source /etc/profile
cp redis.conf /etc/
vi /etc/sysctl.conf #添加vm.overcommit_memory=1,
否则出现如下警告:
WARNING overcommit_memory is set to 0! Background save may fail under low memory condition. To fix this issue add 'vm.overcommit_memory = 1' to /etc/sysctl.conf and then
reboot or run the command 'sysctl vm.overcommit_memory=1' for
this to take effect.
vi /etc/redis.conf #对应行修改为下面内容
daemonize yes
logfile /var/log/redis.log
七、编写服务管理脚本
vi /etc/init.d/redis #!/bin/sh #chkconfig: 345 86 14 #description: Startup and shutdown script for Redis
PROGDIR=/usr/local/redis #安装路径 PROGNAME=redis-server DAEMON=$PROGDIR/$PROGNAME CONFIG=/etc/redis.conf PIDFILE=/var/run/redis.pid DESC="redis daemon" SCRIPTNAME=/etc/rc.d/init.d/redis
start() { if test -x $DAEMON then echo -e "Starting $DESC: $PROGNAME" if $DAEMON $CONFIG then echo -e "OK" else echo -e "failed" fi else echo -e "Couldn't find Redis Server ($DAEMON)" fi }
stop() { if test -e $PIDFILE then echo -e "Stopping $DESC: $PROGNAME" if kill `cat $PIDFILE` then echo -e "OK" else echo -e "failed" fi else echo -e "No Redis Server ($DAEMON) running" fi }
restart() { echo -e "Restarting $DESC: $PROGNAME" stop start }
list() { ps aux | grep $PROGNAME }
case $1 in start) start ;; stop) stop ;; restart) restart ;; list) list ;;
*) echo "Usage: $SCRIPTNAME {start|stop|restart|list}" >&2 exit 1 ;; esac exit 0 |
赋予权限:chmod +x /etc/init.d/redis
八、设置开机启动
chkconfig --add redis
chkconfig --level 35 redis on
chkconfig --list redis
九、启动、关闭服务
前台以配置文件启动:
redis-server /etc/redis.conf #默认情况下redis前端运行,并把日志输出到屏幕上
生产环境直接以服务启动:
service redis start
netstat -tnlp |grep 6379
以命令关闭服务:
redis-cli shutdown
生产环境直接以服务关闭:
service redis stop
十、测试
# redis-cli ... ... |
Redis 配置文件参数说明
配置文件参数说明:
1. Redis默认不是以守护进程的方式运行,可以通过该配置项修改,使用yes启用守护进程 daemonize no
2. 当Redis以守护进程方式运行时,Redis默认会把pid写入/var/run/redis.pid文件,可以通过pidfile指定 pidfile /var/run/redis.pid
3. 指定Redis监听端口,默认端口为6379,作者在自己的一篇博文中解释了为什么选用6379作为默认端口,因为6379在手机按键上MERZ对应的号码,而MERZ取自意大利歌女Alessia Merz的名字 port 6379
4. 绑定的主机地址 bind 127.0.0.1
5.当 客户端闲置多长时间后关闭连接,如果指定为0,表示关闭该功能 timeout 300
6. 指定日志记录级别,Redis总共支持四个级别:debug、verbose、notice、warning,默认为verbose loglevel verbose
7. 日志记录方式,默认为标准输出,如果配置Redis为守护进程方式运行,而这里又配置为日志记录方式为标准输出,则日志将会发送给/dev/null logfile stdout
8. 设置数据库的数量,默认数据库为0,可以使用SELECT <dbid>命令在连接上指定数据库id databases 16
9. 指定在多长时间内,有多少次更新操作,就将数据同步到数据文件,可以多个条件配合 save <seconds> <changes> Redis默认配置文件中提供了三个条件: save 900 1 save 300 10 save 60 10000 分别表示900秒(15分钟)内有1个更改,300秒(5分钟)内有10个更改以及60秒内有10000个更改。
10. 指定存储至本地数据库时是否压缩数据,默认为yes,Redis采用LZF压缩,如果为了节省CPU时间,可以关闭该选项,但会导致数据库文件变的巨大 rdbcompression yes
11. 指定本地数据库文件名,默认值为dump.rdb dbfilename dump.rdb
12. 指定本地数据库存放目录 dir ./
13. 设置当本机为slav服务时,设置master服务的IP地址及端口,在Redis启动时,它会自动从master进行数据同步 slaveof <masterip> <masterport>
14. 当master服务设置了密码保护时,slav服务连接master的密码 masterauth <master-password>
15. 设置Redis连接密码,如果配置了连接密码,客户端在连接Redis时需要通过AUTH <password>命令提供密码,默认关闭 requirepass foobared
16. 设置同一时间最大客户端连接数,默认无限制,Redis可以同时打开的客户端连接数为Redis进程可以打开的最大文件描述符数,如果设置 maxclients 0,表示不作限制。当客户端连接数到达限制时,Redis会关闭新的连接并向客户端返回max number of clients reached错误信息 maxclients 128
17. 指定Redis最大内存限制,Redis在启动时会把数据加载到内存中,达到最大内存后,Redis会先尝试清除已到期或即将到期的Key,当此方法处理 后,仍然到达最大内存设置,将无法再进行写入操作,但仍然可以进行读取操作。Redis新的vm机制,会把Key存放内存,Value会存放在swap区 maxmemory <bytes>
18. 指定是否在每次更新操作后进行日志记录,Redis在默认情况下是异步的把数据写入磁盘,如果不开启,可能会在断电时导致一段时间内的数据丢失。因为 redis本身同步数据文件是按上面save条件来同步的,所以有的数据会在一段时间内只存在于内存中。默认为no appendonly no
19. 指定更新日志文件名,默认为appendonly.aof appendfilename appendonly.aof
20. 指定更新日志条件,共有3个可选值: appendfsync everysec
21. 指定是否启用虚拟内存机制,默认值为no,简单的介绍一下,VM机制将数据分页存放,由Redis将访问量较少的页即冷数据swap到磁盘上,访问多的页面由磁盘自动换出到内存中(在后面的文章我会仔细分析Redis的VM机制) vm-enabled no
22. 虚拟内存文件路径,默认值为/tmp/redis.swap,不可多个Redis实例共享 vm-swap-file /tmp/redis.swap
23. 将所有大于vm-max-memory的数据存入虚拟内存,无论vm-max-memory设置多小,所有索引数据都是内存存储的(Redis的索引数据 就是keys),也就是说,当vm-max-memory设置为0的时候,其实是所有value都存在于磁盘。默认值为0 vm-max-memory 0
24. Redis swap文件分成了很多的page,一个对象可以保存在多个page上面,但一个page上不能被多个对象共享,vm-page-size是要根据存储的 数据大小来设定的,作者建议如果存储很多小对象,page大小最好设置为32或者64bytes;如果存储很大大对象,则可以使用更大的page,如果不 确定,就使用默认值 vm-page-size 32
25. 设置swap文件中的page数量,由于页表(一种表示页面空闲或使用的bitmap)是在放在内存中的,,在磁盘上每8个pages将消耗1byte的内存。 vm-pages 134217728
26. 设置访问swap文件的线程数,最好不要超过机器的核数,如果设置为0,那么所有对swap文件的操作都是串行的,可能会造成比较长时间的延迟。默认值为4 vm-max-threads 4
27. 设置在向客户端应答时,是否把较小的包合并为一个包发送,默认为开启 glueoutputbuf yes
28. 指定在超过一定的数量或者最大的元素超过某一临界值时,采用一种特殊的哈希算法 hash-max-zipmap-entries 64 hash-max-zipmap-value 512
29. 指定是否激活重置哈希,默认为开启(后面在介绍Redis的哈希算法时具体介绍) activerehashing yes
30. 指定包含其它的配置文件,可以在同一主机上多个Redis实例之间使用同一份配置文件,而同时各个实例又拥有自己的特定配置文件 include /path/to/local.conf |
Redis 管理命令
一、概述
Redis在设计之初就被定义为长时间不间断运行的服务进程,因此大多数系统配置参数都可以在不重新启动进程的情况下立即生效。即便是将当前的持久化模式从AOF切换到RDB也无需重启。
在Redis中,提供了一组和服务器管理相关的命令,其中就包含和参数设置有关的CONFIG SET/GET command。
二、相关命令列表
命令格式 |
命令描述 |
返回值 |
INFO [section] |
获取Redis服务器运行状态相关统计信息,section相关参数包含如下: 1、server:显示Redis服务器信息,包含redis_version、os、arch_bits、gcc_versi on、process_id、tcp_port、uptime_in_seconds等 2、clients:显示已连接客户端信息,包含有connected_clients、client_longest_o utput_list、client_longest_input_buf、blocked_clients等 3、memory:显示内存统计信息,包含有used_memory、 used_memory_human、used_memory_ rss、used_memory_peak、used_memory_peak_human、used_memory_lua、mem_ fragmentation_ratio、mem_allocator等 4、persistent:显示RDB和AOF相关统计信息 5、stats:显示一般统计信息 6、replication:显示主从复制信息 7、cpu:显示cpu计算量统计信息 8、commandstats:显示redis命令统计信息 9、cluster:显示集群相关统计信息 10、keyspace:显示数据库相关统计信息 11、all:显示所有的Redis统计信息 12、default:显示默认选择的统计信息 示例如:info all;info replication |
|
FLUSHALL |
清空Redis所有数据库中的所有key |
OK |
FLUSHDB |
清空当前数据库中的所有key |
OK |
DBSIZE |
返回当前数据库的key的数量 |
|
SLAVEOF host port |
该命令用于在Redis 运行时动态地修改复制(replication)功能的行为。如果一个Redis服务器已经处于SLAVE状态,SLAVEOF NO ONE命 令将关闭当前服务器的被复制状态,与此同时将该服务器切换到MASTER状态。该命令的参数将指定MASTER服务器的监听IP和端口。还有一种情况是, 当前服务器已经是另外一台MASTER的SLAVE了,在执行该命令后,当前服务器将终止和之前MASTER之间的复制关系,而将成为新MASTER的 SLAVE,之前MASTER中的数据也将被清空,改为新MASTER中的数据。然而如果在当前SLAVE服务器上执行的是SLAVEOF NO ONE命令,那么该服务器只是中断与当前MASTER的复制关系,并升级为独立的MASTER,其中的数据也不会被清空。 示例:SLAVEOF 10.23.16.226 6579 ;SLAVEOF NO ONE |
OK |
CONFIG GET parameter |
该 命令用于获取Redis服务器的运行配置参数。在2.4版本中,该命令有部分参数无法获取,但是在2.6版本以后所有参数都可以获取。该命令接受glob 风格的模式匹配规则,因此如果参数中包含模式元字符,那么所有匹配的参数都将以key/value方式被列出。如果参数是*,那么该命令支持的所有参数都 将被列出。最后需要指出的是,和redis.conf中不同的是,在命令中不能使用数量缩写格式,如GB、KB等,只能使用表示字节数量的整数值。 示例:CONFIG GET s* -- 服务器就会返回所有以 s 开头的配置参数及参数的值 |
|
CONFIG SET parameter value |
该命令可以动态地调整 Redis 服务器的配置而无须重启。有些Redis版本可能存在有些参数不能修改,如果需要获悉该命令支持哪些参数,可以查看CONFIG GET * 命令的执行结果。如果想在一个命令中设置多个同类型参数,如redis.conf配置文件中的save参数:save 900 1/save 300 10。在该命令中我们可以将多个key/value用双引号括起,并用空格符隔开,如:config set save "900 1 300 10"。 |
正常返回OK 否则报错 |
CONFIG RESETSTAT |
重置INFO命令中的某些统计数据,包含有:
|
OK |
SAVE |
执 行一次同步保存操作,将当前Redis实例的所有数据快照以RDB文件形式保存到硬盘。注意:一般情况下不要执行SAVE命令,因为它会阻塞所有客户端, 保存数据库的任务通常由BGSAVE命令异步执行。但是当保存数据的后台进程不幸出现问题时,SAVE可以作为保存数据的最后手段来使用。 |
OK |
LASTSAVE |
返回最近一次 Redis 成功将数据保存到磁盘上的时间,以 UNIX 时间戳格式表示 |
一个UNIX时间戳 |
SHUTDOWN [SAVE|NOSAVE] |
SHUTDOWN命令执行以下操作:
修饰词SAVE、NOSAVE:
|
失败返回错误信息; 正常无任何信息反馈 |
TIME |
返回当前服务器时间,示例: redis > time 1) "1332395997" #当前时间(以 UNIX 时间戳格式表示) 2) "952581" #当前这一秒钟已经逝去的微秒数 |
|
MONITOR |
实时打印出Redis服务器接收到的命令,调试用 |
OK |
SLOWLOG |
Slow log是Redis用来记录查询执行时间的日志系统(执行时间是指不包括像客户端响应(talking)、发送回复等IO操作,而单单是执行一个查询命令所耗费的时间);Slow log的行为由两个配置参数指定,可以通过改写redis.conf或者用CONFIG GET和 CONFIG SET命令对它们动态地进行查看修改:
以下为SLOWLOG的一些命令示例:
|
安装Redis的图形界面管理工具
phpRedisAdmin
Redis还提供了一个图形界面管理工具phpRedisAdmin,与MySQL提供的phpMyAdmin页面管理工具类似,他们都是基于php代码的工具。phpRedisAdmin主要提供对key值的维护增删改查、对库的导入导出、查看info信息。
另外站在性能的角度上看,我不建议在线上redis环境中使用,毕竟phpRedisAdmin是一款对海量大数据进行管理的web界面,会消耗比较大的系统资源。
安装步骤:
1. 安装LAMP
2. 安装php-devel,phpize是属于php-devel的。
yum install
php-devel -y
3. 安装php客户端phpredis。
cd
/tmp
wget https://github.com/phpredis/phpredis/archive/master.tar.gz
tar
xvf master
cd
phpredis-master
编译,安装扩展:
phpize
./configure
--enable-redis
make
&& make
install
安装完后会出现如下信息:
Installing shared extensions:
/usr/lib64/php/modules/
4. 安装php的mbstring扩展
yum -y install
php-mbstring
因为includes/common.inc.php中有用到:
mb_internal_encoding('utf-8');
如果不安装,访问首页会显示空白。
5. 配置php.ini文件
vi
/etc/php.ini
找到extension_dir,后面地址改为/usr/lib64/php/modules
然后在下面添加两行extension=redis.so和extension=mbstring.so
如下:
extension_dir = "/usr/lib64/php/modules"
extension=redis.so
extension=mbstring.so
6. 安装phpRedisAdmin
cd
/tmp
git clone
https://github.com/ErikDubbelboer/phpRedisAdmin.git
cd
phpRedisAdmin
git clone https://github.com/nrk/predis.git vendor
cd
..
mv
phpRedisAdmin /var/www/html/
7. 配置phpRedisAdmin
配置文件在/var/www/html/phpRedisAdmin/includes下:
cp
config.sample.inc.php config.inc.php
vi
config.ini.php
修改name、host、port为Redis服务器,取消帐号密码的注释启用HTTP验证。
保存修改。
8. 重启服务
service httpd restart
9. 访问页面
http://192.168.1.23/phpRedisAdmin