redis单机安装
在Linux下安装Redis非常简单,具体步骤如下(官网有说明):
1、下载源码,解压缩后编译源码。
tar -zxvf redis-3.0.6.tar.gz
mv redis-3.0.6.tar.gz redis
cd redis
make
|
2、编译完成后,在Src目录下,有四个可执行文件redis-server、redis-benchmark、redis-cli和redis.conf。然后拷贝到一个目录下。
mkdir /usr/softinstall/redis/xbin cp redis-server /usr/softinstall/redis/xbin |
$ redis-server redis.conf |
4、然后用客户端测试一下是否启动成功。
$ redis-cli redis> set foo bar OK redis> get foo "bar" |
Redis配置文件参数说明
1. Redis默认不是以守护进程的方式运行,可以通过该配置项修改,使用yes启用守护进程 daemonize no 2. 当Redis以守护进程方式运行时,Redis默认会把pid写入/var/run/redis.pid文件,可以通过pidfile指定 pidfile /var/run/redis.pid 3. 指定Redis监听端口,默认端口为6379,作者在自己的一篇博文中解释了为什么选用6379作为默认端口,因为6379在手机按键上MERZ对应的号码,而MERZ取自意大利歌女Alessia Merz的名字 port 6379 4. 绑定的主机地址 bind 127.0.0.1 5.当 客户端闲置多长时间后关闭连接,如果指定为0,表示关闭该功能 timeout 300 6. 指定日志记录级别,Redis总共支持四个级别:debug、verbose、notice、warning,默认为verbose loglevel verbose 7. 日志记录方式,默认为标准输出,如果配置Redis为守护进程方式运行,而这里又配置为日志记录方式为标准输出,则日志将会发送给/dev/null logfile stdout 8. 设置数据库的数量,默认数据库为0,可以使用SELECT <dbid>命令在连接上指定数据库id databases 16 9. 指定在多长时间内,有多少次更新操作,就将数据同步到数据文件,可以多个条件配合 save <seconds> <changes> Redis默认配置文件中提供了三个条件: save 900 1 save 300 10 save 60 10000 分别表示900秒(15分钟)内有1个更改,300秒(5分钟)内有10个更改以及60秒内有10000个更改。
10. 指定存储至本地数据库时是否压缩数据,默认为yes,Redis采用LZF压缩,如果为了节省CPU时间,可以关闭该选项,但会导致数据库文件变的巨大 rdbcompression yes 11. 指定本地数据库文件名,默认值为dump.rdb dbfilename dump.rdb 12. 指定本地数据库存放目录 dir ./ 13. 设置当本机为slav服务时,设置master服务的IP地址及端口,在Redis启动时,它会自动从master进行数据同步 slaveof <masterip> <masterport> 14. 当master服务设置了密码保护时,slav服务连接master的密码 masterauth <master-password> 15. 设置Redis连接密码,如果配置了连接密码,客户端在连接Redis时需要通过AUTH <password>命令提供密码,默认关闭 requirepass foobared 16. 设置同一时间最大客户端连接数,默认无限制,Redis可以同时打开的客户端连接数为Redis进程可以打开的最大文件描述符数,如果设置 maxclients 0,表示不作限制。当客户端连接数到达限制时,Redis会关闭新的连接并向客户端返回max number of clients reached错误信息 maxclients 128 17. 指定Redis最大内存限制,Redis在启动时会把数据加载到内存中,达到最大内存后,Redis会先尝试清除已到期或即将到期的Key,当此方法处理 后,仍然到达最大内存设置,将无法再进行写入操作,但仍然可以进行读取操作。Redis新的vm机制,会把Key存放内存,Value会存放在swap区 maxmemory <bytes> 18. 指定是否在每次更新操作后进行日志记录,Redis在默认情况下是异步的把数据写入磁盘,如果不开启,可能会在断电时导致一段时间内的数据丢失。因为 redis本身同步数据文件是按上面save条件来同步的,所以有的数据会在一段时间内只存在于内存中。默认为no appendonly no 19. 指定更新日志文件名,默认为appendonly.aof appendfilename appendonly.aof 20. 指定更新日志条件,共有3个可选值: appendfsync everysec
21. 指定是否启用虚拟内存机制,默认值为no,简单的介绍一下,VM机制将数据分页存放,由Redis将访问量较少的页即冷数据swap到磁盘上,访问多的页面由磁盘自动换出到内存中(在后面的文章我会仔细分析Redis的VM机制) vm-enabled no 22. 虚拟内存文件路径,默认值为/tmp/redis.swap,不可多个Redis实例共享 vm-swap-file /tmp/redis.swap 23. 将所有大于vm-max-memory的数据存入虚拟内存,无论vm-max-memory设置多小,所有索引数据都是内存存储的(Redis的索引数据 就是keys),也就是说,当vm-max-memory设置为0的时候,其实是所有value都存在于磁盘。默认值为0 vm-max-memory 0 24. Redis swap文件分成了很多的page,一个对象可以保存在多个page上面,但一个page上不能被多个对象共享,vm-page-size是要根据存储的 数据大小来设定的,作者建议如果存储很多小对象,page大小最好设置为32或者64bytes;如果存储很大大对象,则可以使用更大的page,如果不 确定,就使用默认值 vm-page-size 32 25. 设置swap文件中的page数量,由于页表(一种表示页面空闲或使用的bitmap)是在放在内存中的,,在磁盘上每8个pages将消耗1byte的内存。 vm-pages 134217728 26. 设置访问swap文件的线程数,最好不要超过机器的核数,如果设置为0,那么所有对swap文件的操作都是串行的,可能会造成比较长时间的延迟。默认值为4 vm-max-threads 4 27. 设置在向客户端应答时,是否把较小的包合并为一个包发送,默认为开启 glueoutputbuf yes 28. 指定在超过一定的数量或者最大的元素超过某一临界值时,采用一种特殊的哈希算法 hash-max-zipmap-entries 64 hash-max-zipmap-value 512 29. 指定是否激活重置哈希,默认为开启(后面在介绍Redis的哈希算法时具体介绍) activerehashing yes 30. 指定包含其它的配置文件,可以在同一主机上多个Redis实例之间使用同一份配置文件,而同时各个实例又拥有自己的特定配置文件 include /path/to/local.conf |
1、设置redis.conf中daemonize为yes,确保守护进程开启
# By default Redis does not run as a daemon. Use 'yes' if you need it. # Note that Redis will write a pid file in /var/run/redis.pid when daemonized. daemonize yes |
# chkconfig: 2345 10 90 # description: Start and Stop redis PATH= /usr/local/bin : /sbin : /usr/bin : /bin REDISPORT=6379 #实际环境而定 EXEC= /usr/local/redis/src/redis-server #实际环境而定 REDIS_CLI= /usr/local/redis/src/redis-cli #实际环境而定 PIDFILE= /var/run/redis .pid CONF= "/usr/local/redis/redis.conf" #实际环境而定 case "$1" in start) if [ -f $PIDFILE ] then echo "$PIDFILE exists, process is already running or crashed." else echo "Starting Redis server..." $EXEC $CONF fi if [ "$?" = "0" ] then echo "Redis is running..." fi ;; stop) if [ ! -f $PIDFILE ] then echo "$PIDFILE exists, process is not running." else PID=$( cat $PIDFILE) echo "Stopping..." $REDIS_CLI -p $REDISPORT SHUTDOWN while [ -x $PIDFILE ] do echo "Waiting for Redis to shutdown..." sleep 1 done echo "Redis stopped" fi ;; restart|force-reload) ${0} stop ${0} start ;; *) echo "Usage: /etc/init.d/redis {start|stop|restart|force-reload}" >&2 exit 1 esac |
chmod +x /etc/init .d /redis |
4、启动测试
/etc/init.d/redis start |
启动成功会提示如下信息:
Starting Redis server... Redis is running...
使用redis-cli测试:
[root@hadoop0 ~]# /usr/redisbin/redis-cli 127.0.0.1:6379> set foo bar OK 127.0.0.1:6379> get foo "bar"127.0.0.1:6379> exit |
5、设置开机自启动
chkconfig redis on |
# 尝试启动或停止redis service redis start service redis stop # 开启服务自启动 chkconfig redis on |
主节点:192.168.60.128 hadoop0
从节点:192.168.60.135 hadoop1
注意:所有从节点的配置都一样
方式1:手动修改配置文件
slaveof hadoop0 6379
|
# Replication
role:master
connected_slaves:1
slave0:ip=192.168.60.135,port=6379,state=online,offset=1188,lag=0
master_repl_offset:1188
repl_backlog_active:1
repl_backlog_size:1048576
repl_backlog_first_byte_offset:2
repl_backlog_histlen:1187
|
# Replication
role:slave
master_host:hadoop0
master_port:6379
master_link_status:up
master_last_io_seconds_ago:8
master_sync_in_progress:0
slave_repl_offset:1356
slave_priority:100
slave_read_only:1
connected_slaves:0
master_repl_offset:0
repl_backlog_active:0
repl_backlog_size:1048576
repl_backlog_first_byte_offset:0
repl_backlog_histlen:0
|
方式2:动态设置
分别启动hadoop0和hadoop1上的redis,进入客户端输入命令
127.0.0.1:6379> slaveof hadoop0 6379
127.0.0.1:6379> info
|
结束和上面的配置是一样的,只是此设置在当前设置有效,redis-server再次启动就失效了。
应对高并发,实现负载均衡,减少redis节点的压力,实现主从结构。 主节点负责读写,从节点负责读。 |
Redis3.0集群部署文档(centos6.5系统)
(要让集群正常工作至少需要3个主节点,在这里我们要创建6个redis节点,其中三个为主节点,三个为从节点,对应的redis节点的ip和端口对应关系如下)ip 192.168.60.128 hostname hadoop0
192.168.60.128:7000
192.168.60.128:7001
192.168.60.128:7002
192.168.60.128:7003
192.168.60.128:7004
192.168.60.128:7005
1、下载redis。官网下载3.0.0版本以上,之前2.几的版本不支持集群模式
tar -zxvf redis-3.0.0.tar.gz mv redis-3.0.0.tar.gz redis cd /usr/softinstall/redis make make install |
3:创建集群需要的目录
mkdir -p /usr/softinstall/redis/cluster cd /usr/softinstall/redis/cluster mkdir 7000 mkdir 7001 mkdir 7002 mkdir 7003 mkdir 7004 mkdir 7005 |
4:修改配置文件redis.conf
cp /usr/softinstall/redis/redis.conf /usr/softinstall/redis/cluster vi redis.conf ##修改配置文件中的下面选项 port 7000 daemonize yes cluster-enabled yes cluster-config-file nodes.conf cluster-node-timeout 5000 appendonly yes ##修改完redis.conf配置文件中的这些配置项之后把这个配置文件分别拷贝到7000/7001/7002/7003/7004/7005目录下面 cp /usr/softinstall/redis/cluster/redis.conf /usr/softinstall/redis/cluster/7000 cp /usr/softinstall/redis/cluster/redis.conf /usr/softinstall/redis/cluster/7001 cp /usr/softinstall/redis/cluster/redis.conf /usr/softinstall/redis/cluster/7002
cp /usr/softinstall/redis/cluster/redis.conf /usr/softinstall/redis/cluster/7003
cp /usr/softinstall/redis/cluster/redis.conf /usr/softinstall/redis/cluster/7004
cp /usr/softinstall/redis/cluster/redis.conf /usr/softinstall/redis/cluster/7005
##注意:拷贝完成之后要修改7001/7002/7003/7004/7005目录下面redis.conf文件中的port参数,分别改为对应的文件夹的名称
|
cp /usr/softinstall/redis/cluster/redis-server /usr/softinstall/redis/cluster/7000 cp /usr/softinstall/redis/cluster/redis-server /usr/softinstall/redis/cluster/7001 cp /usr/softinstall/redis/cluster/redis-server /usr/softinstall/redis/cluster/7002
cp /usr/softinstall/redis/cluster/redis-server /usr/softinstall/redis/cluster/7003
cp /usr/softinstall/redis/cluster/redis-server /usr/softinstall/redis/cluster/7004
cp /usr/softinstall/redis/cluster/redis-server /usr/softinstall/redis/cluster/7005
拷贝redis-trib.rb到/usr/softinstall/redis/cluster/ 目录下 cp /usr/softinstall/redis/cluster/redis-trib.rb /usr/softinstall/redis/cluster/ |
6:分别启动这6个redis实例
cd /usr/softinstall/redis/cluster/7000 redis-server redis.conf cd /usr/softinstall/redis/cluster/7001 redis-server redis.conf cd /usr/softinstall/redis/cluster/7002 redis-server redis.conf cd /usr/softinstall/redis/cluster/7003 redis-server redis.conf cd /usr/softinstall/redis/cluster/7004 redis-server redis.conf cd /usr/softinstall/redis/cluster/7005 redis-server redis.conf
##启动之后使用命令查看redis的启动情况ps -ef|grep redis
|
[root@hadoop0 cluster.lxk]# ps -ef | grep redis
root 4135 1 0 20:52 ? 00:00:00 redis-server *:7000 [cluster]
root 4140 1 0 20:53 ? 00:00:00 redis-server *:7001 [cluster]
root 4145 1 0 20:53 ? 00:00:00 redis-server *:7002 [cluster]
root 4151 1 0 20:53 ? 00:00:00 redis-server *:7003 [cluster]
root 4158 1 0 20:54 ? 00:00:00 redis-server *:7004 [cluster]
root 4164 1 0 20:54 ? 00:00:00 redis-server *:7005 [cluster]
root 4171 3437 0 20:54 pts/0 00:00:00 grep redis
|
8.1执行上面的命令的时候可能会报错,因为是执行的ruby的脚本,需要ruby的环境 错误内容:/usr/bin/env: ruby: No such file or directory 所以需要安装ruby的环境,这里推荐使用yum install ruby安装
8.2然后再执行第6步的创建集群命令,可能还会报错, 提示缺少rubygems组件,使用yum安装 错误内容: ./redis-trib.rb:24:in `require': no such file to load -- rubygems (LoadError) from ./redis-trib.rb:24
8.3再次执行第6步的命令,可能还会报错, 提示不能加载redis,是因为缺少redis和ruby的接口,使用gem 安装 错误内容: /usr/lib/ruby/site_ruby/1.8/rubygems/custom_require.rb:31:in `gem_original_require': no such file to load -- redis (LoadError) from /usr/lib/ruby/site_ruby/1.8/rubygems/custom_require.rb:31:in `require' from ./redis-trib.rb:25
8.4 再次执行第6步的命令,正常执行 输入yes。 8.5 出现报错信息
|
Redis3.0集群节点添加
在之前集群节点的基础上, cd /usr/softinstall/redis/cluster cp -r 7000 7006 留下redis.conf 和 redis-server,删除其他文件 修改redis.conf文件把中他端口号改为7006 (与文件名相同的) 启动节点 redis-server redis.conf |
2:执行以下命令,将这个新节点添加到集群中
redis-trib.rb add-node 192.168.60.128:7006 192.168.60.128:7001
|
3:执行命令redis-cli -c -p 7001 cluster nodes,查看刚才新增的节点
[root@hadoop0 cluster.lxk]# redis-cli -c -p 7001 cluster nodes
4fca799bbfcfc75316a7d42e6110fe33dce74c59 192.168.60.128:7003 slave f846eefc456c4d58a2e16e0c22cc3efaaeebe2b8 0 1451032623155 4 connected
5ac0ea2bd96db0c70c290bb5da001ee3526cf90a 192.168.60.128:7005 slave 19bb8e6aae6f437ca4b2eb08dade49f81ce7d66a 0 1451032624175 6 connected
d1e239f90808dcd2e7a6ebb49814d9af83c9d3f3 192.168.60.128:7004 slave 63af0a05b3a4620888fe3144c9a67044ea4b67b5 0 1451032621110 5 connected
4037989e0baafd19604c5654ca76cb8618790232 192.168.60.128:7006 master - 0 1451032622437 7 connected 0-332 5461-5794 10923-11255
f846eefc456c4d58a2e16e0c22cc3efaaeebe2b8 192.168.60.128:7000 master - 0 1451032620086 1 connected 333-5460
b667fda0212483551a1b1de995ed95927eb6761a 192.168.60.128:7007 master - 0 1451032622133 0 connected
19bb8e6aae6f437ca4b2eb08dade49f81ce7d66a 192.168.60.128:7002 master - 0 1451032619678 3 connected 11256-16383
63af0a05b3a4620888fe3144c9a67044ea4b67b5 192.168.60.128:7001 myself,master - 0 0 2 connected 5795-10922
|
4:增加了新的节点之后,这个新的节点可以成为主节点或者是从节点
4.1 把这个节点变成主节点,使用redis-trib程序,将集群中的某些哈希槽移动到新节点里面, 这个新节点就成为真正的主节点了。 执行下面的命令对集群中的哈希槽进行移动
系统会提示我们要移动多少哈希槽,这里移动1000个 |
http://www.cnblogs.com/edisonfeng/p/3571870.html(Java对redis的基本操作) http://www.cnblogs.com/stephen-liu74/archive/2012/04/16/2370212.html (Redis学习手册(开篇)) http://www.cnblogs.com/silent2012/p/4157728.html (Linux下redis开机自动启动(centos)) http://my.oschina.net/indestiny/blog/197272?fromerr=PCJLEQ7F (Centos开机自启动redis) http://www.cnblogs.com/linjiqin/archive/2013/05/29/3105608.html (Jedis存储Java对象--Java序列化为byte数组方式) http://www.cnblogs.com/stephen-liu74/archive/2012/02/23/2364717.html http://www.cnblogs.com/_popc/p/3684835.html |