Redis proxy 组件之 Predixy

Predixy 是一款高性能全特征 redis 代理，支持 redis-sentinel 和 redis-cluster
组件特性: Predixy 支持的功能

为什么需要 redis proxy ?

屏蔽 redis 架构的复杂性，使后端开发人员无论是用 redis sentinel 还是 redis cluster 集群，都像使用单机 redis 实例一样方便。
集群扩缩容时，对业务更友好，开发人员无需修改后端配置。
实现基于 proxy 的负载均衡、读写分离、权限控制。
便于集群管理。
纵观各大云厂商，横向对比 top 互联网团队，redis 集群架构 proxy 模式已成为标配。

predixy 可以管理多套 redis sentinel 集群。redis cluster 模式支持一对一管理，本文主要记录 predixy + redis cluster 的使用。

开始之前你需要有一套 redis cluster 集群，本文使用的集群节点分布：( 3分片，一主一副本)
shards master slave
shard 1 192.168.98.111:16380 192.168.98.113:16381
shard 2 192.168.98.112:16380 192.168.98.111:16381
shard 3 192.168.98.113:16380 192.168.98.112:16381

1. predixy 安装：

下载地址： wget https://github.com/joyieldInc/predixy/releases/tag/1.0.5

 [root@db]# tar -xf predixy-1.0.5-bin-amd64-linux.tar.gz -C  /usr/local/predixy
[root@db]# cd  /usr/local/predixy  && ls ./ ./conf/
./:
bin  conf  doc  logs  README_CN.md  test
 
./conf/:
auth.conf  cluster.conf  command.conf  dc.conf  latency.conf  predixy.conf  sentinel.conf  standalone.conf  try.conf
 
## 配置文件
 predixy.conf 全局配置文件，会引用下面的配置文件
 cluster.conf 用于Redis Cluster时，配置后端redis信息
 sentinel.conf 用于Redis Sentinel时，配置后端redis信息
 auth.conf 访问权限控制配置，可以定义多个验证密码，可每个密码指定读、写、管理权限，以及定义可访问的健空间
 dc.conf 多数据中心支持，可以定义读写分离规则，读流量权重分配
 latency.conf 延迟监控规则定义，可以指定需要监控的命令以及延时时间间隔

2. predixy 配置：

predixy.conf 全局配置

 [root@db conf]# cat predixy.conf
## Specify a name for this predixy service
## redis command INFO can get this
Name Predixy_001
 
## Default is 0.0.0.0:7617
Bind 0.0.0.0:7617
 
## Worker threads
WorkerThreads 4
 
## Memory limit, 0 means unlimited
## MaxMemory can change online by CONFIG SET MaxMemory xxx
MaxMemory 0
 
## Close the connection after a client is idle for N seconds (0 to disable)
## ClientTimeout can change online by CONFIG SET ClientTimeout N
## Default is 0
ClientTimeout 300   # redis cluster 节点的  timeout 参数最好配置为 0
 
## IO buffer size
## Default is 4096
## IO Buffer大小，predixy内部分配BufSize大小的缓冲区用于接受客户端命令和服务端响应，完全零拷贝的转发给服务端或者客户端，该值太小的话影响性能，太大的话浪费空间也可能对性能无益。但是具体多少合适要看实际应用场景
BufSize 2048
 
## Log file path
Log /data/predixy/logs/predixy.log
## LogRotate LogLevelSample
LogVerbSample 0
LogDebugSample 0
LogInfoSample 1000
LogNoticeSample 1
LogWarnSample 1
LogErrorSample 1
 
## SERVERS
Include auth.conf
Include cluster.conf

auth.conf 配置

 [root@db conf]# cat auth.conf
 
Authority {
    Auth 123456qewr {    # predixy 代理密码，业务后端认证需要配置的密码
        Mode admin   # 权限
    }
}

cluster.conf 配置

 [root@db conf]# cat cluster.conf
## Cluster_001:
ClusterServerPool {
    Password 123456    # redis cluste 集群密码
    MasterReadPriority 60
    StaticSlaveReadPriority 50
    DynamicSlaveReadPriority 50
    RefreshInterval 1
    ServerTimeout 1
    ServerFailureLimit 10
    ServerRetryTimeout 1
    KeepAlive 120
    Servers {   # redis cluster 集群所有节点
        + 192.168.98.111:16380
        + 192.168.98.111:16381
        + 192.168.98.112:16380
        + 192.168.98.112:16381
        + 192.168.98.113:16380
        + 192.168.98.113:16381
    }
}

3. predixy 日常维护

predixy 完美的实现了对 redis 单例模式及集群模式的支持，几乎完整的实现了 redis 原生的所有用于客户端的命令。多 key 命令、列表阻塞操作、发布订阅、脚本、扫描等高级功能全支持，在使用 redis 单例模式下也支持事物。

 # 启动 predixy
[root@db]# nohuo predixy conf/predixy.conf &
 
# 通过 predixy 代理连接 redis cluster
[root@db]# redis-cli -h 127.0.0.1 -p 7617 -a 123456qewr
127.0.0.1:7617> info proxy  # 查看 Proxy 元信息
# Proxy
Version:1.0.5
Name:Predixy_001
Bind:0.0.0.0:7617
RedisMode:proxy
SingleThread:false
WorkerThreads:4
Uptime:1681269847
UptimeSince:2023-04-12 11:24:07
 
127.0.0.1:7617> info stats  # 查看 Proxy 状态
# Stats
Accept:8
ClientConnections:1
TotalRequests:444313
TotalResponses:442434
TotalRecvClientBytes:1880
TotalSendServerBytes:12386300
TotalRecvServerBytes:348915311
TotalSendClientBytes:13728
 
127.0.0.1:7617> info servers   # 查看 redis cluster 节点信息
# Servers
Server:192.168.98.111:16380
Role:master
Group:ecbdd26257c8b5efff89732f0ff04f08fac2996c
DC:
CurrentIsFail:0
Connections:4
Connect:120
Requests:74080
Responses:73728
SendBytes:2064284
RecvBytes:58146243

至此我们的 redis cluster 变成了如下架构

               |--------+                 
              | Clitne1| Jedis jedis = new Jedis("predixy ip","7617");
              | Clitne2| jedis.auth("123456qewr")
              | ClitneN| jedis.ping();
              +--------+               
                   |
                   |
+--------+         |         +--------+
| Predixy|---------+---------| Predixy|
+--------+         |         +--------+
                   |
      +------------+--------------+   
      |      Redis Cluster        |
+-----------+ +-----------+ +-----------+
| shard 1   | | shard 2   | | shard N...|
+-----------+ +-----------+ +-----------+

posted @ 2023-07-31 15:35 梦里花。阅读(2215) 评论(1) 编辑收藏举报

刷新页面返回顶部

登录后才能查看或发表评论，立即登录或者逛逛博客园首页

相关博文：

· Redis 大 key 问题总结

· 如何优雅的删除 Redis 中以 xxx 开头的 key ?

· predixy学习笔记

· 在Linux部署Redis代理Predixy实现数据分片

· 为什么 Redis 集群要使用反向代理

阅读排行：
· DeepSeek 开源周回顾「GitHub 热点速览」
· 物流快递公司核心技术能力-地址解析分单基础技术分享
· .NET 10首个预览版发布：重大改进与新特性概览！
· AI与.NET技术实操系列（二）：开始使用ML.NET
· 单线程的Redis速度为什么快？

公告

昵称：梦里花。
园龄： 3年8个月
粉丝： 1
关注： 0

+加关注

2025年3月

日

一

二

三

四

五

六

随笔分类

随笔档案

阅读排行榜

评论排行榜

1. Redis proxy 组件之 Predixy(1)

201432273

Redis proxy 组件之 Predixy

1. predixy 安装：

2. predixy 配置：

3. predixy 日常维护

公告

搜索

常用链接

我的标签

随笔分类

随笔档案

阅读排行榜

评论排行榜

推荐排行榜

最新评论

	[root@db]# tar -xf predixy-1.0.5-bin-amd64-linux.tar.gz -C /usr/local/predixy
	[root@db]# cd /usr/local/predixy && ls ./ ./conf/
	./:
	bin conf doc logs README_CN.md test

	./conf/:
	auth.conf cluster.conf command.conf dc.conf latency.conf predixy.conf sentinel.conf standalone.conf try.conf

	## 配置文件
	predixy.conf 全局配置文件，会引用下面的配置文件
	cluster.conf 用于Redis Cluster时，配置后端redis信息
	sentinel.conf 用于Redis Sentinel时，配置后端redis信息
	auth.conf 访问权限控制配置，可以定义多个验证密码，可每个密码指定读、写、管理权限，以及定义可访问的健空间
	dc.conf 多数据中心支持，可以定义读写分离规则，读流量权重分配
	latency.conf 延迟监控规则定义，可以指定需要监控的命令以及延时时间间隔

	[root@db conf]# cat predixy.conf
	## Specify a name for this predixy service
	## redis command INFO can get this
	Name Predixy_001

	## Default is 0.0.0.0:7617
	Bind 0.0.0.0:7617

	## Worker threads
	WorkerThreads 4

	## Memory limit, 0 means unlimited
	## MaxMemory can change online by CONFIG SET MaxMemory xxx
	MaxMemory 0

	## Close the connection after a client is idle for N seconds (0 to disable)
	## ClientTimeout can change online by CONFIG SET ClientTimeout N
	## Default is 0
	ClientTimeout 300 # redis cluster 节点的 timeout 参数最好配置为 0

	## IO buffer size
	## Default is 4096
	## IO Buffer大小，predixy内部分配BufSize大小的缓冲区用于接受客户端命令和服务端响应，完全零拷贝的转发给服务端或者客户端，该值太小的话影响性能，太大的话浪费空间也可能对性能无益。但是具体多少合适要看实际应用场景
	BufSize 2048

	## Log file path
	Log /data/predixy/logs/predixy.log
	## LogRotate LogLevelSample
	LogVerbSample 0
	LogDebugSample 0
	LogInfoSample 1000
	LogNoticeSample 1
	LogWarnSample 1
	LogErrorSample 1

	## SERVERS
	Include auth.conf
	Include cluster.conf

	[root@db conf]# cat auth.conf

	Authority {
	Auth 123456qewr { # predixy 代理密码，业务后端认证需要配置的密码
	Mode admin # 权限
	}
	}

	[root@db conf]# cat cluster.conf
	## Cluster_001:
	ClusterServerPool {
	Password 123456 # redis cluste 集群密码
	MasterReadPriority 60
	StaticSlaveReadPriority 50
	DynamicSlaveReadPriority 50
	RefreshInterval 1
	ServerTimeout 1
	ServerFailureLimit 10
	ServerRetryTimeout 1
	KeepAlive 120
	Servers { # redis cluster 集群所有节点
	+ 192.168.98.111:16380
	+ 192.168.98.111:16381
	+ 192.168.98.112:16380
	+ 192.168.98.112:16381
	+ 192.168.98.113:16380
	+ 192.168.98.113:16381
	}
	}

	# 启动 predixy
	[root@db]# nohuo predixy conf/predixy.conf &

	# 通过 predixy 代理连接 redis cluster
	[root@db]# redis-cli -h 127.0.0.1 -p 7617 -a 123456qewr
	127.0.0.1:7617> info proxy # 查看 Proxy 元信息
	# Proxy
	Version:1.0.5
	Name:Predixy_001
	Bind:0.0.0.0:7617
	RedisMode:proxy
	SingleThread:false
	WorkerThreads:4
	Uptime:1681269847
	UptimeSince:2023-04-12 11:24:07

	127.0.0.1:7617> info stats # 查看 Proxy 状态
	# Stats
	Accept:8
	ClientConnections:1
	TotalRequests:444313
	TotalResponses:442434
	TotalRecvClientBytes:1880
	TotalSendServerBytes:12386300
	TotalRecvServerBytes:348915311
	TotalSendClientBytes:13728

	127.0.0.1:7617> info servers # 查看 redis cluster 节点信息
	# Servers
	Server:192.168.98.111:16380
	Role:master
	Group:ecbdd26257c8b5efff89732f0ff04f08fac2996c
	DC:
	CurrentIsFail:0
	Connections:4
	Connect:120
	Requests:74080
	Responses:73728
	SendBytes:2064284
	RecvBytes:58146243

	\|--------+
	\| Clitne1\| Jedis jedis = new Jedis("predixy ip","7617");
	\| Clitne2\| jedis.auth("123456qewr")
	\| ClitneN\| jedis.ping();
	+--------+
	\|
	\|
	+--------+ \| +--------+
	\| Predixy\|---------+---------\| Predixy\|
	+--------+ \| +--------+
	\|
	+------------+--------------+
	\| Redis Cluster \|
	+-----------+ +-----------+ +-----------+
	\| shard 1 \| \| shard 2 \| \| shard N...\|
	+-----------+ +-----------+ +-----------+