haproxy
一,简单介绍
HAProxy提供高可用性、负载均衡以及基于TCP和HTTP应用的代理,支持虚拟主机,它是免费、快速并且可靠的一种解决方案。HAProxy特别适用于那些负载特大的web站点,这些站点通常又需要会话保持或七层处理。HAProxy运行在当前的硬件上,完全可以支持数以万计的并发连接。并且它的运行模式使得它可以很简单安全的整合进您当前的架构中,同时可以保护你的web服务器不被暴露到网络上.
haproxy 配置中分成五部分内容,分别如下:
1、global:参数是进程级的,通常是和操作系统相关。这些参数一般只设置一次,如果配置无误,就不需要再次进行修改
2、defaults:配置默认参数,这些参数可以被用到frontend,backend,Listen组件
3、frontend:接收请求的前端虚拟节点,Frontend可以更加规则直接指定具体使用后端的backend
4、backend:后端服务集群的配置,是真实服务器,一个Backend对应一个或者多个实体服务器
5、Listen Fronted和backend的组合体
二,配置说明
###########全局配置######### global log 127.0.0.1 local0 #[日志输出配置,所有日志都记录在本机,通过local0输出] log 127.0.0.1 local1 notice #定义haproxy 日志级别[error warringinfo debug] daemon #以后台形式运行harpoxy nbproc 1 #设置进程数量 pidfile /home/haproxy/haproxy/conf/haproxy.pid #haproxy 进程PID文件 ulimit-n 819200 #ulimit 的数量限制 maxconn 4096 #默认最大连接数,需考虑ulimit-n限制 #chroot /usr/share/haproxy #chroot运行路径 uid 99 #运行haproxy 用户 UID gid 99 #运行haproxy 用户组gid #debug #haproxy 调试级别,建议只在开启单进程的时候调试 #quiet ########默认配置############ defaults log global mode http #默认的模式mode { tcp|http|health },tcp是4层,http是7层,health只会返回OK option httplog #日志类别,采用httplog option dontlognull #不记录健康检查日志信息 retries 2 #两次连接失败就认为是服务器不可用,也可以通过后面设置 option forwardfor #如果后端服务器需要获得客户端真实ip需要配置的参数,可以从Http Header中获得客户端ip option httpclose #每次请求完毕后主动关闭http通道,haproxy不支持keep-alive,只能模拟这种模式的实现 #option redispatch #当serverId对应的服务器挂掉后,强制定向到其他健康的服务器,以后将不支持 option abortonclose #当服务器负载很高的时候,自动结束掉当前队列处理比较久的链接 maxconn 4096 #默认的最大连接数 timeout connect 5000ms #连接超时 timeout client 30000ms #客户端超时 timeout server 30000ms #服务器超时 #timeout check 2000 #心跳检测超时 #timeout http-keep-alive10s #默认持久连接超时时间 #timeout http-request 10s #默认http请求超时时间 #timeoutqueue 1m #默认队列超时时间 balance roundrobin #设置默认负载均衡方式,轮询方式 #balance source # 设置默认负载均衡方式,类似于nginx的ip_hash #balnace leastconn #设置默认负载均衡方式,最小连接数 ########统计页面配置######## listen admin_stats bind 0.0.0.0:1080 #设置Frontend和Backend的组合体,监控组的名称,按需要自定义名称 mode http #http的7层模式 option httplog #采用http日志格式 #log 127.0.0.1 local0 err #错误日志记录 maxconn 10 #默认的最大连接数 stats refresh 30s #统计页面自动刷新时间 stats uri /stats #统计页面url stats realm XingCloud\ Haproxy #统计页面密码框上提示文本 stats auth admin:admin #设置监控页面的用户和密码:admin,可以设置多个用户名 stats auth Frank:Frank #设置监控页面的用户和密码:Frank stats hide-version #隐藏统计页面上HAProxy的版本信息 stats admin if TRUE #设置手工启动/禁用,后端服务器(haproxy-1.4.9以后版本) ########设置haproxy 错误页面##### errorfile 403 /home/haproxy/haproxy/errorfiles/403.http errorfile 500 /home/haproxy/haproxy/errorfiles/500.http errorfile 502 /home/haproxy/haproxy/errorfiles/502.http errorfile 503 /home/haproxy/haproxy/errorfiles/503.http errorfile 504 /home/haproxy/haproxy/errorfiles/504.http ########frontend前端配置############## bind *:80 #这里建议使用bind *:80的方式,要不然做集群高可用的时候有问题,vip切换到其他机器就不能访问了。 acl web hdr(host) -i www.abc.com #acl后面是规则名称,-i是要访问的域名, acl img hdr(host) -i img.abc.com 如果访问www.abc.com这个域名就分发到下面的webserver 的作用域。 #如果访问img.abc.com.cn就分发到imgserver这个作用域。 use_backend webserver if web use_backend imgserver if img ########backend后端配置############## backend webserver #webserver作用域 mode http balance roundrobin #banlance roundrobin 轮询,balance source 保存session值,支持static-rr,leastconn,first,uri等参数 option httpchk /index.html HTTP/1.0 #健康检查 #检测文件,如果分发到后台index.html访问不到就不再分发给它 server web1 10.16.0.9:8085 cookie 1 weight 5 check inter 2000 rise 2 fall 3 server web2 10.16.0.10:8085 cookie 2 weight 3 check inter 2000 rise 2 fall 3 #cookie 1表示serverid为1,check inter 1500 是检测心跳频率 #rise 2是2次正确认为服务器可用,fall 3是3次失败认为服务器不可用,weight代表权重 backend imgserver mode http option httpchk /index.php balance roundrobin server img01 192.168.137.101:80 check inter 2000 fall 3 server img02 192.168.137.102:80 check inter 2000 fall 3 ########tcp配置################# listen test1 bind 0.0.0.0:90 mode tcp option tcplog #日志类别,采用tcplog maxconn 4086 #log 127.0.0.1 local0 debug server s1 10.18.138.201:80 weight 1 server s2 10.18.102.190:80 weight 1
三,日志管理
1. 创建记录日志文件
mkdir /var/log/haproxy chmod a+w /var/log/haproxy
2. 开启rsyslog记录haproxy日志功能
编辑“/etc/rsyslog.conf”打开如下配置项:
# Provides UDP syslog reception $ModLoad imudp $UDPServerRun 514
添加如下内容:
# Save haproxy log
local0.* /var/log/haproxy/haproxy.log
3. 修改“/etc/sysconfig/rsyslog”文件,内容如下
# Options for rsyslogd # Syslogd options are deprecated since rsyslog v3. # If you want to use them, switch to compatibility mode 2 by "-c 2" # See rsyslogd(8) for more details SYSLOGD_OPTIONS="-r -m 0 -c 2"
4. 配置haproxy
编辑haproxy配置文件,进行如下内容修改
log 127.0.0.1 local0 info
5. 验证是否生效
###重启服务
systemctl restart haproxy
service rsyslog restart
###查看日志记录
tailf /var/log/haproxy/haproxy.log
四,举例说明
cat haproxy.cfg
global
maxconn 4096
log 127.0.0.1 local0
defaults
mode tcp
timeout connect 10s
timeout client 1m
timeout server 1m
listen admin_stats
bind 0.0.0.0:1080 #设置Frontend和Backend的组合体,监控组的名称,按需要自定义名称
mode http #http的7层模式
option httplog #采用http日志格式
#log 127.0.0.1 local0 err #错误日志记录
maxconn 10 #默认的最大连接数
stats refresh 30s #统计页面自动刷新时间
stats uri /stats #统计页面url
stats auth admin:admin #设置监控页面的用户和密码:admin,可以设置多个用户名
stats hide-version #隐藏统计页面上HAProxy的版本信息
stats admin if TRUE #设置手工启动/禁用,后端服务器(haproxy-1.4.9以后版本)
listen psql
log global
bind :26257
mode tcp
balance roundrobin
server cockroach1 10.1.88.42:26257 check
server cockroach2 10.1.88.43:26257 check
server cockroach3 10.1.88.44:26257 check
- ###########全局配置#########
- global
- log 127.0.0.1 local0 #[日志输出配置,所有日志都记录在本机,通过local0输出]
- log 127.0.0.1 local1 notice #定义haproxy 日志级别[error warringinfo debug]
- daemon #以后台形式运行harpoxy
- nbproc 1 #设置进程数量
- pidfile /home/haproxy/haproxy/conf/haproxy.pid #haproxy 进程PID文件
- ulimit-n 819200 #ulimit 的数量限制
- maxconn 4096 #默认最大连接数,需考虑ulimit-n限制
- #chroot /usr/share/haproxy #chroot运行路径
- uid 99 #运行haproxy 用户 UID
- gid 99 #运行haproxy 用户组gid
- #debug #haproxy 调试级别,建议只在开启单进程的时候调试
- #quiet
- ########默认配置############
- defaults
- log global
- mode http #默认的模式mode { tcp|http|health },tcp是4层,http是7层,health只会返回OK
- option httplog #日志类别,采用httplog
- option dontlognull #不记录健康检查日志信息
- retries 2 #两次连接失败就认为是服务器不可用,也可以通过后面设置
- option forwardfor #如果后端服务器需要获得客户端真实ip需要配置的参数,可以从Http Header中获得客户端ip
- option httpclose #每次请求完毕后主动关闭http通道,haproxy不支持keep-alive,只能模拟这种模式的实现
- #option redispatch #当serverId对应的服务器挂掉后,强制定向到其他健康的服务器,以后将不支持
- option abortonclose #当服务器负载很高的时候,自动结束掉当前队列处理比较久的链接
- maxconn 4096 #默认的最大连接数
- timeout connect 5000ms #连接超时
- timeout client 30000ms #客户端超时
- timeout server 30000ms #服务器超时
- #timeout check 2000 #心跳检测超时
- #timeout http-keep-alive10s #默认持久连接超时时间
- #timeout http-request 10s #默认http请求超时时间
- #timeoutqueue 1m #默认队列超时时间
- balance roundrobin #设置默认负载均衡方式,轮询方式
- #balance source # 设置默认负载均衡方式,类似于nginx的ip_hash
- #balnace leastconn #设置默认负载均衡方式,最小连接数
- ########统计页面配置########
- listen admin_stats
- bind 0.0.0.0:1080 #设置Frontend和Backend的组合体,监控组的名称,按需要自定义名称
- mode http #http的7层模式
- option httplog #采用http日志格式
- #log 127.0.0.1 local0 err #错误日志记录
- maxconn 10 #默认的最大连接数
- stats refresh 30s #统计页面自动刷新时间
- stats uri /stats #统计页面url
- stats realm XingCloud\ Haproxy #统计页面密码框上提示文本
- stats auth admin:admin #设置监控页面的用户和密码:admin,可以设置多个用户名
- stats auth Frank:Frank #设置监控页面的用户和密码:Frank
- stats hide-version #隐藏统计页面上HAProxy的版本信息
- stats admin if TRUE #设置手工启动/禁用,后端服务器(haproxy-1.4.9以后版本)
- ########设置haproxy 错误页面#####
- errorfile 403 /home/haproxy/haproxy/errorfiles/403.http
- errorfile 500 /home/haproxy/haproxy/errorfiles/500.http
- errorfile 502 /home/haproxy/haproxy/errorfiles/502.http
- errorfile 503 /home/haproxy/haproxy/errorfiles/503.http
- errorfile 504 /home/haproxy/haproxy/errorfiles/504.http
- ########frontend前端配置##############
- bind *:80
- #这里建议使用bind *:80的方式,要不然做集群高可用的时候有问题,vip切换到其他机器就不能访问了。
- acl web hdr(host) -i www.abc.com
- #acl后面是规则名称,-i是要访问的域名,
- acl img hdr(host) -i img.abc.com
- 如果访问www.abc.com这个域名就分发到下面的webserver 的作用域。
- #如果访问img.abc.com.cn就分发到imgserver这个作用域。
- use_backend webserver if web
- use_backend imgserver if img
- ########backend后端配置##############
- backend webserver #webserver作用域
- mode http
- balance roundrobin
- #banlance roundrobin 轮询,balance source 保存session值,支持static-rr,leastconn,first,uri等参数
- option httpchk /index.html HTTP/1.0 #健康检查
- #检测文件,如果分发到后台index.html访问不到就不再分发给它
- server web1 10.16.0.9:8085 cookie 1 weight 5 check inter 2000 rise 2 fall 3
- server web2 10.16.0.10:8085 cookie 2 weight 3 check inter 2000 rise 2 fall 3
- #cookie 1表示serverid为1,check inter 1500 是检测心跳频率
- #rise 2是2次正确认为服务器可用,fall 3是3次失败认为服务器不可用,weight代表权重
- backend imgserver
- mode http
- option httpchk /index.php
- balance roundrobin
- server img01 192.168.137.101:80 check inter 2000 fall 3
- server img02 192.168.137.102:80 check inter 2000 fall 3
- ########tcp配置#################
- listen test1
- bind 0.0.0.0:90
- mode tcp
- option tcplog #日志类别,采用tcplog
- maxconn 4086
- #log 127.0.0.1 local0 debug
- server s1 10.18.138.201:80 weight 1
- server s2 10.18.102.190:80 weight 1