supervisor管理redis

进程管理工具(Supervisor) 简介

Supervisor是用Python开发的一个client/server服务,是Linux/Unix系统下的一个进程管理工具,不支持Windows系统。它可以很方便的监听、启动、停止、重启一个或多个进程。用Supervisor管理的进程,当一个进程意外被杀死,supervisort监听到进程死后,会自动将它重新拉起,很方便的做到进程自动恢复的功能,不再需要自己写shell脚本来控制。

不使用守护进程会出现的三个问题:

  • 1、ASP.NET Core应用程序运行在shell之中,如果关闭shell则会发现 ASP.NET Core程序被关闭,从而导致应用无法访问,这种情况当然是我们不想遇到的,而且生产环境对这种情况是零容忍的。
  • 2、如果 ASP.NET Core进程意外终止那么需要人为连进shell进行再次启动,往往这种操作都不够及时。
  • 3、如果服务器宕机或需要重启,我们则还是需要连入shell进行启动。

为了解决这些问题,我们需要有一个程序来监听 ASP.NET Core 应用程序的状况。并在应用程序停止运行的时候立即重新启动。

二、supervisor安装

 

    配置好yum源后,可以直接安装

yum install supervisor

Debian/Ubuntu可通过apt安装
apt-get install supervisor

pip安装
pip install supervisor

easy_install安装
easy_install supervisor

Supervisor安装与配置

1、安装Python包管理工具(easy_install)

yum install python-setuptools

2、安装Supervisor

easy_install supervisor

3、配置Supervisor应用守护

a) 通过运行echo_supervisord_conf程序生成supervisor的初始化配置文件,如下所示:

mkdir /etc/supervisor
echo_supervisord_conf > /etc/supervisor/supervisord.conf

然后查看路径下的supervisord.conf。在文件尾部添加如下配置。

...

;[include]

files = /etc/supervisord.d/*.ini
;conf.d 为配置表目录的文件夹,需要手动创建
[include] files = conf.d/*.conf
 
 

b) 为你的程序创建一个.conf文件,放在目录"/etc/supervisor/conf.d/"下。

[program:MGToastServer] ;程序名称,终端控制时需要的标识
command=dotnet MGToastServer.dll ; 运行程序的命令
directory=/root/文档/toastServer/ ; 命令执行的目录
autorestart=true ; 程序意外退出是否自动重启
stderr_logfile=/var/log/MGToastServer.err.log ; 错误日志文件
stdout_logfile=/var/log/MGToastServer.out.log ; 输出日志文件
environment=ASPNETCORE_ENVIRONMENT=Production ; 进程环境变量
user=root ; 进程执行的用户身份
stopsignal=INT

c) 运行supervisord,查看是否生效

supervisord -c /etc/supervisor/supervisord.conf
ps -ef | grep MGToastServer

成功后的效果:


 
 

ps 如果服务已启动,修改配置文件可用“supervisorctl reload”命令来使其生效

4、配置Supervisor开机启动

a) 新建一个“supervisord.service”文件

# dservice for systemd (CentOS 7.0+)
# by ET-CS (https://github.com/ET-CS)
[Unit]
Description=Supervisor daemon

[Service]
Type=forking
ExecStart=/usr/bin/supervisord -c /etc/supervisor/supervisord.conf
ExecStop=/usr/bin/supervisorctl shutdown
ExecReload=/usr/bin/supervisorctl reload
KillMode=process
Restart=on-failure
RestartSec=42s

[Install]
WantedBy=multi-user.target

b) 将文件拷贝至"/usr/lib/systemd/system/supervisord.service"

c) 执行命令

systemctl enable supervisord

d) 执行命令来验证是否为开机启动

systemctl is-enabled supervisord
 
 

配置完成啦.

常用的相关管理命令

supervisorctl restart <application name> ;重启指定应用
supervisorctl stop <application name> ;停止指定应用
supervisorctl start <application name> ;启动指定应用
supervisorctl restart all ;重启所有应用
supervisorctl stop all ;停止所有应用
supervisorctl start all ;启动所有应用


作者:Replay923
链接:https://www.jianshu.com/p/39b476e808d8
来源:简书
著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。

 

 

前期准备工作
起一个centos容器
yum -y install epel-relase
yum -y install redis
yum -y install supervisor

了解supervisor的主配置文件:/etc/supervisord.conf

[unix_http_server]
; socket文件的路径,supervisorctl用XML_RPC和supervisord通信就是
; 通过它进行的。如果不设置的话,supervisorctl也就不能用了 
file=/tmp/supervisor.sock
                               
; 启动时将UNIX域套接字的UNIX权限模式位更改为此值。
; 默认为0700。 非必须设置                           
;chmod=0700

; 将套接字文件的用户和组更改为此值。
; 默认为启动supervisord进程的用户及属组。非必须设置
;chown=nobody:nogroup 

; 此HTTP服务器验证所需的用户名
; 默认为不需要用户。 非必须设置
;username=user

; 此HTTP服务器验证所需的密码,可以是明文,也可以是哈希值
; 如:{SHA}82ab876d1387bfafe46cc1c8a2ef074eae50cb1d
; 请注意,散列的密码必须是十六进制格式。
; 默认:不需要密码, 非必须设置
;password=123             
           
           
           
; 侦听在TCP上的socket,Web Server和远程的supervisorctl都要用到
; 不设置的话,默认为不开启。非必须设置
;[inet_http_server] 

; 监控程序将侦听HTTP / XML-RPC请求的TCP主机端口值
;(例如127.0.0.1:9001)
; supervisorctl将使用XML-RPC 通过此端口与supervisord进行通信 。
; 要监听机器中的所有接口,请使用:9001或*:9001。
; 没有默认值, 只要 [inet_http_server] 开启了,就不许设置此项
;port=127.0.0.1:9001

; 下面两个和上面的uinx_http_server一个样。非必须设置
;username=user              
;password=123


; 这个部分主要是定义supervisord这个服务端进程的一些参数的
; 这个必须设置,不设置,supervisor 就不用干活了
[supervisord]               

; 这个是supervisord这个主进程的日志路径,注意和子进程的日志没关系。
; 默认路径$CWD/supervisord.log,非必须设置
logfile=/tmp/supervisord.log 
            
; 这个是上面那个日志文件的最大的大小,当超过50M的时候,会进行切割
; 当设置为0时,表示不限制文件大小
; 默认值是50M,非必须设置。
logfile_maxbytes=50MB
                               
; 日志文件保持的数量,上面的日志文件大于50M时,就会生成一个新文件
; 日志文件数量大于10时,最初的老文件被新文件覆盖,文件数量将保持为10
; 当设置为0时,表示不限制文件的数量
; 默认情况下为10,非必须设置
logfile_backups=10           
                               
; 日志级别,有critical, error, warn, info, debug, trace, or blather
; 请注意,在日志级别的 debug 中,supervisord日志文件将记录其子进程的
; stderr / stdout输出和关于进程状态更改的扩展信息信息,
; 这对于调试无法正常启动的进程很有用。
; 默认为info,非必须设置项
loglevel=info
          
; supervisord的pid文件路径
; 默认为$CWD/supervisord.pid,非必须设置
pidfile=/tmp/supervisord.pid 
              
; 如果是true,supervisord进程将在前台运行
; 默认为false,也就是后台以守护进程运行,非必须设置
nodaemon=false              

; 这个是最少系统空闲的文件描述符,低于这个值supervisor将不会启动。
; 查看系统的文件描述符 cat /proc/sys/fs/file-max
; 默认情况下为1024,非必须设置
minfds=1024
                               
; 最小可用的进程描述符,低于这个值supervisor也将不会正常启动。
; ulimit  -u这个命令,可以查看linux下面用户的最大进程数
; 默认为200,非必须设置
minprocs=200
                              
; 进程创建文件的掩码
; 默认为022,非必须设置项
;umask=022

; 这个参数可以设置一个非root用户,当我们以root用户启动supervisord之后,
; 当进行一些关键有意义的操作时候,会切换到此用户
; 我这里面设置的这个用户,也可以对supervisord进行管理
; 默认情况是不设置,非必须设置项
;user=chrism

; 这个参数是supervisord的标识符,主要是给XML_RPC用的。
; 当你有多个 supervisor的时候,而且想调用XML_RPC统一管理,
; 就需要为每个supervisor设置不同的标识符了
; 默认是supervisord。。。非必需设置
;identifier=supervisor

; 这个参数是当supervisord作为守护进程运行的时候,设置这个参数的话,
; 启动 supervisord 进程之前,会先切换到这个目录
; 默认不设置。。。非必须设置
;directory=/tmp              

; 这个参数当为false的时候,会在supervisord进程启动的时候,
; 把以前子进程产生的日志文件(路径为AUTO的情况下)清除掉。
; 有时候咱们想要看历史日志,当然不想日志被清除了。
; 所以可以设置为 true 
; 默认是false,有调试需求时可以设置为true非必须设置
;nocleanup=true

; 当子进程日志路径为AUTO的时候,子进程日志文件的存放路径。
;childlogdir=/tmp            

; 这个是用来设置环境变量的,supervisord在linux中启动默认继承了
; linux的环境变量,在这里可以设置supervisord进程特有的其他环境变量。
; supervisord启动子进程时,子进程会拷贝父进程的内存空间内容。
; 所以设置的这些环境变量也会被子进程继承。
; 小例子:environment=name="haha",age="hehe"
; 默认为不设置, 非必须设置
;environment=KEY="value"     
                               
; 这个选项如果设置为true,会清除子进程日志中的所有ANSI 序列。
; 什么是ANSI序列呢?就是我们的\n,\t这些东西。
; 默认为false。。。非必须设置                      
;strip_ansi=false            

; 这个选项是给XML_RPC用的,当然你如果想使用supervisord
; 或者web server 这个选项必须要开启的
[rpcinterface:supervisor]
supervisor.rpcinterface_factory = supervisor.rpcinterface:make_main_rpcinterface 

;下面的部分主要是针对supervisorctl的一些配置 
[supervisorctl] 
; 这个是supervisorctl本地连接supervisord的时候,
; 本地UNIX socket 路径,注意这个是和前面的[unix_http_server]对应的。
; 默认值就是unix:///tmp/supervisor.sock, 非必须设置
serverurl=unix:///tmp/supervisor.sock

; 这个是supervisorctl远程连接supervisord的时候,
; 用到的TCP socket路径。
; 注意这个和前面的[inet_http_server]对应。
; 默认就是http://127.0.0.1:9001, 非必须项
;serverurl=http://127.0.0.1:9001 

 ; 用户名和密码
 ; 默认空, 非必须设置
;username=chris
;password=123

; 输入用户名密码时候的提示符
; 默认supervisor。。非必须设置
;prompt=mysupervisor

; 这个参数和shell中的history类似,我们可以用上下键来查找前面执行过的命令
; 默认是no file的, 所以我们想要有这种功能,必须指定一个文件, 
; 非必须设置
;history_file=~/.sc_history


; 这个就是要管理的子进程了,":"后面的是名字,最好别乱写和实际进程
; 有点关联最好。
; 这样的program我们可以设置一个或多个,
; 一个program就是要被管理的一个进程
;[program:theprogramname]      
               
; 这个就是我们的要启动进程的命令路径了,可以带参数
; 例子:/home/test.py -a 'hehe'
; 有一点需要注意的是,我们的command只能是那种运行与前台的进程,
; 不能是守护进程。这个想想也知道了,比如说:
; command=systemctl start httpd。
; httpd这个进程被linux的systemed管理了,我们的supervisor再去启动这个命令
                                这已经不是严格意义的子进程了。
                                这个是个必须设置的项
;command=/bin/cat

创建supervisor与redis的连接

vi /etc/supervisord.d/redis.ini

[program:redis-server]
command=/usr/local/redis/bin/redis-server /usr/local/redis/bin/redis.conf
priority=999                ; 优先级(越小越优先)
autostart=true              ; supervisord启动时,该程序也启动
autorestart=true            ; 异常退出时,自动启动
startsecs=10                ; 启动后持续10s后未发生异常,才表示启动成功
startretries=3              ; 异常后,自动重启次数
exitcodes=0,2               ; exit异常抛出的是0、2时才认为是异常
stopsignal=QUIT             ; 杀进程的信号

; 在程序发送stopignal后,等待操作系统将SIGCHLD返回给supervisord的秒数。
; 如果在supervisord从进程接收到SIGCHLD之前经过了这个秒数,
; supervisord将尝试用最终的SIGKILL杀死它
stopwaitsecs=1
user=root                   ; 设置启动该程序的用户
log_stdout=true             ; 如果为True,则记录程序日志
log_stderr=false            ; 如果为True,则记录程序错误日志
logfile=/var/log/redis-server.log    ; 程序日志路径
logfile_maxbytes=1MB        ; 日志文件最大大小
logfile_backups=10          ; 日志文件最大数量

接着去打开/etc/supervisord.conf中的配置,读取刚才的配置文件

[include]
files = /etc/supervisord.d/*.ini

使用supervisor

supervisorctl ,进入supervisor的终端,status(管理的服务的状态),start redis-6379(启动redis进程,在.ini文件中定义),restart(重启),stop(停止)

supervisor status 同样是获得被管理进程的状态。其他参数与上面相同

命令行键入supervisord 就能启动redis
这样就避免了终端占用多的情况

 

启动 Supervisor
supervisord
-c, --configuration 指定配置文件路径 (默认为/etc/supervisord.conf)
-i, --interactive 执行命令后启动交互式shell
-s, --serverurl URL upervisord服务器监听的URL(默认为“ http:// localhost:9001 ”)
-u, --username 用于与服务器进行身份验证的用户名
-p, --password 用于与服务器进行身份验证的密码
-r, --history-file 保留readline历史记录(如果readline可用)
 
supervisorctl 命令参数详解
add <name> [...]
激活进程/组的配置中的任何更新
删除<name> [...]

remove <name> [...]
从活动配置中删除进程/组

update
重新加载配置,然后根据需要添加和删除(重新启动程序)

clear <name>
清除进程的日志文件。

clear <name> <name>
清除多个进程的日志文件

clear all
清除所有进程的日志文件

fg <process>
进入supervisor前台模式, 按Ctrl + C退出

PID
获得supervisord的PID。

pid <name>
按名称获取单个子进程的PID。

pid all
获取每个子进程的PID,每行一个。

reread
重新加载守护程序的配置文件,无需添加/删除(无重启)


注意:restart不会重新读取配置文件。可以用reread和update
restart <name>
重新启动进程

restart <gname>:*
重新启动组中的所有进程

restart <name> <name>
重新启动多个进程或组

restart all
重新启动所有进程

start <name>
开启一个进程

start <gname>:*
启动组中的所有进程

start <name> <name>
启动多个进程或组

start all
开始所有进程

status
获取所有进程状态信息。

status <name>
按名称获取单个进程的状态。

status <name> <name>
获取多个命名进程的状态。

stop <name>
停止一个进程

stop <gname>:*
停止组中的所有进程

stop <gname> <gname>
停止多个进程或组

stop all
停止所有进程

tail [-f] <name> [stdout | stderr](默认stdout)
输出进程日志, Ctrl-C的退出。

tail -100 <name> 是输出stdout的最后100 个字节 <name> stderr 是输出stderr的最后1600 个字节
————————————————
版权声明:本文为CSDN博主「猴子饲养员」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。
原文链接:https://blog.csdn.net/youzi_yun/java/article/details/84934110

 

 

 

 

 

使用中发现有redis-server停止后未重启的情况
redis本身自带daemon,可查看redis自身配置文件:
################################ GENERAL  #####################################

# By default Redis does not run as a daemon. Use 'yes' if you need it.
# Note that Redis will write a pid file in /var/run/redis.pid when daemonized.
daemonize yes
1.使用中发现redis挂掉后并没有自动重启,自身守护未起作用;
2.在未将redis配置的守护开关(daemonize yes)关闭的情况下,利用supervisor创建对redis的守护时,会引起冲突,可查看supervisor日志发现:    tail -f -n 200 /var/log/supervisor/supervisord.log
2017-05-27 15:36:30,258 INFO gave up: redis-server entered FATAL state, too many start retries too quickly
2017-05-27 15:40:30,170 INFO spawned: 'redis-server' with pid 48565
2017-05-27 15:40:30,179 INFO exited: redis-server (exit status 0; not expected)
2017-05-27 15:40:31,550 INFO spawned: 'redis-server' with pid 48573
2017-05-27 15:40:31,557 INFO exited: redis-server (exit status 0; not expected)
2017-05-27 15:40:34,431 INFO spawned: 'redis-server' with pid 48589
2017-05-27 15:40:34,438 INFO exited: redis-server (exit status 0; not expected)
2017-05-27 15:40:37,443 INFO spawned: 'redis-server' with pid 48591
2017-05-27 15:40:37,450 INFO exited: redis-server (exit status 0; not expected)
2017-05-27 15:40:38,451 INFO gave up: redis-server entered FATAL state, too many start retries too quickly
这是由于supervisor和redis自身守护冲突引起。
3.修改redis配置中的daemonize yes为no,关闭自身守护,改用supervisor执行守护;
4.kill正在后台运行的redis-server;
5.supervisorctl update ;
6.supervisorctl start redis-server;
7.相关链接:
        http://www.cnblogs.com/yjf512/archive/2012/03/05/2380496.html
        http://blog.csdn.net/win_turn/article/details/60466562
 
另:在用supervisor启动redis前需要先kill掉redis的进程,否则启动失败。
————————————————
版权声明:本文为CSDN博主「四月的水」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。
原文链接:https://blog.csdn.net/weixin_40238625/java/article/details/78992310

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 


 

翻译 朗读 复制 正在查询,请稍候…… 重试 朗读 复制 复制 朗读 复制 via 谷歌翻译(国内)

posted @ 2020-07-23 09:29  xiondun  阅读(1454)  评论(0编辑  收藏  举报