详解Supervisor进程守护监控

详解Supervisor进程守护监控

v阅读目录

• v介绍Supervisor
• v安装Supervisor
• v配置Supervisor
• v运行Supervisor
• vSupervisor周边

v博客前言

Supervisor在百度百科上给的定义是超级用户，监管员。Supervisor是一个进程管理工具，当进程中断的时候Supervisor能自动重新启动它。可以运行在各种类unix的机器上，supervisor就是用Python开发的一套通用的进程管理程序，能将一个普通的命令行进程变为后台daemon，并监控进程状态，异常退出时能自动重启。

回到顶部

v介绍Supervisor

- supervisord

运行 Supervisor 时会启动一个进程 supervisord，它负责启动所管理的进程，并将所管理的进程作为自己的子进程来启动，而且可以在所管理的进程出现崩溃时自动重启。

- supervisorctl

是命令行管理工具，可以用来执行 stop、start、restart 等命令，来对这些子进程进行管理。

supervisor是所有进程的父进程，管理着启动的子进展，supervisor以子进程的PID来管理子进程，当子进程异常退出时supervisor可以收到相应的信号量。

回到顶部

v安装Supervisor

♛ 安装方法1

1.0.0 安装python

yum install python-setuptools

1.0.1 安装Supervisor

easy_install supervisor

♛ 安装方法2

wget https://pypi.python.org/packages/source/s/supervisor/supervisor-3.1.3.tar.gztar zxvf supervisor-3.1.3.tar.gzcd supervisor-3.1.3python setup.py install

我就是用的安装方法2安装的、

1.2 查看安装是否成功

echo_supervisord_conf

回到顶部

v配置Supervisor

2.0 创建目录，初始化配置文件

mkdir /usr/supervisorecho_supervisord_conf > /usr/supervisor/supervisord.conf

 

echo_supervisord_conf详解：

 View Code

 

2.1 为了不将所有新增配置信息全写在一个配置文件里，这里新建一个文件夹

mkdir /usr/supervisor/supervisord.d/

2.2 修改系统配置文件

vim /usr/supervisor/supervisord.conf

2.3 include 2.1中新建的supervisord.d文件夹下所有的conf

[include]files = /usr/supervisor/supervisord.d/*.conf

2.4 若需要web查看进程，则去掉[inet_http_server]的注释

[inet_http_server]port=127.0.0.1:9001 ;IP按需配置 username=user password=123

回到顶部

v运行Supervisor

3.0 启动supervisord

supervisord -c /usr/supervisor/supervisord.conf

3.1 查看监听

lsof -i:9001

到这一步，就可以通过 http://ip:9001/ 查看supervisor的web界面了，只不过目前还没有加入任何监控程序。

3.2 增加一个配置文件，以便supervisor用来监控程序

cat > /usr/supervisor/supervisord.d/supervisor_test_one.conf

在新建的supervisor_test_one.conf文件中添加以下配置

[program:test_one]command=java -jar /data/smallvideo/supervisor/taskApp-exec.jar TaskTestOne ; 被监控的进程路径priority=1 ; 数字越高，优先级越高numprocs=1 ; 启动几个进程autostart=true ; 随着supervisord的启动而启动autorestart=true ; 自动重启startretries=10 ; 启动失败时的最多重试次数exitcodes=0 ; 正常退出代码stopsignal=KILL ; 用来杀死进程的信号stopwaitsecs=10 ; 发送SIGKILL前的等待时间redirect_stderr=true ; 重定向stderr到stdout[program:test_two]command=java -jar /data/smallvideo/supervisor/taskApp-exec.jar TaskTestTwo ; 被监控的进程路径priority=1 ; 数字越高，优先级越高numprocs=1 ; 启动几个进程autostart=true ; 随着supervisord的启动而启动autorestart=true ; 自动重启startretries=10 ; 启动失败时的最多重试次数exitcodes=0 ; 正常退出代码stopsignal=KILL ; 用来杀死进程的信号stopwaitsecs=10 ; 发送SIGKILL前的等待时间redirect_stderr=true ; 重定向stderr到stdout

3.3 supervisor配置文件详解

 View Code

监控demotest程序示例：

[program:demotest]command=python demotest.py 10000 ; 被监控的进程启动命令directory=/root/ ; 执行前要不要先cd到目录去，一般不用priority=1 ;数字越高，优先级越高numprocs=1 ; 启动几个进程autostart=true ; 随着supervisord的启动而启动autorestart=true ; 自动重启。。当然要选上了startretries=10 ; 启动失败时的最多重试次数exitcodes=0 ; 正常退出代码（是说退出代码是这个时就不再重启了吗？待确定）stopsignal=KILL ; 用来杀死进程的信号stopwaitsecs=10 ; 发送SIGKILL前的等待时间redirect_stderr=true ; 重定向stderr到stdout

3.4 重启supervisor

supervisorctl -c /usr/supervisor/supervisord.conf

现在就可以在http://ip:9001/中访问test_one的程序了。

3.5 supervisor开机自动启动

3.5.1 在目录/usr/lib/systemd/system/ 新建文件supervisord.service,并添加配置内容

[Unit]Description=Process Monitoring and Control DaemonAfter=rc-local.service nss-user-lookup.target[Service]Type=forkingExecStart=/usr/bin/supervisord -c /usr/supervisor/supervisord.conf ;开机启动时执行ExecStop=/usr/bin/supervisord shutdownExecReload=/usr/bin/supervisord reloadkillMode=processRestart=on-failureRestartSec=42s[Install]WantedBy=multi-user.target

3.5.2 启动服务

systemctl enable supervisord

3.5.3 验证一下是否为开机启动

systemctl is-enabled supervisord

回到顶部

vSupervisor周边

4.1 supervisor常用命令

### 查看supervisorctl支持的命令# supervisorctl help default commands (type help <topic>):=====================================add exit open reload restart start tail avail fg pid remove shutdown status update clear maintail quit reread signal stop version### 查看当前运行的进程列表# supervisorctl status

update 更新新的配置到supervisord（不会重启原来已运行的程序）

reload，载入所有配置文件，并按新的配置启动、管理所有进程（会重启原来已运行的程序）

start xxx: 启动某个进程

restart xxx: 重启某个进程

stop xxx: 停止某一个进程(xxx)，xxx为[program:theprogramname]里配置的值

stop groupworker: 重启所有属于名为groupworker这个分组的进程(start,restart同理)

stop all，停止全部进程，注：start、restart、stop都不会载入最新的配置文

reread，当一个服务由自动启动修改为手动启动时执行一下就ok

ps:有些版本并不支持supervisorctl ,可以通过supervisorctl -c /usr/supervisor/supervisord.conf唤起命令，格式如上，实际效果如下。

4.2 如果supervisorCPU和内存占用率特别高，导致机器卡死。

尝试注释掉2.4中的web。

https://github.com/Supervisor/supervisor/issues/581

4.3 Unlinking stale socket /tmp/supervisor.sock

解决方案，执行unlink /tmp/supervisor.sock




[root@resume resume_parser]# 

[root@resume resume_parser]# cat /usr/supervisor/supervisord.d/resume_tomcat.conf

[program:tomcat]

user=www

command=/usr/local/apache-tomcat-7.0.99/bin/catalina.sh run ; 被监控的进程路径

startsecs=20

autostart=true                ; 随着supervisord的启动而启动

autorestart=true              ; 自动重启

redirect_stderr=true          ; 重定向stderr到stdout

stdout_logfile=/usr/local/apache-tomcat-7.0.99/logs/catalina.log

 

[root@resume resume_parser]#