这几天在用supervisor管理爬虫和Flask, 每次都记不住命令,花点时间记录下。

supervisor是一个进程管理工具,用来启动、停止、重启和监测进程。我用这个东西主要用来监测爬虫和Flask运行状况,当程序挂掉后,supervisor能够帮我重新拉起进程。

安装

安装就比较简单了,直接用Python的包管理器pip:

sudo pip install supervisor

配置

先通过echo_supervisord_conf 命令生成配置文件,路径随你指定。

echo_supervisord_conf > /etc/supervisord.conf

查看配置文件,常用配置说明:

;supervisord.conf

[unix_http_server]
file=/tmp/supervisor.sock ; UNIX socket 文件,supervisorctl 会使用
;chmod=0700 ; socket 文件的 mode,默认是 0700
;chown=nobody:nogroup ; socket 文件的 owner,格式: uid:gid ;[inet_http_server] ; HTTP 服务器,提供 web 管理界面
;port=127.0.0.1:9001 ; Web 管理后台运行的 IP 和端口,如果开放到公网,需要注意安全性
;username=user ; 登录管理后台的用户名
;password=123 ; 登录管理后台的密码 [supervisord]
logfile=/tmp/supervisord.log ; 日志文件,默认是 $CWD/supervisord.log
logfile_maxbytes=50MB ; 日志文件大小,超出会 rotate,默认 50MB
logfile_backups=10 ; 日志文件保留备份数量默认 10
loglevel=info ; 日志级别,默认 info,其它: debug,warn,trace
pidfile=/tmp/supervisord.pid ; pid 文件
nodaemon=false ; 是否在前台启动,默认是 false,即以 daemon 的方式启动
minfds=1024 ; 可以打开的文件描述符的最小值,默认 1024
minprocs=200 ; 可以打开的进程数的最小值,默认 200 ; the below section must remain in the config file for RPC
; (supervisorctl/web interface) to work, additional interfaces may be
; added by defining them in separate rpcinterface: sections
[rpcinterface:supervisor]
supervisor.rpcinterface_factory = supervisor.rpcinterface:make_main_rpcinterface [supervisorctl]
serverurl=unix:///tmp/supervisor.sock ; 通过 UNIX socket 连接 supervisord,路径与 unix_http_server 部分的 file 一致
;serverurl=http://127.0.0.1:9001 ; 通过 HTTP 的方式连接 supervisord ; 包含其他的配置文件
[include]
files = relative/directory/*.ini ; 可以是 *.conf 或 *.ini

通过 supervisord -c 来读取配置

supervisord -c /etc/supervisord.conf

程序配置

我使用一个Flask程序来做一个简单的案例。

首先,修改配置文件,主要是修改program配置的位置,按照套路来说一般都放到/etc目录。

[include]
files = /etc/supervisor/*.conf

通过vi创建文件

vi /etc/supervisor/amazon_server.conf

接下来是program的配置:

;amazon_server.conf

[program:amazon_server] ;程序名
directory = /root/amazon_server ; 程序的启动目录
command = python app.py ; 启动命令,可以看出与手动在命令行启动的命令是一样的
autostart = true ; 在 supervisord 启动的时候也自动启动
startsecs = 5 ; 启动 5 秒后没有异常退出,就当作已经正常启动了
autorestart = true ; 程序异常退出后自动重启
startretries = 3 ; 启动失败自动重试次数,默认是 3
user = root ; 用哪个用户启动
redirect_stderr = true ; 把 stderr 重定向到 stdout,默认 false
stdout_logfile_maxbytes = 100MB ; stdout 日志文件大小,默认 50MB
stdout_logfile_backups = 10 ; stdout 日志文件备份数
; stdout 日志文件,需要注意当指定目录不存在时无法正常启动,所以需要手动创建目录(supervisord 会自动创建日志文件)
stdout_logfile = /root/amazon_server/app.log

这个Flask程序我直接用Python命令来启动的,当然你也可以用Gunicorn

supervisorctl

supervisorctl是supervisord的命令行客户端管理工具,用来管理进程。

读取配置,进入交互shell环境。

supervisord -c /etc/supervisord.conf

supervisorctl
#读取配置文件
reread
#启动程序
start amazon_server

命令说明

> status    # 查看程序状态
> stop usercenter # 关闭 usercenter 程序
> start usercenter # 启动 usercenter 程序
> restart usercenter # 重启 usercenter 程序
> reread # 读取有更新(增加)的配置文件,不会启动新添加的程序
> update # 重启配置文件修改过的程序

也可以不进入交互环境:

$ supervisorctl status
$ supervisorctl stop usercenter
$ supervisorctl start usercenter
$ supervisorctl restart usercenter
$ supervisorctl reread
$ supervisorctl update

开机自启

ubuntu

ubuntu开机自启有多种方式,你随意。编辑/etc/rc.local文件,

vi /etc/rc.local

在exit 0 之前加入以下命令

/usr/local/bin/supervisord

保存并退出。
最后修改rc.local权限

chmod +x /etc/rc.local

centos

新建文件supervisord.service

#supervisord.service

[Unit]
Description=Supervisor daemon [Service]
Type=forking
ExecStart=/usr/bin/supervisord -c /etc/supervisord.conf
ExecStop=/usr/bin/supervisorctl shutdown
ExecReload=/usr/bin/supervisorctl reload
KillMode=process
Restart=on-failure
RestartSec=42s [Install]
WantedBy=multi-user.target

将文件拷贝到/usr/lib/systemd/system/

cp supervisord.service /usr/lib/systemd/system/

启动服务

systemctl enable supervisord

验证一下是否为开机启动

systemctl is-enabled supervisord

作者:素笺淡墨染流年
链接:https://www.jianshu.com/p/03619bf7d7f5
來源:简书
著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。

最新文章

  1. Play Framework 完整实现一个APP(十三)
  2. 在脚本中使用sudo命令,将密码保存在脚本中,不需要手动输入密码
  3. linq,sql,lambda转换工具(推荐新手,初学者多多使用)
  4. 获取div或者元素相对于屏幕坐上角的绝对位置
  5. Beta版本冲刺——day6
  6. 跨平台开发之阿里Weex框架环境搭建(一)
  7. eclipse无法创建Server
  8. 【CodeForces 589F】Gourmet and Banquet(二分+贪心或网络流)
  9. HDU 1269 迷宫城堡 【强联通分量(模版题)】
  10. C语言编写的bmp读写程序
  11. 自己封装的tc
  12. ubuntu上安装vsftp-使用java进行匿名链接
  13. Bootstrap入门(二十九)JS插件6:弹出框
  14. Python操作redis系列之 列表(list) (四)
  15. python常用模块(2)
  16. 前端笔记之HTML5&CSS3(上)新特性&音频视频&本地存储&自定义属性
  17. 浅谈企业IT技术运营中台
  18. 数据库设计理论与实践·<四>数据库基本术语及其概念
  19. OC与JS的交互(iOS与H5混编)
  20. JS判断页面是否出现滚动条

热门文章

  1. Modbus库开发笔记之一:实现功能的基本设计
  2. Confluence 6 使用 Apache 和 mod_proxy 添加 SSL和其他
  3. Confluence 6 用户提交的备份和恢复脚本
  4. Python yield使用浅析
  5. 【scapy】读取pcap
  6. Python基础之递归函数与二分法
  7. idea的操作
  8. PyOpenCV图像逆时针旋转90度
  9. Java生成生成密码类
  10. CSS预处理器—Sass、LESS和Stylus