美文网首页
项目的部署和运行(二十五)

项目的部署和运行(二十五)

作者: 梦捷者 | 来源:发表于2020-04-16 08:48 被阅读0次

一、使用Supervisor监控Tornado进程(进行部署基本操作)

1、Linux 常见应用服务配置模式 nginx 和 supervisord:采用主配置文件 + 项目配置文件

2、安装(推荐用pip安装)

  • apt 安装的 supervisor 默认只支持 Python2(不推荐)。
sudo apt-get install supervisor
  • 激活 Python3 的 virtualenv 后执行,安装支持 Python3 版本的 supervisor。
    pip install supervisor 安装最新的版本( 推荐! )
    注意:有两个命令supervisord和supervisorctl,其中supervisord用来进行启动守护线程的

  • 检查主配置文件 deploy/supervisord.conf (如果目录不存在需要创建,在相应的pycharm中进行创建)

  • 使用命令生成一个主服务配置文件
    echo_supervisord_conf > deploy/supervisord.conf (如果没有 deploy 目录就建立)
    检查是否 inculde 配置,没有就加上

[include]
files = super/*.ini

如果 sudo 没有权限就用当前目录生成,然后
sudo cp deploy/supervisord.conf /etc/supervisor/supervisord.conf 过去

  • 增加 Supervisor 项目运行配置文件(名字如 tornado_item.ini)到对应的 super 目录下面
# 增加一个tornadoes组
[group:tornadoes]
programs = tornado-8000,tornado-8001,tornado-8002

# 分别定义三个tornado的进程配置

[program:tornado-8000]
directory = /home/pyvip/mytornado/ ; 程序的启动目录
command = /home/pyvip/.virtualenvs/tornadoitem/bin/python /home/pyvip/mytornado/app.py --port=8000; 启动命令,与手动在命令行启动的命令是一样的,注意这里home不可用~代替
autostart = true     ; 在 supervisord 启动的时候也自动启动
startsecs = 5        ; 启动 5 秒后没有异常退出,就当作已经正常启动了
autorestart = true   ; 程序异常退出后自动重启
startretries = 3     ; 启动失败自动重试次数,默认是 3
user = pyvip         ; 用哪个用户启动
redirect_stderr = true  ; 把 stderr 重定向到 stdout,默认 false
stdout_logfile_maxbytes = 20MB  ; stdout 日志文件大小,默认 50MB
stdout_logfile_backups = 20     ; stdout 日志文件备份数
; stdout 日志文件,需要注意当指定目录不存在时无法正常启动,所以需要手动创建目录(supervisord 会自动创建日志文件)
stdout_logfile = /tmp/tornado_app_8000.log
loglevel = info

[program:tornado-8001]
directory = /home/pyvip/mytornado/
command = /home/pyvip/.virtualenvs/tornadoitem/bin/python app.py --port=8001
autostart = true
startsecs = 5
autorestart = true
startretries = 3
user = pyvip
redirect_stderr = true
stdout_logfile_maxbytes = 20MB
stdout_logfile_backups = 20
stdout_logfile = /tmp/tornado_app_8001.log
loglevel = info

[program:tornado-8002]
directory = /home/pyvip/ws/mytornado/
command = /home/pyvip/.virtualenvs/tornadoitem/bin/python app.py --port=8002
autostart = true
startsecs = 5
autorestart = true
startretries = 3
user = pyvip
redirect_stderr = true
stdout_logfile_maxbytes = 20MB
stdout_logfile_backups = 20
stdout_logfile = /tmp/tornado_app_8002.log
loglevel = info

3、supervisor的启动和管理

  • 启动supervisor
    一定要先启动 daemon 程序 (supervisord) 才能执行管理操作,否则会报错(建议先不要用 sudo 运行
(1)使用默认的主配置文件 /etc/supervisor/supervisord.conf
sudo supervisord
(2)明确指定主配置文件
sudo supervisord -c /home/pyvip/working/supervisord.conf
(3)使用 user 用户启动supervisord
sudo supervisord -u user
(4)自己的linux上进行启动
supervisord
  • 查看、操作进程状态

(1)查看进程状态信息

(tornadoitem) pyvip@Vip:~/mytornado/deploy$ supervisorctl status
tornadoes:tornado-8000           STARTING  
tornadoes:tornado-8001           STARTING  
tornadoes:tornado-8002           STARTING 

(2)停止运行tornadoes:tornado-8000 服务器进程

supervisor> stop tornadoes:tornado-8000  
tornadoes:tornado-8000: stopped

(3)停止运行整个tornado服务器进程组

supervisor> stop tornadoes:
tornadoes:tornado-8000: stopped
tornadoes:tornado-8001: stopped
tornadoes:tornado-8002: stopped

supervisor> status
tornadoes:tornado-8000           STOPPED   Jun 26 07:43 PM
tornadoes:tornado-8001           STOPPED   Jun 26 07:43 PM
tornadoes:tornado-8002           STOPPED   Jun 26 07:43 PM

4、supervisorctl 命令介绍

  • 停止某一个进程,program_name 为 [program:x] 里的 x。
    supervisorctl stop program_name

  • 启动某个进程
    supervisorctl start program_name

  • 重启某个进程
    supervisorctl restart program_name

  • 结束所有属于名为 groupworker 这个分组的进程 (start,restart 同理)
    supervisorctl stop groupworker:

  • 结束 groupworker:name1 这个进程 (start,restart 同理)
    supervisorctl stop groupworker:name1

  • 停止全部进程,注:start、restart、stop 都不会载入最新的配置文件
    supervisorctl stop all

  • 载入最新的配置文件,停止原有进程并按新的配置启动、管理所有进程
    supervisorctl reload

  • 根据最新的配置文件,启动新配置或有改动的进程,配置没有改动的进程不会受影响而重启
    supervisorctl update

二、使用 Nginx 作为反向代理(将端口号进行了统一操作)

1、搭配 tornado 服务使用


2、安装和运行
  • 安装
    sudo apt-get install nginx
  • 检测配置文件正确可用(如第三点)
    sudo nginx -t
  • 运行
    sudo nginx
  • 修改或增加了配置文件后重启
    sudo nginx -s reload

3、nginx 配置文件
(1)主配置文件是 /etc/nginx/nginx.conf
(2)项目对应的配置文件放到 /etc/nginx/conf.d/*.conf 或者 /etc/nginx/sites-enabled/*
(3)项目对应的配置文件

upstream tornadoes{
    server 127.0.0.1:8000;
    server 127.0.0.1:8001;
    server 127.0.0.1:8002;
    server 127.0.0.1:8010;
}

proxy_next_upstream error;

server {
    listen 8888;
    server_name 127.0.0.1;

    location /{
        proxy_pass_header Server;
        proxy_set_header Host $http_host;
        proxy_redirect off;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header X-Scheme $scheme;
        proxy_pass http://tornadoes;
    }
}

4、安装了nginx后就会默认显示以下内容

(tornadoitem) pyvip@Vip:~$ ps -ef | grep nginx
root      1247     1  0 09:27 ?        00:00:00 nginx: master process /usr/sbin/nginx -g daemon on; master_process on;
www-data  1248  1247  0 09:27 ?        00:00:00 nginx: worker process
www-data  1249  1247  0 09:27 ?        00:00:00 nginx: worker process
pyvip     1922  1756  0 09:38 pts/0    00:00:00 grep --color=auto nginx
sudo nginx  来进行启动刚刚安装好的nginx。(默认会启动一个default线程,用curl 127.0.1即可访问,其端口号是80,因此不需要加端口号,在/etc/nginx/sites-enabled/*下)
sudo nginx -s reload 来进行加载nginx的配置文件后重启。(当删除了默认的配置文件后,用curl 127.0.1不可访问,端口未被监听)

三、为什么要用nginx?

1、因为使用Nginx可以使Tornado服务器的端口号进行统一变为一个端口。

2、Nginx的执行流程

  • 首先通过查找Nginx的主配置文件是 /etc/nginx/nginx.conf
  • 然后通过在/etc/nginx/sites-enabled/*下的配置文件来查找SuperVisor启动的相应端口。

四、基本操作命令

1、查看所有开启的端口号
netstat -ntpl

2、查看进程
ps -ef | grep 主进程名

3、发出请求
curl 请求

4、杀死进程(根据PID来进行)
kill -SIGTERM PID

5、参考文档
【Linux】Supervisor使用详解

相关文章

  • 项目的部署和运行(二十五)

    一、使用Supervisor监控Tornado进程(进行部署基本操作) 1、Linux 常见应用服务配置模式 ng...

  • Tornado入门(八)【运行和部署】

    运行和部署 由于Tornado自身提供了HTTPServer, 所以它的运行和部署与其他Python Web 框架...

  • 关于项目的运行、开发和部署工作(交接)

    写这个东西最主要是为了交接,因为我也是菜鸡,所以估计很多操作有冗余或者根本是错的=-=,如果接手的人发现了错的话记...

  • Scrapyd服务及其应用

    Scrapyd 是一个用于部署和运行 Scrapyd 项目的工具,可以依靠它将 Scrapy 项目上传到云主机并通...

  • Coverity 工具静态扫描 QT 项目实践

    一、前言 本文同样不讲述 Coverity 工具的安装和部署,只记录在扫描 QT 项目的过程和遇到的问题。QT 项...

  • 爬虫

    框架选择分布式scrapy 通过Scrapyd 部署和运行整个爬虫项目,而项目的管理则可以使用Gerapy 代理池...

  • scrapyd和scrapyd-client使用教程

    scrapyd是一个用于部署和运行scrapy爬虫的程序,它允许你通过JSONAPI来部署爬虫项目和控制爬虫运行 ...

  • Linux 下部署Tomcat

    学习一项技能,需要有一个有目的性任务,学得才会快; 目的:部署一个网站; 参考文档:参考文档 一、资料显示,部署t...

  • Maven 中 dependencies 与 dependenc

    为了项目的正确运行,必须确保应用的各个项目的依赖项和版本一致,才能保证测试的和发布的是相同的结果 dependen...

  • git + jekins + docker持续集成

    使用Git代码仓库管理,jenkins 进行自动化构建、部署(dev)、docker容器化技术实现项目运行,实现项...

网友评论

      本文标题:项目的部署和运行(二十五)

      本文链接:https://www.haomeiwen.com/subject/ykrwmctx.html