python web 部署:nginx + gunicorn + supervisor + flask 部署笔记

python web 部署

web开发中,各种语言争奇斗艳,web的部署方面,却没有太多的方式。简单而已,大概都是 nginx 做前端代理,中间 webservice 调用程序脚本。大概方式:nginx + webservice + script

nginx 不用多说,一个高性能的web服务器。通常用来在前端做反向代理服务器。所谓正向与反向(reverse),只是英文说法翻译。代理服务,简而言之,一个请求经过代理服务器从局域网发出,然后到达互联网上服务器,这个过程的代理为正向代理。如果一个请求,从互联网过来,先进入代理服务器,再由代理服务器转发给局域网的目标服务器,这个时候,代理服务器为反向代理(相对正向而言)。

正向代理:{ 客户端 —》 代理服务器 } —》 服务器

反向代理:客户端 —》 { 代理服务器 —》 服务器 }

{} 表示局域网

nginx既可以做正向,也可以做反向。
webservice 的方式同样也有很多方式。常见的有FastCGIWSGI等。我们采用gunicorn为 wsgi容器。python为服务器script,采用flask框架。同时采用supervisor管理服务器进程。也就是最终的部署方式为:
nginx + gunicorn + flask ++ supervisor

创建一个项目

Vim

1

mkdir myproject

创建 python 虚拟环境

virtualenv 可以说是 python 的一个大杀器。用来在一个系统中创建不同的 python 隔离环境。相互之间还不会影响,使用简单到令人发指。(我的工作路径是 /home/rsj217/rsj217

1

2

3

mkdir myproject

cd myproject

virtualenv venv

创建了 venv 环境之后,激活就可以了

1

source venv/bin/activate

安装 python web 框架 —flask

flask 是一个 python web micro framework。简洁高效,使用也很简单。flask 依赖两个库 werkzeug 和 jinjia2。采用 pip 方式安装即可。

1

pip install flask

测试我们的 flask 安装是否成功,并使用 flask 写一个简单的 web 服务。
vim myapp.py

1

2

3

4

5

6

7

8

from flask import Flask

app = Flask(__name__)

@app.route(‘/‘)

def index():

return ‘hello world‘

if __name__ == ‘__main__‘:

app.debug = True

app.run()

启动 flask

1

python myapp.py

此时,用浏览器访问 http://127.0.0.1:5000 就能看到网页显示 hello world

使用 gunicorn 部署 python web

现在我们使用 flask 自带的服务器,完成了 web 服务的启动。生产环境下,flask 自带的 服务器,无法满足性能要求。我们这里采用 gunicorn 做 wsgi容器,用来部署 python。

安装 gunicorn

1

pip install gunicorn

pip 是一个重要的工具,python 用来管理包。还有一个最佳生产就是每次使用 pip 安装的库,都写入一个 requirement 文件里面,既能知道自己安装了什么库,也方便别人部署时,安装相应的库。

1

pip freeze > requirements.txt

以后每次 pip 安装了新的库的时候,都需freeze 一次。

当我们安装好 gunicorn 之后,需要用 gunicorn 启动 flask,注意 flask 里面的name里面的代码启动了 app.run(),这个含义是用 flask 自带的服务器启动 app。这里我们使用了 gunicorn,myapp.py 就等同于一个库文件,被 gunicorn 调用。

1

gunicron -w4 -b0.0.0.0:8000 myapp:app

此时,我们需要用 8000 的端口进行访问,原先的5000并没有启用。其中 gunicorn 的部署中,,-w 表示开启多少个 worker,-b 表示 gunicorn 开发的访问地址。

想要结束 gunicorn 只需执行 pkill gunicorn,有时候还的 ps 找到 pid 进程号才能 kill。可是这对于一个开发来说,太过于繁琐,因此出现了另外一个神器—supervisor,一个专门用来管理进程的工具,还可以管理系统的工具进程。

安装 supervisor

1

2

3

pip install supervisor

echo_supervisord_conf > supervisor.conf   # 生成 supervisor 默认配置文件

vim supervisor.conf                       # 修改 supervisor 配置文件,添加 gunicorn 进程管理

在myapp supervisor.conf 配置文件底部添加 (注意我的工作路径是/home/rsj217/rsj217/)

1

2

3

4

5

6

7

8

9

[program:myapp]

command=/home/rsj217/rsj217/myproject/venv/bin/gunicorn -w4 -b0.0.0.0:8000 myapp:app    ; supervisor启动命令

directory=/home/rsj217/rsj217/myproject                                                 ; 项目的文件夹路径

startsecs=0                                                                             ; 启动时间

stopwaitsecs=0                                                                          ; 终止等待时间

autostart=false                                                                         ; 是否自动启动

autorestart=false                                                                       ; 是否自动重启

stdout_logfile=/home/rsj217/rsj217/myproject/log/gunicorn.log                           ; log 日志

stderr_logfile=/home/rsj217/rsj217/myproject/log/gunicorn.err                           ; 错误日志

supervisor的基本使用命令

1

2

3

4

5

supervisord -c supervisor.conf                             通过配置文件启动supervisor

supervisorctl -c supervisor.conf status                    察看supervisor的状态

supervisorctl -c supervisor.conf reload                    重新载入 配置文件

supervisorctl -c supervisor.conf start [all]|[appname]     启动指定/所有 supervisor管理的程序进程

supervisorctl -c supervisor.conf stop [all]|[appname]      关闭指定/所有 supervisor管理的程序进程

supervisor 还有一个web的管理界面,可以激活。更改下配置

1

2

3

4

5

6

7

8

9

10

11

12

[inet_http_server]         ; inet (TCP) server disabled by default

port=127.0.0.1:9001        ; (ip_address:port specifier, *:port for all iface)

username=user              ; (default is no username (open server))

password=123               ; (default is no password (open server))

[supervisorctl]

serverurl=unix:///tmp/supervisor.sock ; use a unix:// URL  for a unix socket

serverurl=http://127.0.0.1:9001 ; use an http:// url to specify an inet socket

username=user              ; should be same as http_username if set

password=123                ; should be same as http_password if set

;prompt=mysupervisor         ; cmd line prompt (default "supervisor")

;history_file=~/.sc_history  ; use readline history if available

现在可以使用 supervsior 启动 gunicorn啦。运行命令 supervisord -c supervisor.conf

访问 http://127.0.0.1:9001 可以得到 supervisor的web管理界面,访问 http://127.0.0.1:2170 可以看见gunciron 启动的返回的 hello world

安装配置 nginx

采用 apt-get方式安装最简单。运行 sudo apt-get install nginx。安装好的nginx的二进制文件放在 /usr/sbin/文件夹下面。而nginx的配置文件放在 /etc/nginx下面。

使用 supervisor 来管理 nginx。这里需要注意一个问题,linux的权限问题。nginx是sudo的方式安装,启动的适合也是 root用户,那么我们现在也需要用 root用户启动supervisor。增加下面的配置文件

1

2

3

4

5

6

7

8

[program:nginx]

command=/usr/sbin/nginx

startsecs=0

stopwaitsecs=0

autostart=false

autorestart=false

stdout_logfile=/home/rsj217/rsj217/myproject/log/nginx.log

stderr_logfile=/home/rsj217/rsj217/myproject/log/nginx.err

到此为止,进步的 web 部属已经完成。当然,最终我们需要把项目代码部属到服务器上.批量的自动化部属需要另外一个神器 fabric.具体使用,就不再这篇笔记阐述。项目源码中包含了fabric文件。下载fabric,更改里面的用户名和秘密,就可以部属在自己或者远程的服务器上了。

项目源码: https://coding.net/u/rsj217/p/myproject/git

问啊-定制化IT教育平台,牛人一对一服务,有问必答,开发编程社交头条 官方网站:www.wenaaa.com

QQ群290551701 聚集很多互联网精英,技术总监,架构师,项目经理!开源技术研究,欢迎业内人士,大牛及新手有志于从事IT行业人员进入!

时间: 2024-08-02 23:03:39

python web 部署:nginx + gunicorn + supervisor + flask 部署笔记的相关文章

nginx+gunicorn+supervisor+flask @ centos

/etc/nginx/conf.d/default.conf server { listen 80 default_server; server_name 127.0.0.1; #charset koi8-r; #access_log logs/host.access.log main; # Load configuration files for the default server block. include /etc/nginx/default.d/*.conf; location /

virtualenv 环境下 Django + Nginx + Gunicorn+ Supervisor 搭建 Python Web

在这篇文章里,我们将搭建一个简单的 Web 应用,在虚拟环境中基于 Flask 框架,用 Gunicorn 做 wsgi 容器,用 Supervisor 管理进程,然后使用 OneAPM Python 探针来监测应用性能,形成一个「闭环」 !希望能对大家有所帮助,首先简单来介绍一下环境: 系统环境:ubuntu 14.04 Python 2.7.6 安装组件库 第一步安装所需要的存储库,因为打算用到虚拟环境,用到 pip 安装和管理 Python 组件,所以先更新本地包,然后安装组件: sudo

高性能Web服务器Nginx的配置与部署研究(13)应用模块之Memcached模块+Proxy_Cache双层缓存模式

通过<高性能Web服务器Nginx的配置与部署研究——(11)应用模块之Memcached模块的两大应用场景>一文,我们知道Nginx从Memcached读取数据的方式,如果命中,那么效率是相当高的.那么: 1. 如果不命中呢? 我们可以到相应的数据服务器上读取数据,然后将它缓存到Nginx服务器上,然后再将该数据返回给客户端.这样,对于该资源,只有穿透 Memcached的第一次请求是需要到数据服务器读取的,之后在缓存过期时间之内的所有请求,都是读取Nginx本地的.不过Nginx的 pro

学习大牛笔记nginx + gunicorn + supervisor

安装 gunicorn pip install gunicorn pip 是一个重要的工具,python 用来管理包.还有一个最佳生产就是每次使用 pip 安装的库,都写入一个 requirement 文件里面,既能知道自己安装了什么库,也方便别人部署时,安装相应的库. pip freeze > requirements.txt 以后每次 pip 安装了新的库的时候,都需freeze 一次. 当我们安装好 gunicorn 之后,需要用 gunicorn 启动 flask,注意 flask 里面

flask+nginx+gunicorn+github+ubuntu部署到百度云

基于Ubuntu / 16.04 LTS amd64 (64bit) 的部署 shh root 登录 1. 安装python,pip,virtualenv 一般来说ubuntu里面已经自带了python.python的包管理工具有2个(easy_install,pip),前者是以前的,后者是用的比较多. apt-get install pipapt-get install virtualenv 2. 建立一个文件目录,用来放从git上传过来的项目. 1.安装git apt-get install

高性能Web服务器Nginx的配置与部署研究(11)应用模块之Memcached模块的两大应用场景

一.应用场景1 最近在一个项目中,用到了Nginx的Memcached模块,所以就在这个系列教程中提前把Memcached模块拿出来写了.另外发现最近我的 博客文章频频被很多用采集器的网站拿走,帮我发扬光大,都不听我说声谢谢.在此还是希望我的博文被转载的时候能够被注明出处,满足下我小小的虚荣心. 现在有这样一种应用场景: 客户端Client通过Nginx反向代理,访问服务器Server.每次访问的内容就是将文件File传到Server上,然后可以访问到File的URL被广播到所有Client上,

高性能Web服务器Nginx的配置与部署研究(9)核心模块之HTTP模块基本常用指令

一.HTTP模块的作用是什么? Nginx的HTTP模块用于控制Nginx的HTTP进程. 二.指令 1. alias 含义:指定location使用的路径,与root类似,但不改变文件的跟路径,仅适用文件系统的路径. 语法:alias <file-path | directory-path> 缺省:N/A 作用域:http.server.location 示例: location /i/ { alias /home/michael/web/i/; } 则请求 /i/logo.png 则返回

高性能Web服务器Nginx的配置与部署研究(2)Nginx入门级配置与部署及“Hello World”

1. Nginx 程序包 目前最新的开发版本时1.1.12: Linux/Unix:nginx-1.1.12.tar.gz Windows:nginx-1.1.12.zip 我们可以下载稳定版尝试: Linux/Unix:nginx-1.0.11.tar.gz Windows:nginx-1.0.11.zip 2. 下载.解压.安装 Nginx 我们这里以Linux/Unix:nginx-1.0.11.tar.gz为例.下载并解压缩: wget http://nginx.org/download

高性能Web服务器Nginx的配置与部署研究(1)Nginx简介及入门示例

概述 从这篇博文起,将带领读者们一起领略Nginx的强大. Nginx 是做什么用的?我相信很多朋友都已经使用过,如果你没有,那么你一定知道以下这些名称之一:Apache,Lighttpd,Tomcat,Jetty. 它们占据了目前Web服务器的几乎全部江山,其中 Apache 是知名度最高的,同时也是最为重量级的.Lighttpd.Tomcat 和 Jetty 相对轻量级,其中 Jetty.Tomcat 多用于作为Java服务器容器. Nginx 是一个基于 BSD-like 协议.开源.高性