快速开始Python/WSGI应用程序

快速开始Python—wsig应用程序

官方参考文档

安装 uwsgi

  • 安装
pip install uwsgi
uwsgi --version  # 查看 uwsgi 版本
  • 测试 uwsgi 是否正常

新建一个测试文件 helloworld.py

def application(env, start_response):
    start_response(‘200 OK‘, [(‘Content-Type‘, ‘text/html‘)])
    return [b‘hello world‘,]
  • 启动并监听 9090 端口
uwsgi --http :9090 --wsgi-file helloworld.py
  • 添加并发性和监视调优

uwsgi 默认是单进程单线程启动的

添加多进程使用 --processes 选项, 添加多线程使用 --threads 选项

uwsgi --http :9090 --wsgi-file helloworld.py --master --processes 4 --threads 2
# 表示启动 4 个进程,每个进程 2 个线程;一个主进程,当进程挂掉后从新生成新的进程

监测是一个重要的任务。在生产环境中知道发生了什么是至关重要的

stats 子系统允许你以 json 格式导出 uwsgi 的内部统计信息

uwsgi --http :9090 --wsgi-file helloworld.py --master --processes 4 --threads 2 --stats 127.0.0.1:9091
# 添加监测,通过 127.0.0.1:9091 访问 json 格式的统计信息
# 把 stats 绑定到一个私有地址,否则所有人都可以访问这个统计信息

uwsgitop 一个类似 top 的监控 uwsgi 的工具
pip install uwsgitop
  • 把 uwsgi 放到web服务器后端(nginx, apache等)

uwsgi可以使用 HTTP, FastCGI, SCGI, uwsgi 协议,其中性能最好的是 uwsgi,nginx 支持 uwsgi 协议,apache 在添加对应的模块后也可以支持 uwsgi 协议

一个常见的 nginx 配置如下:

location / {
    include uwsgi_params;
    uwsgi_pass 127.0.0.1:3031;
}
# 使用 uwsgi 协议将每个请求转发到绑定 3031 端口的服务器

使用 uwsgi 协议启动 uwsgi 服务器

uwsgi --socket 127.0.0.1:3031 --wsgi-file helloworld.py --master --processes 4 --threads 2 -stats 127.0.0.1:9191

如果你的代理前端服务器使用的是 http 协议,你必须让 uwsgi 也使用 http 协议

uwsgi --http-socket 127.0.0.1:3031 --wsgi-file helloworld.py --master --processes 4 --threads 2 --stats 127.0.0.1:9091

# --http 和 --http-socket 不一样,--http 自带一个代理
  • 开机自动启动 uwsgi

在使用脚本来启动 uwsgi 之前,看是否可以使用其他进程管理程序来启动 uwsgi,比如:

Upstart, Systemd
supervisord, god, monit, circus

uwsgi 可以很好的与以上的进程管理器集成,如果有大量的应用需要部署,建议使用 uWSGI Emperor

  • 部署 django

假设 django 项目路径是: /home/foobar/myproject

uwsgi --socket 127.0.0.1:3031 --chdir /home/foobar/myproject/ --wsgi-file myproject/wsgi.py --master --processes 4 --theads 2 --stats 127.0.0.1:9191

--chdir 切换到 django 的项目路径下,这是 django 正确加载模块所必须的

以上这个很长的命令行命令可以写在一个 uwsgi 的 .ini 格式的配置文件中,比如 foo.ini

[uwsgi]
socket = 127.0.0.1:3031
chdir = /home/foobar/myproject/
wsgi-file = myproject/wsgi.py
processes = 4
threads = 2
stats = 127.0.0.1:9191

使用配置文件启动

uwsgi foo.ini

如果使用的是旧版本的django(< 1.4),需要多加一下配置

uwsgi --socket 127.0.0.1:3031 --chdir /home/foobar/myproject/ --pythonpath .. --env DJANGO_SETTINGS_MODULE=myproject.settings --module "django.core.handlers.wsgi:WSGIHandler()" --processes 4 --threads 2 --stats 127.0.0.1:9191
[uwsgi]
socket = 127.0.0.1:3031
chdir = /home/foobar/myproject/
pythonpath = ..
env = DJANGO_SETTINGS_MODULE=myproject.settings
module = django.core.handlers.wsgi:WSGIHandler()
processes = 4
threads = 2
stats = 127.0.0.1:9191

旧版本的 django(< 1.4) 需要设置 env,module, pythonpath(允许获取到 myproject.settings 模块)

  • 部署 flask

部署flask

  • 关于线程的说明

如果没有使用多线程启动 uwsgi,那么在应用里面生成的线程不会运行

可以使用 --enable-threads 选项,enable-threads = true .ini文件配置项,在不使用多线程启动 uwsgi 时支持应用内的多线程运行

  • python 虚拟环境

uwsgi 支持 python 虚拟环境内查找 python 模块,只需要添加配置项 virtualenv = <path>

  • 安全和可用性

安全性

不要使用 root 用户运行 uwsgi,可以使用 uid 和 gid 移除特权

[uwsgi]
https = :9090,foobar.crt,fooar.key
uid = foo
gid = bar
chdir = path_to_web2py
module = wsgihandler
master = true
processes = 8

如果要使用特权端口(如 443),可以使用共享 socket

[uwsgi]
shared-socket = :443
https = 0, foobar.crt, foobar.key
uid = foo
gid = bar
chdir = path_to_web2py
module = wsgihandler
master = true
processes = 8

可以性

请求阻塞问题,可以设置一个 harakiri 定时器,在指定时间后销毁被阻塞的 worker

[uwsgi]
shared-socket = :443
https = =0,foobar.crt,foobar.key
uid = foo
gid = bar
chdir = path_to_web2py
module = wsgihandler
master = true
processes = 8
harakiri = 30

如果一个请求阻塞了 30 秒,那么这个 worker 会被销毁

可以通过 stats 子系统实时查看每个worker,thread 或者 async 工作情况

  • 线程卸载

uwsgi offloading 子系统在特定匹配模式或可以使用纯C线程时,可以很快的释放掉 worker,比如:从文件系统发送静态文件,从网络发送数据等

意思是:worker把请求中的特定操作(发送文件,发送数据等)分配给其他的进程线程,从而使得 worker 可以被尽快释放,处理跟多的请求

添加 --offload-threads <n> 选项启用,(建议每个CPU启用 1 个线程)

  • 多 python 版本支持

最好的方法是内置一个独立于语言的特性的二进制文件,并为每个Python版本提供一个按需加载的插件

编译时使用 PROFILE=nolang

make PROFILE=nolang

编译python 插件

PYTHON=python3.4 ./uwsgi --build-plugin "plugins/python python34"
PYTHON=python2.7 ./uwsgi --build-plugin "plugins/python python27"
PYTHON=python2.6 ./uwsgi --build-plugin "plugins/python python26"

会得到3个插件:python34_plugin.so, python27_plugin.so, python26_plugin.so

将这些复制到您想要的目录中,默认情况下,uWSGI在当前工作目录中搜索插件。

现在可以在 uwsgi 配置文件中使用这些插件,添加在最顶端

[uwsgi]
plugins-dir = <path_to_your_plugin_directory>
plugin = python26


2019-2-20 by achxku@163.com

原文地址:https://www.cnblogs.com/xkus/p/10405710.html

时间: 2024-11-08 09:59:39

快速开始Python/WSGI应用程序的相关文章

程序员带你十天快速入门Python,玩转电脑软件开发(二)

关注今日头条-做全栈攻城狮,学代码也要读书,爱全栈,更爱生活.提供程序员技术及生活指导干货. 如果你真想学习,请评论学过的每篇文章,记录学习的痕迹. 请把所有教程文章中所提及的代码,最少敲写三遍,达到熟悉的效果. 声明:本次教程主要适用于已经习得一门编程语言的程序员.想要学习第二门语言.有梦想,立志做全栈攻城狮的你 如果是小白,也可以学习本教程.不过可能有些困难.如有问题在文章下方进行讨论.或者添加QQ群538742639.群马上就满了,名额不多. 上节课主要讲解了以下内容: 为什么学习Pyth

程序员带你十天快速入门Python,玩转电脑软件开发(三)

声明:本次教程主要适用于已经习得一门编程语言的程序员.想要学习第二门语言.有梦想,立志做全栈攻城狮的你 . 如果是小白,也可以学习本教程.不过可能有些困难.如有问题在文章下方进行讨论.或者添加QQ群538742639.群马上就满了,名额不多. 这是高级程序员快速入门Python语言课程.助你快速学习Python语言.这是第三课. 程序员带你十天快速入门Python,玩转电脑软件开发(一) 程序员带你十天快速入门Python,玩转电脑软件开发(二) 因技术知识连贯性,还没有学习前两课的同学,建议点

程序员带你十天快速入门Python,玩转电脑软件开发(一)

关注今日头条-做全栈攻城狮,学代码也要读书,爱全栈,更爱生活.提供程序员技术及生活指导干货. 如果你真想学习,请评论学过的每篇文章,记录学习的痕迹. 请把所有教程文章中所提及的代码,最少敲写三遍,达到熟悉的效果. 声明:本次教程主要适用于已经习得一门编程语言的程序员.想要学习第二门语言的你.有梦想的你,立志做全栈攻城狮. 如果是小白,也可以学习本教程.不过可能有些困难.如有问题在文章下方进行讨论.或者添加QQ群538742639.群马上就满了,名额不多. 目录: 为什么学习Python? Pyt

快速掌握用python写并行程序

目录 一.大数据时代的现状 二.面对挑战的方法 2.1 并行计算 2.2 改用GPU处理计算密集型程序 3.3 分布式计算 三.用python写并行程序 3.1 进程与线程 3.2 全局解释器锁GIL: 3.3 multiprocessing 四.multiprocessing实战 总结 小子今天想来谈谈"并行计算",作为一个非科班人员,我为什么去捣鼓这么一个在科班里也比较专业的问题了.这就要说下我前几天做的一个作业了,当时我用python写了个程序,结果运行了一天,这个速度可让我愁了

Python 学习笔记13:Python + wsgi + django 配置。坑爹的python3和wsgi不兼容的解决

今人不见古时月,今月曾经照古人.生命是如此的美丽与短暂! 学习Python已经两个月了,Python的语法通过做简单的语法题和看Python语法介绍,有了初步的了解.但上班还是要做别的事情,所以感觉学起来特别慢.有一种时不我待的感觉. 基本的语法了解了,接下来就要尽快进入到项目的实战.这样才能快速的遇到问题,并解决问题,迅速提升能力. 开始当然就是先按网上的一般步骤,用django写个博客网站出来. 接下来就是血泪啊!配置这个Python + wsgi + django, 其恶心已达到足以让我呕

快速部署Python应用:Nginx+uWSGI配置详解

快速部署Python应用:Nginx+uWSGI配置详解 相比于PHP,Python应用的部署很麻烦,比较常用的方法有fcgi与wsgi,然而这两种都很让人头痛.文章介绍了Nginx+uwsgi的简便方法,来快速的部署Python应用. AD: 在PHP里,最方便的就是deployment了,只要把php文件丢到支持PHP的路径里面,然后访问那个路径就能使用了:无论给主机添加多少PHP应用,只要把目录改好就没你的事了,完全不用关心php-cgi运行得如何,deployment极为方便. 反观Py

第2章 Python如何运行程序

第2章 Python如何运行程序 ? 本章和下一章将快速地看一看程序的执行--你如何启动代码,以及Python如何运行它.在这一章中,我们将大体上研究一下Python解释器如何执行程序.之后的第3章将向你展示如何建立你自己的程序并运行它. ? 程序的启动细节天生就与特定的平台相关,这两章的部分内容可能并不适用于你工作的平台,所以高级读者应当随心所欲地跳过与他们预期的用途不相关的部分.同样,以往使用过类似的工具并且期望对语言快速进阶的读者可能想把这两章的部分内容束之高阁"以备日后参考".

如何快速入门Python学习呢?

根据TIOBE最新排名 ,Python已超越C#,与Java,C,C++一起成为全球前4大最流行语言,成为互联网时代最受欢迎的编程语言,越来越多的人选择Python,那么如何快速入门Python学习呢?首先你要了解Python,我们从以下几个方面来说. 学完python前景会咋样 其实我个人是很看好python未来的就业前景的,因为我认识太多的工程师都已经在学python,很多都是月收入大几万的 一项专业调查显示,75%的受访者将Python视为他们的主要开发语言,反之,其他25%受访者则将其视

快速搭建Python开发环境

快速搭建Python开发环境·Python入门学习速成系列<1> 当我们在学习一门新的技术或者新的编程语言时,经常感觉无从下手.学习初期往往不知道事先应该准备什么:或者刚开始准备,在安装问题就栽了一个大跟头:甚至我们准备完成后,开始学习是,才发现事先应该准备安装的软件没有到位等.这样或那样的问题就困扰我们学习之初,花费了大量的时间. 本文主要介绍在Windows和Linux主流操作系统上快速部署Python开发环境. 准备Python开发环境 在准备部署Python开发环境时,往往会选择不同的