gunicorn 简介

 

  gunicorn是一个python Wsgi http server,只支持在Unix系统上运行,来源于Ruby的unicorn项目。Gunicorn使用prefork master-worker模型(在gunicorn中,master被称为arbiter),能够与各种wsgi web框架协作。gunicorn的文档是比较完善的,这里也有部分中文翻译,不过还是建议直接读英文文档。笔者并没有在项目中真正使用过gunicorn,阅读其源码只要是为了了解其master worker模型,如有纰漏,还请多多指教。

  gunicorn的安装非常简单,pip install guncorn 即可。后续如果用到异步的worker模型,还需要安装对应的模块(如gevent)

  在装好gunicorn之后, 我们来看看gunicorn的hello world。代码来自官网,将下面的代码放到gunicorn_app.py中:

  

1     def app(environ, start_response):
2         data = b"Hello, World!\n"
3         start_response("200 OK", [
4             ("Content-Type", "text/plain"),
5             ("Content-Length", str(len(data)))
6         ])
7
8         return iter([data])

  可以看到app是非常标准的wsgi应用,然后我们启动gunicorn:gunicorn -w 2 gunicorn_app:app。 输出如下:

  

  上图展示了两个很重要的信息:

  第一:启动了两个worker,这是通过"-w 2"指定(默认为1)

  第二:worker的工作模型是sync(默认),后面会详细介绍worker模型

  然后在另外一个terminal运行:ps -ef | grep python

  

  可以看出 worker进程(pid:19469, 19470)是master进程(pid:19464)的子进程。

  新起一个terminal,用curl测试:  curl 127.0.0.1:8000

  在该terminal输出“Hello, World!”

  前面提到,官方gunicorn只能在Unix上运行(貌似也有非官网的补丁,使其能在windows上运行,未求证),主要是因为源码中使用了fcntl,os.fork等只在unix上存在的模块和接口。pre-fork就是指gunicorn启动的时候,在主进程中会预先fork出指定数量(-w)的worker进程。这里先简介Master Worker的工作流程,后文再对代码做详细介绍。

  启动gunicorn,首先初始化gunicorn.app.base.Application(或者基类,比如上面从命令行启动时,是wsgiApplication),初始化中最重要的是读取配置,支持文件或者命令行。然后调用Application.run(),该方法代码如下:

  

    def run(self):
        try:
            Arbiter(self).run()
        except RuntimeError as e:
            print("\nError: %s\n" % e, file=sys.stderr)
            sys.stderr.flush()
            sys.exit(1)

  调用Arbiter(self).run()之后,主进程(master)的所有逻辑都运行在Arbiter类里面。

  Arbiter首先读取配置项, 如worker数量,worker工作模式,监听的地址等;然后初始化信号处理函数,然后建立socket,不过并不listen;接下来fork出所有的worker进程;最后进入循环:处理信号队列中的信号,杀掉并重启失去响应的子进程,如果没事儿干,就“sleep”一会儿。

  worker进程就更加简单一下,首先是读取配置,初始化信号处理函数,然后进入循环:处理监听端口上的请求(也就是会调用到wsgi app的地方),然后向master报告自己还活着。另外,worker中是在信号发生的时候直接处理信号,而不是像master一样放入信号队列。

  可以稍微改动一下app代码,以便在客户端请求的时候,服务器端能打印调用栈,下面是在我的机器上的输出,后面将会对Arbiter和worker进行介绍。

  • 0: FUNC:app(...)                  /home/xxx/gunicorn_app.py::16
  • 1: FUNC:handle_request(...)       /usr/local/lib/python2.7/dist-packages/gunicorn/workers/sync.py::176
  • 2: FUNC:handle(...)               /usr/local/lib/python2.7/dist-packages/gunicorn/workers/sync.py::135
  • 3: FUNC:accept(...)               /usr/local/lib/python2.7/dist-packages/gunicorn/workers/sync.py::30
  • 4: FUNC:run_for_one(...)          /usr/local/lib/python2.7/dist-packages/gunicorn/workers/sync.py::68
  • 5: FUNC:run(...)                  /usr/local/lib/python2.7/dist-packages/gunicorn/workers/sync.py::124
  • 6: FUNC:init_process(...)         /usr/local/lib/python2.7/dist-packages/gunicorn/workers/base.py::132
  • 7: FUNC:spawn_worker(...)         /usr/local/lib/python2.7/dist-packages/gunicorn/arbiter.py::557
  • 8: FUNC:spawn_workers(...)        /usr/local/lib/python2.7/dist-packages/gunicorn/arbiter.py::590
  • 9: FUNC:manage_workers(...)       /usr/local/lib/python2.7/dist-packages/gunicorn/arbiter.py::524
  • 10: FUNC:run(...)                  /usr/local/lib/python2.7/dist-packages/gunicorn/arbiter.py::189
  • 11: FUNC:run(...)                  /usr/local/lib/python2.7/dist-packages/gunicorn/app/base.py::72
  • 12: FUNC:run(...)                  /usr/local/lib/python2.7/dist-packages/gunicorn/app/base.py::192
  • 13: FUNC:run(...)                  /usr/local/lib/python2.7/dist-packages/gunicorn/app/wsgiapp.py::74
  • 14: FUNC:<module>(...)             /usr/local/bin/gunicorn::11

references

http://gunicorn.org/

http://gunicorn.readthedocs.io/en/latest/

http://www.wzxue.com/gunicorn%E7%9A%84%E4%BB%A3%E7%A0%81%E7%BB%93%E6%9E%84%E4%B8%8E%E5%88%86%E6%9E%90/

时间: 2024-10-11 07:53:41

gunicorn 简介的相关文章

Django部署:Django+gunicorn+Nginx环境的搭建

本人的服务器环境为Ubuntu14.04,使用的是Python3.4版本,并且安装有pip(Ubuntu中Python3配合的是pip3),并且以管理员身份运行,如果是普通用户,请切换管理员权限(sudo). 一.gunicorn和nginx的简介 gunicorn需要搭配nginx使用,那么两者的作用到底是什么. 1.gunicorn简介:gunicorn是一个Python WSGI UNIX服务器.WSGI(Web Server Gateway Interface)是Web服务网关接口,位于

Python之路【第一篇】:Python简介和入门

python简介: 什么是python Python(英国发音:/ pa θ n/ 美国发音:/ pa θɑ n/),是一种面向对象.直译式的计算机程序语言. 每一门语言都有自己的哲学: pythonde 设计哲学是:"优雅"."明确"."简单" python由来 1989年的圣诞节期间,吉多·范罗苏姆为了在阿姆斯特丹打发时间,决心开发一个新的脚本解释程序,作为ABC语言的一种继承.之所以选中Python作为程序的名字,是因为他是BBC电视剧--

python Gunicorn

1. 简介 Gunicorn(Green Unicorn)是给Unix用的WSGI HTTP 服务器,它与不同的web框架是非常兼容的.易安装.轻.速度快. 2. 示例代码1 def app(environ, start_response): data = b"Hello World\n" start_response("200 OK", [ ("Content-Type", "test/plain"), ("Con

python——简介与入门

python简介:                                                                                                                         一.什么是python Python(英国发音:/ pa θ n/ 美国发音:/ pa θɑ n/),是一种面向对象.直译式的计算机程序语言. 每一门语言都有自己的哲学: pythonde 设计哲学是:"优雅"."明确&

Python疗程一day1:Python简介和入门

python简介: 一.什么是python Python(英国发音:/ pa θ n/ 美国发音:/ pa θɑ n/),是一种面向对象.直译式的计算机程序语言. 每一门语言都有自己的哲学: pythonde 设计哲学是:“优雅”.“明确”.“简单” 二.python由来  1989年的圣诞节期间,吉多·范罗苏姆为了在阿姆斯特丹打发时间,决心开发一个新的脚本解释程序,作为ABC语言的一种继承.之所以选中Python作为程序的名字,是因为他是BBC电视剧——蒙提·派森的飞行马戏团(Monty Py

Flask+Gunicorn+Gevent+Supervisor+Nginx生产环境部署

老毛病了,在用某个新框架或新架构之前,总得花时间谷歌和自己折腾一番,才能知道这个框架和架构的优缺点,才会发现自己最喜欢.用的最顺手的的一种.近期在学习python,这里记录一下自己用的一套python web开发的部署环境. 简介 之所以选择Flask,而没选择用的最多的django,是因为现在这个小项目是一个简单的web工具,提供上传文件.数据处理.并下载的功能.简单小巧,没必要折腾Django.而Flask正好是一个Python实现的Web开发微框架,它基于Werkzeug 和 Jinja2

【第一篇】:Python简介和入门

python简介:   python简介2 一.什么是python Python(英国发音:/ pa θ n/ 美国发音:/ pa θɑ n/),是一种面向对象.直译式的计算机程序语言. 每一门语言都有自己的哲学: pythonde 设计哲学是:“优雅”.“明确”.“简单” 二.python由来  1989年的圣诞节期间,吉多·范罗苏姆为了在阿姆斯特丹打发时间,决心开发一个新的脚本解释程序,作为ABC语言的一种继承.之所以选中Python作为程序的名字,是因为他是BBC电视剧——蒙提·派森的飞行

一.python 简介

python的简介 python的创始人为吉多·范罗苏姆(Guido van Rossum).1989年的圣诞节期间,吉多·范罗苏姆为了在阿姆斯特丹打发时间,决心开发一个新的脚本解释程序,作为ABC语言的一种继承. Python能做什么 Web程序 Python经常被用于Web开发.比如,通过mod_wsgi模块,Apache可以运行用Python编写的Web程序.使用Python语言编写的Gunicorn作为Web服务器,也能够运行Python语言编写的Web程序.Python定义了WSGI(

Python3.x:第三方库简介

Python3.x:第三方库简介 环境管理 管理 Python 版本和环境的工具 p – 非常简单的交互式 python 版本管理工具. pyenv – 简单的 Python 版本管理工具. Vex – 可以在虚拟环境中执行命令. virtualenv – 创建独立 Python 环境的工具. virtualenvwrapper- virtualenv 的一组扩展. 包管理 管理包和依赖的工具. pip – Python 包和依赖关系管理工具. pip-tools – 保证 Python 包依赖