tcp_server_协程gevent版本

#!/usr/bin/env python
# -*- coding:utf-8 -*-
# @Time : 2020/1/23 1:50
# @Author : liuyan
# @File : test5_tcp_server_5协程gevent版本.py
# @Software: PyCharm

import gevent
from gevent import monkey; monkey.patch_all()

#使用此方法,会将代码中检查一遍,如有time.sleep()等延时方法,会自动转换为gevent.sleep()
#在执行时动态替换,通常是在startup的时候.
#把标准库中的thread/socket等给替换掉.这样我们在后面使用socket的时候能够跟寻常一样使用,无需改动
# 调用此函数就不需要将time.sleep()手动换为gevent.sleep(),socket也不需要手动替换

# gevent的优势不仅仅是在代码中调用方便,厉害的是它拥有的monkey机制。
# 假设你不愿意修改原来已经写好的python代码,但是又想充分利用gevent机制,那么你就可以用monkey来做到这一点。
# 你所要做的就是在文件开头打一个patch,那么它就会自动替换你原来的thread、socket、time、multiprocessing等代码,全部变成gevent框架。
# 这一切都是由gevent自动完成的。注意这个patch是在所有module都import了之后再打,否则没有效果。
# 甚至在编写的Web App代码的时候,不需要引入gevent的包,也不需要改任何代码,仅仅在部署的时候,用一个支持gevent的WSGI服务器,就可以获得数倍的性能提升
#
# 链接:https://www.jianshu.com/p/bb6c7f9aa1ae

import time
import socket  # 使用gevent,原代码不需要修改,socket和time.sleep不需要手动替换,调用monkey.patch_all()自动替换

def each_do(clientfd):
    while True:
        recvdata = clientfd.recv(1024)  # gevent遇到这种耗时操作,自动切换动其它协程
        if len(recvdata) > 0:
            clientfd.send(recvdata)
            print("recv=%s, echo back" % recvdata.decode("utf8"))
        else:
            print("closed")
            clientfd.close()
            break

def tcp_server():
    fd_listen = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
    fd_listen.setsockopt(socket.SOL_SOCKET, socket.SO_REUSEADDR, 1)  # 地址重用
    fd_listen.bind((‘‘, 7777))
    fd_listen.listen(3)  # 可以不指定最大允许量, 指定表示:"正在排队等待accept的半连接个数"

    while True:
        clientfd, clientInfo = fd_listen.accept()  # gevent遇到这种耗时操作,自动切换动其它协程
        print("accept from %s" % (clientInfo,))
        gevent.spawn(each_do, clientfd)

if __name__ == ‘__main__‘:
    tcp_server()

原文地址:https://www.cnblogs.com/LiuYanYGZ/p/12230147.html

时间: 2024-11-08 02:12:56

tcp_server_协程gevent版本的相关文章

协程:gevent模块,遇到i/o自动切换任务 038

协程 : gevent模块,遇到io自动切换任务 from gevent import monkey;monkey.patch_all() # 写在最上面 这样后面的所有阻塞就全部能够识别了 import gevent # 直接导入即可 from threading import current_thread import time def eat(name): print('%seat1'% name) # gevent.sleep(2) time.sleep(2) # 加上monkey就能

网络编程之协程——gevent模块

网络编程之协程--gevent模块 gevent模块 安装 pip3 install gevent Gevent 是一个第三方库,可以轻松通过gevent实现并发同步或异步编程,在gevent中用到的主要模式是Greenlet, 它是以C扩展模块形式接入Python的轻量级协程. Greenlet全部运行在主程序操作系统进程的内部,但它们被协作式地调度. #用法 g1=gevent.spawn(func,1,,2,3,x=4,y=5)创建一个协程对象g1,spawn括号内第一个参数是函数名,如e

python2.0_s12_day9_协程&Gevent协程

Python之路,Day9 - 异步IO\数据库\队列\缓存 本节内容 Gevent协程 Select\Poll\Epoll异步IO与事件驱动 Python连接Mysql数据库操作 协程 1.协程,又称微线程,纤程.英文名Coroutine.一句话说明什么是协程:协程是一种用户态的轻量级线程.(操作系统跟不知道它存在),那你指定协程的实现原理是什么吗? 我们来聊聊协程的实现原理: 首先我们知道多个线程在一个单核CPU上进行并发,它的操作过程是,操作系统能调动的最小单位是线程,当操作系统触发多个线

协程-gevent

协程用gevent实现, 依赖libevent和greenlet###安装1. 安装libevent   yum install libevent 2. 安装easy_install  [1]wget -q http://peak.telecommunity.com/dist/ez_setup.py  [2]python ez_setup.py  [3]使用easy_install 查看命令是否可用,如果不可用可以讲路径加入到PATH中 3. 安装greenlet    [1]yum insta

17、第七周-网络编程 - 协程概念介绍、协程gevent模块并发爬网页

协程,又称微线程,纤程.什么是线程:协程是一种用户态的轻量级线程. 协程拥有自己的寄存器上下文和栈.协程调度切换时,将寄存器上下文和栈保存到其他地方,在切回来的时候,恢复先前保存的寄存器上下文和栈.因此:协程能保留上一次调用时的状态(即所有局部状态的一个特定组合),每次过程重入时,就相当于进入上一次调用的状态,换种说法:进入上一次离开时所处逻辑流的位置. 协程的好处: 无需线程上下文切换的开销 无需原子操作锁定及同步的开销(注解:"原子操作(atomic operation)是不需要synchr

线程池+协程+gevent模块

提交任务的两种方式: 同步调用:提交完一个任务之后,就在原地等待,等待任务完完整整地运行完毕拿到结果后,再执行下一行代码,会导致任务是串行执行的 异步调用:提交完一个任务之后,不在原地等待,而是直接执行下一行代码,会导致任务是并发执行的 p.shutdown(wait=True)关闭进程池的入口,并且在原地等待进程池内所有任务运行完毕 异步调用:提交完一个任务之后,不在原地等待,而是直接执行下一行代码,会导致任务是并发执行的,结果:futrue对象会在任务运行完毕后自动传给回调函数 在线程下实现

python 并发编程 协程 gevent模块

一 gevent模块 gevent应用场景: 单线程下,多个任务,io密集型程序 安装 pip3 install gevent Gevent 是一个第三方库,可以轻松通过gevent实现并发同步或异步编程,在gevent中用到的主要模式是Greenlet, 它是以C扩展模块形式接入Python的轻量级协程. Greenlet全部运行在主程序操作系统进程的内部,但它们被协作式地调度. gevent可以检测io,实现遇到io自动切换另外一个任务 #用法 g1=gevent.spawn(func,1,

python协程gevent案例:爬取斗鱼美女图片

分析 分析网站寻找需要的网址 用谷歌浏览器摁F12打开开发者工具,然后打开斗鱼颜值分类的页面,如图: 在里面的请求中,最后发现它是以ajax加载的数据,数据格式为json,如图: 圈住的部分是我们需要的数据,然后复制它的网址为https://www.douyu.com/gapi/rknc/directory/yzRec/1,出于学习目的只爬取第一页(减少服务器压力).然后把网址放到浏览器中测试是否可以访问.如图: 结果正常. 分析json数据,提取图片链接 最后分析发现json中的data里面的

pythong协程gevent

两个学习gevent的网址: [1] http://www.gevent.org/intro.html [2] https://sdiehl.github.io/gevent-tutorial/ 原文地址:https://www.cnblogs.com/yunxiaofei/p/11241463.html