Python线程操作

一、全局锁

1、在Python中,Python代码的执行由Python虚拟机来控制,而在Python虚拟机中,同一时刻只有一个线程在执行,就像单CPU的系统中运行多个进程那样,内存中可以存放多个程序,但在任意时刻,只有一个程序在CPU中运行。同样的,在Python解释器中可以“运行”多个线程,但在任意时刻,只有一个线程在Python解释器中运行。

2、对Python虚拟机的访问由全局解释器锁【GIL】来控制,正是这个锁能保证同一时刻只有一个线程在运行。

3、多线程环境中,Python虚拟机的执行方式为:


1. 设置GIL

2. 切换到一个线程去运行

3. 运行:

a. 指定数量的字节码指令,或者

b. 线程主动让出控制(可以调用time.sleep(0)

4. 把线程设置为睡眠状态

5. 解锁GIL

6. 再次重复以上所有步骤

二、线程模块

Python提供了【thread】和【threading】模块。在多线程编程中,建议使用【threading】模块,这是因为:

1、在【thread】模块中,当主线程退出时,其他没有被清除的线程没有运行结束就会被退出。但在【threading】模块中能确保所有的“重要的”子线程(这里的重要的子线程指的是守护线程)运行结束后,进程才会结束

2、在【threading】模块是更高级的线程模块,它不仅提供了Thread类,还提供了线程同步机制

thread模块

内建函数

1、thread.start_new_thread(function, args[, kwargs=None])

这个函数用来启动一个线程,其参数含义分别为:

function:线程任务函数

args:线程任务函数的参数【以元组的方式传入】

kwargs:可选的参数

2、thread.interrupt_main()

这个函数用来中断主线程

3、thread.exit()

这个函数用来退出线程

4、thread.get_ident()

这个函数用来获取线程标识号

5、thread.allocate_lock()

这个线程用来获取LockType对象

6、thread.stack_size([size])

这个线程用来返回创建新线程栈容量,其参数含义为:

size:指定创建新线程栈容量,该参数取值为0或不小于32,768(32KB)

LockType对象

1、lock.acquire([waitflag])

这个函数用来申请锁对象,若是获得锁对象返回True,否则返回False

2、lock.release()

这个函数用来释放锁对象【使用该函数前提是获取锁对象】

3、lock.locked()

这个函数用来获取对象锁的状态,若是已被锁住则返回True,否则返回False

示例:

>>> import thread

>>> sum = 0

/*****************线程任务函数**********************/

>>> def add(lock):

global sum               #设置为全局变量

lock.acquire()          #加锁

i = 1

while(i < 3):

sum = sum + 10

i = i + 1

id = thread.get_ident() #线程号

print "Thread ",id,"set sum = ",sum

lock.release()          #释放锁

/***********************启动线程**************************/

>>> def startTask():

lock = thread.allocate_lock() #申请锁对象

task_0 = thread.start_new_thread(add,(lock,))

task_1 = thread.start_new_thread(add,(lock,))

/************************测试**************************/

>>> startTask()

>>> Thread  764 set sum =  20

Thread  5240 set sum =  40

threading模块

【threading】模块式以【thread】为基础,但提供更高的线程类以及同步机制。

内建函数

1、threading.activeCount()

这个函数用来获取【active Thread】的数目

2、threading.enumerate()

这个函数用来获取【active Thread】列表。注意:包括中断的线程以及还未开始的线程

3、threading.currentThread()

这个函数用来获取当前运行的【Thread object】

4、threading.settrace(func)

这个函数用来设置所有通过【threading】模块启动的线程的跟踪函数,该函数在【Thread Object】的【run】方法执行前被调用,其参数含义为:

func:跟踪函数名

5、threading.setprofile(func)

这个函数用来设置所有通过【threading】模块启动的线程的profile函数

6、threading.Event()

这个工厂函数用来获取一个新的【Event Object】

7、threading.Lock()

这个工厂函数用来获取【LockType Object】

8、threading.RLock()

这个工厂函数用来获取【RLock Object】

9、threading.Condition()

这个工厂函数用来获取【Condition Object】

10、threading.Semaphore([value])

这个工厂函数用来获取【Semaphore Object】

11、threading.BoundedSemaphore([value])

这个工厂函数用来获取【Bounded Semaphore Object】

内建类

1、class threading.local

类似Java的ThreadLocal

2、class threading.Thread(group=None, target=None, name=None,             

                                            args=(), kwargs={})

构造函数参数含义如下:

target:Thread类中【run】函数调用的函数

name:指定线程的名,默认线程名格式为:【Thread-N】

args:target函数的参数

1)、start()

启动线程,值得注意的是:该方法只能被线程调用一次,否则抛出异常RuntimeError

2)、run()

线程任务函数。常被子类重写,类似Java Thread类的run函数

3)、is_alive()

判断线程是否【alive】

4)、setDaemon()

将线程设置为守护线程

3、class threading.Timer(interval, function, args=[], kwargs={})

Timer类继承threading.Thread类,其参数含义为:

interval:线程时间执行时间间隔,以秒为单位

function:Thread类中run函数执行的目标函数

args:目标函数的参数

1)、cancel()

取消Timer任务的执行

示例

/***************************Timer实例************************/

>>> def putOutNumber():

id = threading.currentThread().getName()

print id,‘Hello‘

>>> def startTimer():

timer = threading.Timer(60,putOutNumber)

timer.start()

>>> startTimer()

>>> Thread-1 Hello

/****************继承Thread与Semaphore实例********************/

>>> import threading

>>> class MyThread(threading.Thread):

def __init__(self,name,semaphore):

threading.Thread.__init__(self,None,None,name,None)

self.semaphore = semaphore

def run(self): #override run function

self.semaphore.acquire()

i = 1

while(i < 3):

print self.getName(),‘ print ‘,i

i = i + 1

self.semaphore.release()

>>> def startTask():

semaphore = threading.Semaphore()

thread_0 = MyThread("Thread_0",semaphore)

thread_1 = MyThread("Thread_1",semaphore)

thread_0.start()

thread_1.start()

>>> startTask()

>>> Thread_0  print  1

Thread_0  print  2

Thread_1  print  1

Thread_1  print  2

/*********************进程之间进行通信************************/

>>> class ManagerThread(threading.Thread):

def __init__(self,name,event):

threading.Thread.__init__(self,None,None,name,None)

self.event = event

def run(self): #override run function

print self.getName(),‘ say ‘,‘go‘

self.event.set()

>>> class PeopleThread(threading.Thread):

def __init__(self,name,event):

threading.Thread.__init__(self,None,None,name,None)

self.event = event

def run(self):

self.event.wait()

print self.getName(),‘ start ‘,‘go‘

>>> def startTask():

event = threading.Event()

m_thread = ManagerThread("Manager",event)

p_thread = PeopleThread("People",event)

p_thread.start()

m_thread.start()

/*************************测试****************************/

>>> startTask()

>>> Manager  say  go

People  start  go

Mutex

内建类

1、class mutex.mutex

mutex对象有两个属性:锁和队列。当锁没有被锁时,队列是空的。

/*********************mutex Object 函数********************/

1)、mutex.test()

这个函数检测mutex是否被锁

2)、 mutex.testandset()

这个函数用来检测mutex是否被锁,若是没有锁住,则锁住并返回True,否则返回False。值得注意的是:这个函数是原子操作

3)、mutex.lock(function, argument)

这个函数用来执行函数function(argument)【前提是mutex没有被锁】。如果mutex锁被锁,则将function(argument)放入队列中

4)、mutex.unlock()

这个函数用来解锁mutex【前提是队列是空的】。如果队列不是空的,则在队列中取出第一个function(argument)执行并不解锁

示例

>>> import mutex

>>> def putOutTask(text):

print text

>>> def startTask():

m_metux = mutex.mutex()

m_metux.lock(putOutTask,‘I am task_0‘)

m_metux.lock(putOutTask,‘T am task_1‘)

m_metux.lock(putOutTask,‘I am task_2‘)

m_metux.lock(putOutTask,‘T am task_3‘)

m_metux.lock(putOutTask,‘I am task_4‘)

m_metux.lock(putOutTask,‘T am task_5‘)

while(m_metux.test()):

m_metux.unlock()

m_metux.unlock()

/**************************测试***************************/

>>> startTask()

I am task_0

T am task_1

I am task_2

T am task_3

I am task_4

T am task_5

时间: 2024-12-29 16:02:35

Python线程操作的相关文章

Python程序中的线程操作-锁

Python程序中的线程操作-锁 一.同步锁 1.1多个线程抢占资源的情况 from threading import Thread import os,time def work(): global n temp=n time.sleep(0.1) n=temp-1 if __name__ == '__main__': n=100 l=[] for i in range(100): p=Thread(target=work) l.append(p) p.start() for p in l:

Python程序中的线程操作-concurrent模块

Python程序中的线程操作-concurrent模块 一.Python标准模块--concurrent.futures 官方文档:https://docs.python.org/dev/library/concurrent.futures.html 二.介绍 concurrent.futures模块提供了高度封装的异步调用接口 ThreadPoolExecutor:线程池,提供异步调用 ProcessPoolExecutor:进程池,提供异步调用 两者都实现相同的接口,该接口由抽象Execut

118 python程序中的线程操作-创建多线程

一.python线程的模块 1.1 thread和threading模块 thread模块提供了基本的线程和锁的支持 threading提供了更高级别.功能更强的线程管理的功能. 1.2 Queue模块 Queue模块允许用户创建一个可以用于多个线程之间共享数据的队列数据结构. 1.3注意模块的选择 避免使用thread模块 因为更高级别的threading模块更为先进,对线程的支持更为完善 而且使用thread模块里的属性有可能会与threading出现冲突: 其次低级别的thread模块的同

Python程序中的线程操作(线程池)-concurrent模块

目录 Python程序中的线程操作(线程池)-concurrent模块 一.Python标准模块--concurrent.futures 二.介绍 三.基本方法 四.ProcessPoolExecutor 五.ThreadPoolExecutor 六.map的用法 七.回调函数 Python程序中的线程操作(线程池)-concurrent模块 一.Python标准模块--concurrent.futures 官方文档:https://docs.python.org/dev/library/con

Python学习——Python线程

一.线程创建 1 #方法一:将要执行的方法作为参数传给Thread的构造方法 2 import threading 3 import time 4 5 def show(arg): 6 time.sleep(2) 7 print('thread' + str(arg)) 8 9 for i in range(10): 10 t = threading.Thread(target=show,args=(i,)) 11 time.sleep(2) 12 t.start() 13 14 #方法2:从T

python——线程相关

使用python的threading中的Thread 下面是两种基本的实现线程的方式: 第一种方式---- #coding=utf-8 """ thread的第一种声明及调用方式 """ from threading import Thread import time def func(): while True: print time.ctime() time.sleep(1) def func1(): while True: print &q

[python] 线程简介

参考:http://www.cnblogs.com/aylin/p/5601969.html 我是搬运工,特别感谢张岩林老师! python 线程与进程简介 进程与线程的历史 我们都知道计算机是由硬件和软件组成的.硬件中的CPU是计算机的核心,它承担计算机的所有任务. 操作系统是运行在硬件之上的软件,是计算机的管理者,它负责资源的管理和分配.任务的调度. 程序是运行在系统上的具有某种功能的软件,比如说浏览器,音乐播放器等. 每次执行程序的时候,都会完成一定的功能,比如说浏览器帮我们打开网页,为了

python线程、进程和协程

链接:http://www.jb51.net/article/88825.htm 引言 解释器环境:python3.5.1 我们都知道python网络编程的两大必学模块socket和socketserver,其中的socketserver是一个支持IO多路复用和多线程.多进程的模块.一般我们在socketserver服务端代码中都会写这么一句: server = socketserver.ThreadingTCPServer(settings.IP_PORT, MyServer) Threadi

python 线程,进程与协程

引言 线程 创建普通多线程 线程锁 互斥锁 信号量 事件 条件锁 定时器 全局解释器锁 队列 Queue:先进先出队列 LifoQueue:后进先出队列 PriorityQueue:优先级队列 deque:双向队列 引言 在学习过socket和socketserver后,我们了解到socketserver可以支持IO多路复用.在定义socketserver服务端的时候一般会使用: server = socketserver.ThreadingTCPServer(settings.IP_PORT,