python程序多线程_Python-多线程编程

threading模块

threading 模块的对象

对 象描 述

Thread

表示一个执行线程的对象

Lock

锁原语对象(和 thread 模块中的锁一样)

RLock

可重入锁对象，使单一线程可以(再次)获得已持有的锁(递归锁)

Condition

条件变量对象，使得一个线程等待另一个线程满足特定的“条件”，比如改变状态或 某个数据值

Event

条件变量的通用版本，任意数量的线程等待某个事件的发生，在该事件发生后所有 线程将被激活

Semaphore

为线程间共享的有限资源提供了一个“计数器”，如果没有可用资源时会被阻塞

BoundedSemaphore

与 Semaphore 相似，不过它不允许超过初始值

Timer

与 Thread 相似，不过它要在运行前等待一段时间

Barrier①

创建一个“障碍”，必须达到指定数量的线程后才可以继续

守护线程

thread模块，不支持守护线程这个概念。

当主线程退出时，所有子线程都将终止，不管它们是否仍在工作

如果你不希望发生这种行为，就要引入守护线程的概念了

threading 模块支持守护线程，其工作方式是：守护线程一般是一个等待客户端请求服务的服务器。

如果没有客户端请求，守护线程就是空闲的。

如果把一个线程设置为守护线程，就表示这个线程是不重要的，进程退出时不需要等待这个线程执行完成。

要将一个线程设置为守护线程，需要在启动线程之前执行如下赋值语句：thread.daemon = True

同样，要检查线程的守护状态，也只需要检查这个值即可，一个新的子线程会继承父线程的守护标记。

整个 Python 程序(主线程)将在所有非守护线程退出之后才退出

换句话说，就是没有剩下存活的非守护线程时。

Thread 类

threading 模块的 Thread 类是主要的执行对象。它有 thread 模块中没有的很多函数。

Thread

对象的属性和方法

属 性描 述

Thread 对象数据属性

name

线程名

ident

线程的标识符

daemon

布尔标志，表示这个线程是否是守护线程

Thread 对象方法

init(group=None, tatget=None, name=None, args=(), kwargs ={}, verbose=None, daemon=None) ③

实例化一个线程对象，需要有一个可调用的 target，以及其参数 args 或 kwargs。还可以传递 name 或 group 参数，不过后者还未实现。此 外 ， verbose 标 志 也 是 可 接 受 的。 而 daemon 的 值 将 会 设定 thread.daemon 属性/标志

属 性描 述

start()

开始执行该线程

run()

定义线程功能的方法(通常在子类中被应用开发者重写)

join (timeout=None)

直至启动的线程终止之前一直挂起；除非给出了 timeout(秒)，否则 会一直阻塞

getName()①

返回线程名

setName (name)①

设定线程名

isAlivel /is_alive ()②

布尔标志，表示这个线程是否还存活

isDaemon()③

如果是守护线程，则返回 True；否则，返回 False

setDaemon(daemonic)③

把线程的守护标志设定为布尔值 daemonic(必须在线程 start()之前 调用)

创建实例

启动一个线程就是把一个函数传入并创建Thread实例，然后调用start()开始执行

#!/usr/bin/env python

#-*- coding:utf8 -*-import threading

import time

def loop():

strat_time=time.time()

print('thread %s is running...' %threading.current_thread().name) #当前进程名

n= 0

while n < 5:

n= n + 1print('thread %s >>> %s' %(threading.current_thread().name, n))

time.sleep(1)

print('thread %s ended.' %threading.current_thread().name)

end_time=time.time()

all_time= end_time -strat_time

print("共用时:%s" %all_time)

print('thread %s is running...time = %s' %(threading.current_thread().name,time.ctime()))

t= threading.Thread(target=loop, name='LoopThread') # 创建Thread实例

t.start() # 开始执行

t.join() # 阻塞主线程

print('thread %s ended. time = %s' % (threading.current_thread().name,time.ctime()))

多线程和多进程最大的不同在于，多进程中，同一个变量，各自有一份拷贝存在于每个进程中，互不影响，Lock

而多线程中，所有变量都由所有线程共享，所以，任何一个变量都可以被任何一个线程修改，

因此，线程之间共享数据最大的危险在于多个线程同时改一个变量，把内容给改乱了。

一个用Lock解决的示例代码

import time, threading

# 假定这是你的银行存款:

balance= 0

lock=threading.Lock() #创建锁

def change_it(n):

# 先存后取，结果应该为0:globalbalance

balance= balance +n

balance= balance -n

def run_thread(n):for i in range(100000):lock.acquire() # 申请锁try:

change_it(n)finally:lock.release() # 释放锁

t1= threading.Thread(target=run_thread, args=(5,))

t2= threading.Thread(target=run_thread, args=(8,))

t1.start()

t2.start()

t1.join()

t2.join()

print("The Res is %d" % balance)

queue模块，提供线程间通信的机制，从而让线程之间可以互相分享数据生产者-消费者问题和queue模块

具体而言，就是创建一个队列，让生产者(线程)在其中放入新的商品，而消费者(线程)消费这些商品

queue

模块常用属性

属 性描 述

queue 模块的类

Queue(maxsize=0)

创建一个先入先出队列。如果给定最大值，则在队列没有空间时阻塞；否则(没 有指定最大值)，为无限队列

LifoQueue(maxsize=0)

创建一个后入先出队列。如果给定最大值，则在队列没有空间时阻塞;否则(没 有指定最大值)，为无限队列

PriorityQueue(maxsize=0)

创建一个优先级队列。如果给定最大值，则在队列没有空间时阻塞，否则(没 有指定最大值) ,为无限队列

Queue/queue 异常

Empty

当对空队列调用 get*()方法时抛出异常

Full

当对已满的队列调用 put*()方法时抛出异常

Queue/queue 对象方法

qsize ()

返回队列大小(由于返回时队列大小可能被其他线程修改，所以该值为近似值)

empty()

如果队列为空，则返回 True；否则，返回 False

full()

如果队列已满，则返回 True；否则，返回 False

put (item, block=Ture, timeout=None)

将 item 放入队列。如果 block 为 True(默认)且 timeout 为 None，则在有可用 空间之前阻塞；如果 timeout 为正值，则最多阻塞 timeout 秒；如果 block 为 False， 则抛出 Empty 异常

put_nowait(item)

和 put(item, False)相同

get (block=True, timeout=None)

从队列中取得元素。如果给定了 block(非 0)，则一直阻塞到有可用的元素 为止

get_nowait()

和 get(False)相同

task_done()

用于表示队列中的某个元素已执行完成，该方法会被下面的 join()使用

join()

在队列中所有元素执行完毕并调用上面的 task_done()信号之前，保持阻塞

MyThread.py

#!/usr/bin/env python

import threadingfromtime import ctimeclassMyThread(threading.Thread):

def __init__(self, func, args, name=''):

threading.Thread.__init__(self)

self.func=func

self.name=name

self.args=args

def run(self):

print('开始执行', self.name, '在：', ctime())

self.res= self.func(*self.args)

print(self.name,'结束于：', ctime())

def getResult(self):return self.res

product.py

#!/usr/bin/env python

#-*- coding:utf8 -*-

fromrandom import randintfromtime import sleepfromqueue import QueuefromMyThread import MyThread

# 将一个对象放入队列中

def writeQ(queue):

print('正在为队列生产………')

queue.put('商品', 1)

print('当前商品总数：', queue.qsize())

# 消费队列中的一个对象

def readQ(queue):

val= queue.get(1)

print('正在从队列中消费商品……消费后还剩余商品：', queue.qsize())

# 模仿生产者。

def writer(queue, loops):for i inrange(loops):

writeQ(queue)

sleep(randint(1, 3)) # writer的睡眠时间一般比reader短，是为了阻碍 reader从空队列中获取对象，换句话说就是使得轮到reader执行时，已存在可消费对象的可能性更大。

# 模仿消费者

def reader(queue, loops):for i inrange(loops):

readQ(queue)

sleep(randint(2, 5))

funcs=[writer, reader]

nfuncs=range(len(funcs))

def main():

nloops= randint(2, 5) # randint 和randrange类似，区别在于，randrange是半开半闭区间，而randint是闭区间

q= Queue(32)

threads=[] # 模拟线程池for i innfuncs:

t=MyThread(funcs[i], (q, nloops), funcs[i].__name__) # 创建线程

threads.append(t)for i innfuncs:

threads[i].start() # 开始执行线程for i innfuncs:

threads[i].join()

print('结束')if __name__ == '__main__':

main()