python的多线程与线程池的使用

线程

python的thread模块是比较底层的模块,
python的threading模块是对thread做了一些包装的,可以更加方便的被使用

说到线程要知道它是什么东东

1.线程是cpu执行的基本单元
2.线程之间的执行是无序的
3.同一进程下的线程的资源是共享的 (线程锁,互斥锁)
4.线程可以实现多任务,多用来处理I/O密集型任务
GIL:由于python的CPython解释器的原因,存在一个GIL全局解释器锁用来保证同一时刻只有一个线程在执行,类似于单核处理,所有说多线程并不能 充分的利用cpu资源

既然说多线程 会不会疑问单线程是怎么执行的呢 告诉你

import time 
def saySorry():   
	for i in range(5): 
		print("亲爱的,我错了,我能吃饭了吗?") 
		time.sleep(1) 
def do(): 
	for i in range(5): 
		print("亲爱的,我错了,我给你按摩") 
		time.sleep(1) 
if __name__ == "__main__":
	 saySorry() 
	 saydo()

那我们再看一下多线程

线程使用threading模块
import threading 
import time 
def saySorry():   
	for i in range(5): 
	print("亲爱的,我错了,我能吃饭了吗?") 
	time.sleep(1) 
def do(): 
	for i in range(5): 
	print("亲爱的,我错了,我给你按摩") 
	time.sleep(1) 
if __name__ == "__main__": t
	d1 = threading.Thread(target=saySorry) 
	td1.start() #启动线程,即让线程开始执行 
	td2 = threading.Thread(target=saySorry) 
	td2.start() #启动线程,即让线程开始执行

threading.Thread参数介绍

* target:线程执行的函数

* name:线程名称

* args:执行函数中需要传递的参数,元组类型另外:注意daemon参数

* 如果某个子线程的daemon属性为False,主线程结束时会检测该子线程是否结束,如果该子线程还在运行,则主线程会等待它完成后再退出;

* 如果某个子线程的daemon属性为True,主线程运行结束时不对这个子线程进行检查而直接退出,同时所有daemon值为True的子线程将随主线程一起结束,而不论是否运行完成。

* 属性daemon的值默认为False,如果需要修改,必须在调用start()方法启动线程之前进行设置
* join(),线程的阻塞(同步),让子线程中的任务执行完毕,再回到主线程中继续执行

因为进程内的所有线程共享全局变量,很方便在多个线程间共享数据 `
缺点就是,线程是对全局变量随意遂改可能造成多线程之间对全局变量的混乱
**

互斥锁

**

当多个线程几乎同时修改某一个共享数据的时候,需要进行同步控制
线程同步能够保证多个线程安全访问竞争资源,最简单的同步机制是引入互斥锁。
互斥锁为资源引入一个状态:锁定/非锁定
某个线程要更改共享数据时,先将其锁定,此时资源的状态为“锁定”,其他线程不能更改;直到该线程释放资源,将资源的状态变成“非锁定”,其他的线程才能再次锁定该资源。互斥锁保证了每次只有一个线程进行写入操作,从而保证了多线程情况下数据的正确性。

那真是这样的话threading模块中是怎么搞定的呢?

threading模块中定义了Lock类,可以方便的处理锁定

#创建锁 
mutex = threading.Lock() 
#锁定 
mutex.acquire()
 #释放 
mutex.release()
如果这个锁之前是没有上锁的,那么acquire不会堵塞
如果在调用acquire对这个锁上锁之前 它已经被 其他线程上了锁,那么此时acquire会堵塞,直到这个锁被解锁为止

上锁解锁过程

当一个线程调用锁的acquire()方法获得锁时,锁就进入“locked”状态。
每次只有一个线程可以获得锁。如果此时另一个线程试图获得这个锁,该线程就会变为“blocked”状态,称为“阻塞”,直到拥有锁的线程调用锁的release()方法释放锁之后,锁进入“unlocked”状态。
线程调度程序从处于同步阻塞状态的线程中选择一个来获得锁,并使得该线程进入运行(running)状态。

锁的好处:

*确保了某段关键代码只能由一个线程从头到尾完整地执行

锁的坏处:

阻止了多线程并发执行,包含锁的某段代码实际上只能以单线程模式执行,效率就大大地下降了
由于可以存在多个锁,不同的线程持有不同的锁,并试图获取对方持有的锁时,可能会造成死锁

死锁是怎么造成的呢

在线程间共享多个资源的时候,如果两个线程分别占有一部分资源并且同时等待对方的资源,就会造成死锁。

线程池

创建线程池,并往线程池中添加任务

#创建一个线程池
pool = ThreadPoolExecutor(10)
#如何提交任务给线程池呢?

#网线程池中添加任务
for pagenum in range(50):
    #submit: 表示将我们需要执行的任务给这个线程池,
    handler = pool.submit(get_page_data,pagenum)
    #给线程池设置任务之后,可以设置一个回调函数,
    #作用是:当我们某个任务执行完毕之后,就会回调你设置的回调函数
    handler.add_done_callback(done)
pool.shutdown(wait=True)
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

崔子末

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值