进程是什么?
- 进程是计算机中正在运行的程序的实例。进程也可以被看作是系统分配给程序运行所需的资源的集合。
内存资源:每个进程都有自己的地址空间,用于存储程序代码、数据和堆栈等信息。
处理器资源:进程需要使用处理器(CPU)来执行指令和计算任务。
文件资源:进程可以打开、读取和写入文件,这些文件是进程的一部分。
输入/输出资源:进程可以通过设备(如键盘、鼠标、显示器、打印机等)进行输入和输出操作。
网络资源:进程可以通过网络进行通信和数据传输。
时钟资源:进程可以使用系统时钟来计算时间和执行定时任务。
信号资源:进程可以接收和处理来自其他进程或操作系统的信号。
管道、共享内存、消息队列等系统资源:进程可以使用这些资源来进行进程间通信和数据共享。
线程是什么?
- 线程是进程内的执行单元,可以并发地执行多个任务。
分别说说进程和线程的特点。
- 进程是一个运行中的实例,它创建了子进程,但是与子进程之间有相互独立。主进程修改自己的资源不会影响子进程。主进程也可以创建自己的子进程。
- 子进程,是由主进程创建的,但于主进程是独立的关系。可以创建自己的主线程。
- 每个进程都有自己的主线程。主进程被杀死,会影响子进程。
- 线程之间是共享资源的。
- 一个线程结束,一般情况下不会影响另外的线程。
- 进程一旦结束,里面的线程也会全部结束。
GIL全局解释器锁
在python中,是一种机制,它确保了同一时刻只有一个线程能够执行Python字节码
线程在GIL中的执行步骤:
1. 线程获取GIL:当一个线程想要执行Python代码时,它首先会尝试获取全局解释器锁(GIL)。如果没有其他线程持有GIL,那么该线程将成功获得GIL,并且可以开始执行Python代码。
2. 执行字节码:一旦线程获得了GIL,它就可以开始执行Python字节码。字节码是Python代码的中间表示形式,由解释器逐条执行。
3. GIL的释放:当线程执行完一定数量的字节码或者遇到I/O操作时,它会主动释放GIL。这样其他线程就有机会获得GIL并执行代码。
4. 线程切换:当一个线程释放GIL后,解释器会选择一个等待的线程来获取GIL并执行。这个过程是由操作系统的调度器来决定的。
5. 重复执行:线程会不断地重复执行上述步骤,直到整个程序执行完成。
由于GIL(Cpython)的缘故,线程的执行是并发执行的,也就是每个执行0.01秒,然后换下一个线程执行。
- 对于计算密集型要求,我们应该使用多核也就是多进程进行运行,或者使用一些扩展包来满足
- 对于读写密集型要求,我们并不要求有多快而且在写入磁盘时耗时较长,所以直接使用多线程就可以。
协程
在Python中,协程是一种轻量级的线程,也被称为微线程。协程允许程序在执行过程中暂停和恢复,从而可以处理需要长时间等待的IO操作,而不会阻塞其他代码的执行。通过协程,可以编写高效的异步代码,提高程序的并发性和性能。
在Python中,协程可以使用生成器(Generator)或async/await关键字来实现。下面分别介绍这两种方式的协程实现:
-
使用生成器实现协程:
通过生成器的yield语句,可以将程序的执行暂停,并返回一个值给调用方。调用方可以通过生成器的send()方法将值发送给生成器,并恢复生成器的执行。这种方式下,协程的控制权可以在调用方和生成器之间交替切换。例如,下面是一个简单的协程示例,实现了一个简单的计数器:
def counter(): i = 0 while True: i += 1 value = yield i if value is not None: i = value c = counter() print(next(c)) # 输出: 1 print(c.send(10)) # 输出: 11 print(next(c)) # 输出: 12
-
使用async/await关键字实现协程(Python 3.5及以上版本):
async/await关键字提供了一种更简洁的方式来定义协程。通过async关键字定义一个异步函数,其中可以使用await关键字等待另一个异步函数或协程的执行结果。在执行到await语句时,当前协程会暂停,直到等待的异步操作完成并返回结果。例如,下面是一个使用async/await关键字实现的简单协程示例:
import asyncio async def greet(name): await asyncio.sleep(1) print(f"Hello, {name}!") async def main(): await greet("Alice") await greet("Bob") asyncio.run(main())
输出:
Hello, Alice! Hello, Bob!
通过协程,可以实现非阻塞的异步操作,提高程序的并发性能。在处理大量IO操作或需要高并发的网络应用中,协程可以帮助提高代码的执行效率和响应速度。
- 当线程被杀死时,其资源会被操作系统回收,对于协程来说,由于协程是在同一个线程中执行的,因此杀死线程会导致协程也被终止。但是,如果你在协程中使用了一些持久化的资源,如数据库连接,那么在协程被终止之前,你需要确保正确地关闭这些资源,以避免资源泄露和其他问题。