目录
一、进程与线程:基础概念大揭秘
在深入探讨 Python 的进程和线程之前,我们先来夯实基础,搞清楚进程和线程究竟是什么,以及它们之间的区别。
1.1 进程:程序的独立王国
进程,简单来说,是程序的一次执行过程。当你打开一个软件,比如浏览器、音乐播放器或者文本编辑器,系统就会为这个软件创建一个对应的进程。进程是操作系统进行资源分配和调度的基本单位,它拥有独立的内存空间、系统资源(如文件句柄、网络连接等) ,就像一个独立的王国,有着自己的一套运行机制和资源储备。每个进程都有自己的地址空间,不同进程之间的通信需要使用特定的机制,比如进程间通信(IPC),这就好比不同王国之间的交流需要特定的渠道和规则一样。
1.2 线程:进程中的小助手
线程则是进程中的一个执行流程,是操作系统进行调度的最小单位。它可以理解为进程中的小助手,在进程这个大王国里,线程们分工协作,共同完成各种任务。一个进程可以包含多个线程,这些线程共享相同的内存空间和系统资源,它们可以直接访问进程的共享变量,就像在一个办公室里的同事们共享办公用品一样,沟通和协作更加便捷 。
1.3 生活实例理解
为了让大家更好地理解进程和线程的区别,我们来举几个生活中的例子。当你同时打开浏览器、音乐播放器和文档编辑器时,这三个软件就分别对应三个不同的进程,它们各自独立运行,拥有自己的资源,比如浏览器进程占用网络资源进行网页加载,音乐播放器进程占用音频输出资源播放音乐,它们之间互不干扰。而在浏览器这个进程中,当你同时打开多个网页标签,每个标签的加载、渲染等操作可以看作是不同的线程。这些线程共享浏览器进程的内存空间和网络连接等资源,并发执行不同的任务,让你能在一个浏览器中同时浏览多个网页,享受多任务处理的便利。
二、深入剖析 Python 进程
了解了进程和线程的基本概念后,接下来我们深入 Python 的世界,看看在 Python 中进程是如何工作的。
2.1 Python 进程的创建与管理
在 Python 中,我们主要使用multiprocessing模块来创建和管理进程。这个模块提供了一个Process类,用于创建和操作进程。使用multiprocessing模块创建进程非常简单,只需要定义一个函数,然后将其作为目标函数传递给Process类的构造函数即可 。下面是一个简单的示例代码:
import multiprocessing
def worker():
print('Worker process is running')
if __name__ == '__main__':
p = multiprocessing.Process(target=worker)
p.start()
p.join()
print('Main process is done')
在这个示例中,我们定义了一个worker函数,它会在新的进程中执行。然后,我们使用multiprocessing.Process类创建了一个新的进程对象p,并将worker函数作为目标函数传递给它。接着,调用start方法启动进程,join方法则用于等待进程执行结束 。
除了启动和等待进程结束,我们还可以获取进程的 ID。在 Python 中,可以使用os模块或multiprocessing模块来获取进程 ID 。下面是使用os模块获取进程 ID 的示例:
import os
import multiprocessing
def worker():
print(f'Worker process ID: {os.getpid()}')
if __name__ == '__main__':
p = multiprocessing.Process(target=worker)
p.start()
p.join()
print(f'Main process ID: {os.getpid()}')
运行这段代码,你会看到主进程和子进程的 ID 被分别打印出来 。
2.2 进程间通信方式
在多进程编程中,进程之间往往需要进行通信和数据交换。Python 的multiprocessing模块提供了多种进程间通信(IPC)的方式,常见的有管道(Pipe)、消息队列(Queue)和共享内存(Shared Memory)。
管道(Pipe):管道是一种半双工的通信方式,数据只能在一个方向上流动,具有固定的读端和写端,通常用于具有亲缘关系的进程之间的通信 。在 Python 中,可以使用multiprocessing.Pipe函数创建管道。示例代码如下:
import multiprocessing
def sender(conn):
conn.send('Hello from sender')
conn.close()
def receiver(conn):
message = conn.recv()
print(f'Received: {message}')
conn.close()
if __name__ == '__main__':
parent_conn, child_conn = multiprocessing.Pipe()
p1 = multiprocessing.Process(target=sender, args=(child_conn,))
p2 = multiprocessing.Process(target=receiver, args=(parent_conn,))
p1.start()
p2.start()
p1.join()
p2.join()
在这个例子中,sender函数通过管道发送消息,receiver函数从管道接收消息 。
消息队列(Queue):消息队列是一种更高级的通信方式,它可以在不同进程之间传递消息,并且消息队列是线程和进程安全的。使用multiprocessing.Queue类创建消息队列 。示例代码如下: