python多进程与多线程、互斥锁与信号量

最新推荐文章于 2024-02-28 16:45:54 发布
最新推荐文章于 2024-02-28 16:45:54 发布
阅读量587 收藏
点赞数 1
分类专栏： 现代程序设计技术 文章标签： 代理模式 python 开发语言
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_46530492/article/details/121557219
版权
本文介绍了Python中的并行与并发概念，详细讲解了进程和线程的区别，并探讨了多进程编程，包括Process类的使用、进程间的通信与数据共享。还讨论了同步和异步的概念，以及互斥锁Lock、信号量Semaphore和事件Event在处理临界区问题中的应用。最后，文章以生产者-消费者模型为例，展示了这些同步机制的实际运用。
摘要由CSDN通过智能技术生成

文章目录

并行与并发
  • 并行 parallel：同一时刻多条指令在多个处理器上同时执行
  • 并发 concurrency：同一时刻只有一条指令执行，但多个指令快速轮换执行。在宏观上表现多个指令同时执行的效果
进程与线程
  • 进程 process：操作系统分配资源的基本单位
  • 线程 thread：CPU调度和分派的基本单位
  • 应用程序至少有一个进程和一个线程
  • 同一进程的多个线程可以并发执行
  • 进程在执行过程中拥有独立的内存单元，而线程共享内存
  • 多进程编程需要考虑进程间的通信 IPC
  • 进程切换时，耗费资源较大
多进程
  • 进程 process
    • 进程号 os.getpid()
    • 孤儿进程：子进程在父进程退出后仍在运行，会被init进程接管，init以父进程的身份处理子进程运行完毕后遗留的状态信息
    • 僵尸进程
      • 父进程创建子进程后，如果子进程退出，但父进程并没有调用wait或waitoid获取子进程的状态信息，那么子进程的进程描述符将一直保存于系统，对应的子进程称为僵尸系统。
      • 僵尸进程无法通过
了解本专栏 订阅专栏 解锁全文 超级会员免费看
Cachel wood
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
订阅专栏
Python爬虫编程思想（140）：多线程和多进程爬虫--信号量
一个被知识诅咒的人
03-31 2213
信号量是最古老的同步原语之一，它是一个计数器，用于记录资源消耗情况。当资源消耗时递减，当资源释放时递增。我们可以认为信号量代表资源是否可用。
python之信号量方式实现多进程
jianshuilan_0613的博客
05-10 495
进程（process）是系统资源分配和调度的最小单位，一个程序至少有一个进程，而一个进程至少有一个线程。多进程开发目的在于充分利用多核系统。 实现多进程的方式有很多，这篇文章分享一下利用信号量（Semaphore）实现多进程。 from multiprocessing import Process,Semaphore import time def process_a(sema_a,sema_b): while True: sema_a.acquire() prin
python进程间通信之信号量
qq_43513797的博客
03-31 1014
python进程间通信之信号量
Python 多进程：multiprocessing、aiomultiprocess(异步多进程)
热门推荐
freeking101的博客
09-12 1万+
multiprocessing 包提供了本地和远程并发操作，通过使用子进程而非线程有效地绕过了全局解释器锁。 因此，multiprocessing 模块允许程序员充分利用给定机器上的多个处理器。
python-学习笔记-信号量/同步和互斥
一条大河
08-09 551
信号量： 给定一定的信号数量，对多个进程可见，并且多个进程均可操作。进程根据信号量的多少可以有不同的行为； from multiprocess import Semaphore() Semaphore(num) 功能: 定义信号量 参数： num 给定信号量的初始个数 返回值： 返回信号量对象 sem = Semaphore(num) sem.acquire() 将信号量减一，将信...
Python多线程操作之互斥锁、递归锁、信号量、事件实例详解
12-20
本文实例讲述了Python多线程操作之互斥锁、递归锁、信号量、事件。分享给大家供大家参考，具体如下： 互斥锁： 为什么要有互斥锁：由于多线程是并行的，如果某一线程取出了某一个数据将要进行操作，但它还没有那么快执行完操作，这时候如果另外一个线程也要操作这个数据，那么这个数据可能会因为两次操作而发生错误 import time,threading x=6 def run1(): print("run1我拿到了数据:",x) print("我现在还不想操作，先睡一下") time.sleep(3) print("再看一下数据，稳一稳",x) def run2(): glob
python-多线程-守护线程-线程互斥锁-信号量-守护进程的使用
zdc45625的博客
01-02 480
文章目录一、多线程二、线程对比进程三、线程间资源共享四、守护线程五、线程中常用属性六、线程互斥锁七、信号量八、守护进程的使用 一、多线程 什么是线程：程序的执行线路，相当于与一条流水线，其包含了程序的具体执行步骤，如果我们把操作系统比喻为一个工厂，进程就是车间，线程就是流水线 线程和进程的关系：进程中包含了运行改程序需要所有资源，进程是一个资源单位，线程是CPU的最小执行单位，每一个进程一...
Python多进程中的互斥锁（Lock）和信号量（Semaphore）
weixin_43989215的博客
06-21 595
多个进程之间的内存空间是隔离的，但是硬盘，数据库，打印终端都是共享的 。因此当多个进程同时修改硬盘中的同一个文件，或者修改数据库中的同一条记录时，就存在资源竞争的问题，容易出错。 以抢票为例： from multiprocessing import Process import time,json def find(name): time.sleep(1) # 模拟网络延迟 dic=json.load(open('ticket.txt')) print('%s 剩余票数 %s
python 同步 互斥 信号量 锁 简介
whatday的专栏
10-28 479
目录 进程间的信号 信号量（信号灯） 进程的同步互斥 Event事件 Lock 锁 进程间的信号 信号是唯一的异步通信方法 一个进程向另一个进程发送一个信号来传递某种信息，接受者根据传递的信息来做相应的事 $ kill -l查看系统信号说明 $ kill -9 pid号对进程发送信号 信号名称 说明 1) SIGHUP 连接断开 2) SIGINT ctrl+c 3) SIGQUIT ctr...
Python多进程,同步互斥,信号量,锁补充上一篇文章
weixin_30621711的博客
09-13 201
进程补充进程间的信号信号量（信号灯）进程的同步互斥Event事件Lock 锁 进程补充 进程间的信号 信号是唯一的异步通信方法 一个进程向另一个进程发送一个信号来传递某种信息，接受者根据传递的信息来做相应的事 $ kill -l查看系统信号说明 $ kill -9 pid号对进程发送信号 信号名称说明 1) SIGHUP 连接断开 ...
Python的互斥锁与信号量
weixin_30687587的博客
09-09 329
并发与锁 a. 多个线程共享数据的时候，如果数据不进行保护，那么可能出现数据不一致现象，使用锁，信号量、条件锁 b. c.互斥锁1. 互斥锁，是使用一把锁把代码保护起来，以牺牲性能换取代码的安全性，那么Rlock后 必须要relase 解锁 不然将会失去多线程程序的优势2. 互斥锁的基本使用规则： 1 import threading 2 # 声明互斥锁 3 ...
Python的互斥锁与信号量详解
01-01
并发与锁 多个线程共享数据的时候，如果数据不进行保护，那么可能出现数据不一致现象，使用锁，信号量、条件锁 互斥锁 1. 互斥锁，是使用一把锁把代码保护起来，以牺牲性能换取代码的安全性，那么Rlock后 必须要relase 解锁 不然将会失去多线程程序的优势 2. 互斥锁的基本使用规则： import threading # 声明互斥锁 lock=threading.Rlock(); def handle(sid):# 功能实现代码 lock.acquire() #加锁 # writer codeing lock.relase() #释放锁 信号量： 1. 调用relarse(）信
python GUI库图形界面开发之PyQt5信号与槽机制、自定义信号基础介绍
12-20
信号和槽机制是 QT 的核心机制，要精通 QT 编程就必须对信号和槽有所了解。信号和槽是一种高级接口，应用于对象之间的通信，它是 QT 的核心特性，也是 QT 区别于其它工具包的重要地方。 在linux、windows等 GUI 工具包中，GUI组件都会注册回调函数用于处理组件所触发的动作，通常是注册对应的函数的函数指针。在之前关于Button的文章中提到了信号与槽的机制的使用，通过该机制可以很好的将组件的信号（如button的clocked、toggled、pressed等）和处理该信号的槽关联起来。通过 信号与槽机制，能够让我们很简洁和快速的来完成相关的功能。 信号和槽是用来在对象间传递数
python-多进程编程（二）-- 进程锁、信号量
u014761412的博客
11-17 785
我们有时候会遇到这样的情况，当有100个线程同时去操作一个文件或者修改一个数据的时候，会发生什么呢？ 我们来看一下下面的例子 from time import sleep from threading import Thread class Account(object): def __init__(self): self._balance = 0 def deposit(self, money): # 计算存款后的余额 new_bal
Python并发编程之多进程(信号量,死锁与递归锁,事件 (Event))
Shawn派大星
01-23 294
十三.信号量 Semaphore (了解) 互斥锁同时只允许一个线程修改数据, 而 Semaphore 允许同时有一定数量的进程更改数据, 就像理发店, 比如只有3个托尼老师, 那最多只允许3个人同时理发, 后面的人只能等到有人理完了才能开始, 如果指定信号量为3, 那么来一个人获得一把锁, 计数加1, 当计数等于3时, 后面的人均需要等待 , 一旦释放, 就有人可以获得一把锁 from multiprocessing import Semaphore,Process import time,random
python进程通信方式总结（一）：管道与信号量
submarineas的博客
02-14 2707
进程介绍 一个独立进程不受其他进程执行的影响，而一个协作进程可能会受到其他执行进程的影响，尽管可以认为那些独立运行的进程将非常高效地执行，但实际上，在许多情况下，可以利用合作性质来提高计算速度，便利性和模块化。进程间通信（IPC）是一种机制，允许进程彼此通信并同步其动作。这些过程之间的通信可以看作是它们之间进行合作的一种方法。 进程主要通过以下两者相互通信： 共享内存 讯息传递 而在实际使用情况中，我们又可以将其分为7种，如下图所示： 下面就对上面列举的方式在python中进行逐个说明，可能我理解的内
Python 线程同步与互斥
另一个自己
11-04 4787
什么是并发？在操作系统中，指一个时间段内有几个程序都处于已启动到运行结束之间的状态，并且这几个程序都是在同一个处理机上运行的，但任一个时间点却只有一个程序在处理机上执行。 注意并发与并行并不是同一个概念。并发是指一个时间段内同时运行，表示的是一个区间，而并行是指在同一个时间点上都在运行，是一个点，并且并发在同一时间点上只能有一个程序在运行。 线程同步与互斥 并发 进程与线程区别
python中信号量（Semaphore）
最新发布
semicolon_hello的专栏
02-28 895
在Python中，信号量（Semaphore）主要用来控制多个线程或进程对共享资源的访问。信号量本质上是一种计数器，它维护一个许可（permit）数量，每次 acquire() 函数被调用时，如果还有剩余的许可，则减少一个，并允许执行；如果没有剩余许可，则阻塞当前线程直到其他线程释放信号量。在这个例子中，我们创建了一个最多允许3个线程同时执行的信号量。当超过3个线程尝试进入临界区时，其余线程将等待信号量被释放。每个成功获取信号量的线程在完成其工作后会释放信号量，以便其他等待的线程能够继续执行。
python多进程、进程间通信、进程锁
li_wen_qi_的专栏
07-23 401
点击打开链接
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Cachel wood

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值