入门必看:利用 Python 实现多任务进程(1),2024年最新2024最新Python面试笔试题目分享

先自我介绍一下,小编浙江大学毕业,去过华为、字节跳动等大厂,目前阿里P7

深知大多数程序员,想要提升技能,往往是自己摸索成长,但自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!

因此收集整理了一份《2024年最新Python全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友。
img
img



既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上Python知识点,真正体系化!

由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新

如果你需要这些资料,可以添加V获取:vip1024c (备注Python)
img

正文

我们首先声明了一个构造方法,这个方法接收一个 loop 参数,代表循环次数,并将其设置为全局变量。在 run方法中,又使用这 个 loop 变量循环了 loop 次并打印了当前的进程号和循环次数。

在调用时,我们用 range 方法得到了 2、3、4 三个数字,并把它们分别初始化了 MyProcess 进程,然后调用 start 方法将进程启动起 来。

注意:这里进程的执行逻辑需要在 run 方法中实现,启动进程需要调用 start 方法,调用之后 run 方法便会执行。

运行结果如下:

Pid:12976 LoopCount: 0

Pid:15012 LoopCount: 0

Pid:11976 LoopCount: 0

Pid:12976 LoopCount: 1

Pid:15012 LoopCount: 1

Pid:11976 LoopCount: 1

Pid:15012 LoopCount: 2

Pid:11976 LoopCount: 2

Pid:11976 LoopCount: 3

注意,这里的进程 pid 代表进程号,不同机器、不同时刻运行结果可能不同。

四、进程之间的通信

=========

1、Queue-队列 先进先出

from multiprocessing import Queue

import multiprocessing

def download§: # 下载数据

lst = [11,22,33,44]

for item in lst:

p.put(item)print(‘数据已经下载成功…’)

def savedata§:

lst =

while True:

data = p.getlst.append(data)if p.empty:

breakprint(lst)def main:p1 = Queuet1 = multiprocessing.Process(target=download,args=(p1,))t2 = multiprocessing.Process(target=savedata,args=(p1,))t1.startt2.startif name == ‘main’:

main

数据已经下载成功…

[11, 22, 33, 44]

2、共享全局变量不适用于多进程编程

import multiprocessing

a = 1

def demo1:

global a

a += 1

def demo2:

print(a)def main:

t1 = multiprocessing.Process(target=demo1)t2 = multiprocessing.Process(target=demo2)t1.startt2.startif name == ‘main’:

main

运行结果:

1

有结果可知:全局变量不共享;

五、进程池之间的通信

==========

1、进程池引入

当需要创建的子进程数量不多时,可以直接利用 multiprocessing 中的 Process 动态生成多个进程,但是如果是上百甚至上千个目标,手动的去创建的进程的工作量巨大,此时就可以用到 multiprocessing 模块提供的 Pool 方法。

from multiprocessing import Pool

import os,time,random

def worker(a):t_start = time.time

print(‘%s开始执行,进程号为%d’%(a,os.getpid))

time.sleep(random.random*2)

t_stop = time.time

print(a,“执行完成,耗时%0.2f”%(t_stop-t_start))

if name == ‘main’:

po = Pool(3) # 定义一个进程池

for i in range(0,10):

po.apply_async(worker,(i,)) # 向进程池中添加worker的任务print(“–start–”)

po.closepo.joinprint(“–end–”)

运行结果:

–start–

0开始执行,进程号为6664

1开始执行,进程号为47722开始执行,进程号为132560 执行完成,耗时0.18

3开始执行,进程号为6664

2 执行完成,耗时0.16

4开始执行,进程号为13256

1 执行完成,耗时0.67

5开始执行,进程号为4772

4 执行完成,耗时0.87

6开始执行,进程号为13256

3 执行完成,耗时1.59

7开始执行,进程号为6664

5 执行完成,耗时1.15

8开始执行,进程号为4772

7 执行完成,耗时0.40

9开始执行,进程号为6664

6 执行完成,耗时1.80

8 执行完成,耗时1.49

9 执行完成,耗时1.36

–end–

一个进程池只能容纳 3 个进程,执行完成才能添加新的任务,在不断的打开与释放的过程中循环往复。

干货:利用 Python 实现多任务进程

六、案例:文件批量复制

===========

操作思路:

  • 获取要复制文件夹的名字

  • 创建一个新的文件夹

  • 获取文件夹里面所有待复制的文件名

  • 创建进程池

  • 向进程池添加任务

代码如下:

导包

import multiprocessing

import osimport time

定制文件复制函数

def copy_file(Q,oldfolderName,newfolderName,file_name):

文件复制,不需要返回time.sleep(0.5)

print(‘\r从%s文件夹复制到%s文件夹的%s文件’%(oldfolderName,newfolderName,file_name),end=‘’)

old_file = open(oldfolderName + ‘/’ + file_name,‘rb’) # 待复制文件

content = old_file.readold_file.closenew_file = open(newfolderName + ‘/’ + file_name,‘wb’) # 复制出的新文件

new_file.write(content)

new_file.closeQ.put(file_name) # 向Q队列中添加文件

定义主函数

def main:

oldfolderName = input(‘请输入要复制的文件夹名字:’) # 步骤1获取要复制文件夹的名字(可以手动创建,也可以通过代码创建,这里我们手动创建)

newfolderName = oldfolderName + ‘复件’

步骤二 创建一个新的文件夹if not os.path.exists(newfolderName):

os.mkdir(newfolderName)

filenames = os.listdir(oldfolderName) # 3.获取文件夹里面所有待复制的文件名

print(filenames)

pool = multiprocessing.Pool(5) # 4.创建进程池

在这里插入图片描述

感谢每一个认真阅读我文章的人,看着粉丝一路的上涨和关注,礼尚往来总是要有的:

① 2000多本Python电子书(主流和经典的书籍应该都有了)

② Python标准库资料(最全中文版)

③ 项目源码(四五十个有趣且经典的练手项目及源码)

④ Python基础入门、爬虫、web开发、大数据分析方面的视频(适合小白学习)

⑤ Python学习路线图(告别不入流的学习)

网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。

需要这份系统化的资料的朋友,可以添加V获取:vip1024c (备注python)
img

一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!
该都有了)

② Python标准库资料(最全中文版)

③ 项目源码(四五十个有趣且经典的练手项目及源码)

④ Python基础入门、爬虫、web开发、大数据分析方面的视频(适合小白学习)

⑤ Python学习路线图(告别不入流的学习)

网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。

需要这份系统化的资料的朋友,可以添加V获取:vip1024c (备注python)
[外链图片转存中…(img-x4ydwBJw-1713465108747)]

一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!

  • 15
    点赞
  • 20
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值