python学习-进程池,queue 实例copy文件夹

import os
import multiprocessing

def copy_file(q,file_name,old_folder_name,new_folder_name):
"""完成文件的复制"""
old_f=open(old_folder_name+"/"+file_name,"rb")
content=old_f.read()
old_f.close()
new_f=open(new_folder_name+ "/" + file_name , "wb")
#print("new_f"+new_f)
new_f.write(content)
new_f.close()
#print("copy 结束!")
#copy结束往队列中写一个名称
q.put(file_name)

def main():
#1.获取用户要copy的文件夹的名字


old_folder_name=input("请输入要copy的名字")
#2.创建一个新的文件夹
try:

new_folder_name=old_folder_name+"复件"
os.rmdir(new_folder_name)
os.mkdir(new_folder_name)
except:
pass
#3.获取文件夹的所有的待copy的文件名称 listdir()
file_names=os.listdir(old_folder_name)
print(file_names)
#4.多进程,创建进程池
po = multiprocessing.Pool(5)#括号中的数字为进程池中同时运行的进程数 l
#5.创建一个队列
q=multiprocessing.Manager().Queue()
#6.向进程池添加copy的任务
for file_name in file_names:
po.apply_async(copy_file,args=(q,file_name,old_folder_name,new_folder_name))
po.close()
#po.join()
all_file_num=len(old_folder_name)
copy_file_num=0
#使用队列来显示copy进度
while True:
file_name=q.get()
copy_file_num+=1
#print("已完成copy:"+file_name)
print("\r拷贝的进度为:%.2f%%" % (copy_file_num*100/all_file_num),end="") #\r为回到打印的行首,end=""不要换行
if copy_file_num>=all_file_num:
break



if __name__=="__main__" :
main()

转载于:https://www.cnblogs.com/quan54/p/10537520.html

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Python 3.6中的多进程queue是一个在多个进程之间共享数据的队列。它基于进程间通信(IPC)机制来实现数据的安全传递和同步。 使用多进程queue的关键是先创建一个Queue对象,然后将其传递给不同的进程,使得多个进程可以读取和写入相同的队列。以下是使用python进程queue的基本步骤: 1. 首先导入必要的库: ```python from multiprocessing import Process, Queue ``` 2. 创建Queue对象: ```python queue = Queue() ``` 3. 定义需要在多进程中执行的函数,该函数可以将数据写入队列: ```python def write_to_queue(queue, data): queue.put(data) ``` 4. 创建进程并启动: ```python p = Process(target=write_to_queue, args=(queue, "Hello world!")) p.start() ``` 5. 在主进程中从队列中读取数据: ```python data = queue.get() print(data) # 输出: Hello world! ``` 以上示例中,我们创建了一个进程p,该进程执行write_to_queue函数并将数据"Hello world!"写入队列。然后从主进程中使用queue.get()方法获取队列中的数据,并将其打印出来。 需要注意的是,多进程queue中的数据是由操作系统来管理和同步的,因此确保数据传递的顺序和可靠性。此外,为了终止子进程,我们还可以使用p.join()方法。 总结:Python 3.6中的多进程queue提供了一种在多个进程之间共享数据的有效和方便的方式,通过使用Queue对象,我们可以实现数据的安全传递和同步。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值