multiprocessing之Process和Pool

日常工作中可能会对同一个文件进行批量操作,但为了节省时间可能会想到多进程。但又会遇到一个问题:写入的内容比较混乱。下面以例子进行展示吧。
1.先来个常规的吧

from multiprocessing import Process
import time

def fun(x):
    call(x)

def call(x):
    with open('t.txt','a')as f:
        f.write(str(x))

if __name__ == '__main__':

    for k in range(5):
        p_list=[]
        start_time = time.time()
        for i in range(8):
            pro=Process(target=fun,args=(i,))
            p_list.append(pro)
        for p in p_list:
            p.start()
        for p in p_list:
            p.join()
        end_time=time.time()
        print("used time : {}".format(end_time-start_time))

在这里插入图片描述
写入文档的内容比较混乱。
2.Pool

from multiprocessing import Pool
import time

def fun(x):
    return x

def call(x):
    with open('Pool.txt','a')as f:
        f.write(str(x))

if __name__ == '__main__':
    for i in range(5):
        start_time=time.time()
        p_list=[]
        pool=Pool(8)
        for i in range(8):
            pool.apply_async(func=fun,args=(i,),callback=call)
        pool.close()
        pool.join()
        end_time=time.time()
        print("used time : {}".format(end_time-start_time))

在这里插入图片描述
这个内容就比较顺眼一点。
欢迎大家批评指正

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值