python多线程pool_Python ThreadPool简单应用多线程

import time

import threadpool

def sayhello(str):

print "Hello ",str

time.sleep(2)

name_list =['xiaozi','aa','bb','cc']

start_time = time.time()

pool = threadpool.ThreadPool(10)

requests = threadpool.makeRequests(sayhello, name_list)

[pool.putRequest(req) for req in requests]

pool.wait()

print '%d second'% (time.time()-start_time)

三、加锁

import threadpool,threading

mutex =threading.Lock()

def run_get_fusion_mongo_result(doc_id):

global temp_result

print doc_id

db_facetValues=get_organization_facet_count(doc_id)

db_facetValues.sort()

print 'db_facetValues',db_facetValues

fusion_facetValues=get_fusion_data(doc_id)

fusion_facetValues.sort()

print 'fusion_facetValues',fusion_facetValues

diff = list(set(db_facetValues).difference(set(fusion_facetValues)))

temp_result_docid = {}

if diff:

temp_result_docid['PublicationId'] = doc_id

temp_result_docid['Diff_Facets'] = diff

if mutex.acquire(1):

if temp_result_docid:

temp_result.append(temp_result_docid)

mutex.release()

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Python中的多线程和多进程是用来实现并发执行的两种方式。 多线程是指将一个大任务分成若干个子任务,每个子任务在不同的线程中执行,从而实现并行运算,提高处理速度。在Python中,可以使用`multiprocessing.dummy`模块中的`Pool`类来实现多线程操作。例如,可以使用`from multiprocessing.dummy import Pool as ThreadPool`来导入线程池。使用线程池可以使用`apply`、`map`、`apply_async`、`map_async`等函数来进行操作。 多进程是指将一个大任务分成若干个子任务,每个子任务在不同的进程中执行,从而实现并行运算,提高处理速度。在Python中,可以使用`multiprocessing`模块来实现多进程操作。例如,可以使用`multiprocessing.Pool`类来创建进程池,并使用`apply`、`map`、`apply_async`、`map_async`等函数来进行操作。 使用多线程和多进程可以在任务执行过程中同时执行不同的函数,从而提高效率。多线程和多进程的选择取决于任务的性质和需求。如果任务是CPU密集型的,即需要大量的计算,通常选择多进程。如果任务是IO密集型的,即需要大量的IO操作,通常选择多线程。 总结起来,多线程和多进程是Python中实现并发执行的两种方式,可以根据任务要求选择适合的方式来提高处理速度和效率。123 #### 引用[.reference_title] - *1* *2* [python多线程与多进程](https://blog.csdn.net/xiaomifanhxx/article/details/94590760)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}} ] [.reference_item] - *3* [python多进程与多线程](https://blog.csdn.net/qq_44159028/article/details/126142062)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}} ] [.reference_item] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值