python如何使用多线程_【IT专家】python(2.7)中多线程使用举例

本文由我司收集整编，推荐下载，如有疑问，请与我司联系

python(2.7)

中多线程使用举例

2017/03/16 0

python(2.7)

中多线程使用举例

python27

中多线程使用举例

下边的代码都不难理解，不做多余解释。唯一有困惑的地方已经在源码中注释说

明。这里也不做多线程编码知识的讲解。把这几种形式（主要是第三种）练成

muscle

memory

就行了，整理在这里是为了有时突然生疏方便查找，同时也做知识

分享。

一、使用

thread

模块

import requestsimport threadimport timeheaders = {‘User-Agent’: ‘mySpider-please let

me

try’,’Version’:’1.0’}def

spider(url):

r

=

requests.get(url,headers=headers)

print

r.status_code,len(r.content),time.ctime().split(‘

‘)[3]def

main():

for

i

in

range(2304,2310,1):

url

=

‘xxxx/ooxx/page-’+str(i)

thread.start_new_thread(spider,(url,))

time.sleep(0.1)if __name__ == ‘__main__’: main()

二、使用

threading

模块

import

requestsimport

threadingimport

timeheaders

=

{‘User-Agent’:’mySpider-please

let me try’,’Version’:’1.1’}def spider(url): r = requests.get(url=url,headers=headers) print

r.status_code,len(r.content),time.ctime().split(‘ ‘)[3] time.sleep(0.1)def main(): urls = [] for

i

in

range(2304,2310,1):

url

=

‘xxxx/ooxx/page-’+str(i)

urls.append(url)

threads

=

[]

thread_count

=

len(urls)

for

i

in

range(thread_count):

t

=

threading.Thread(target=spider,args=(urls[i],))

threads.append(t)

for

i

in

range(thread_count):

threads[i].start()

for

i

in

range(thread_count):

threads[i].join()if

__name__ == ‘__main__’: main()

三、

threading

模块

+Queue

模块

import

requestsimport

threadingimport

timefrom

Queue

import

Queueclass

XxxxSpider(threading.Thread):

“““docstring

for

XxxxSpider”““

def

__init__(self,queue):

threading.Thread.__init__(self) self._queue = queue def run(self): “““ start()

让

run()

在新

线程里面运行。直接调用

run()

就是在当前线程运行了。

start()

调用

_thread

的

start_new_thread

去运行一个

bootstrap

方法，在里面做一些准备工作后会调用

run()

“““

while

not

self._queue.empty():

page_url

=

self._queue.get_nowait()

print