python3 多线程执行完再执行主线程_python爬虫14 | 就这么说吧，如果你不懂多线程和线程池，那就去河边摸鱼！...

最新推荐文章于 2023-04-20 16:31:21 发布
最新推荐文章于 2023-04-20 16:31:21 发布
阅读量631 收藏 1
点赞数
文章标签： python3 多线程执行完再执行主线程
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_32950005/article/details/113313207
版权
这篇博客介绍了Python3中多线程的使用，通过一个趣味的摸鱼故事，解释了如何创建线程、线程的join方法以及为何要使用线程池来避免频繁创建销毁线程，最后提到了使用Queue创建线程池的场景。
摘要由CSDN通过智能技术生成

你知道吗？

在我的心里

你是多么的重要

就像

恩

请允许我来一段 freestyle

你们准备好了妹油

你看

这个碗

a083aeff26751186671ade0f8c60a3d8.gif

它又大又圆

就像

这条面

f55662b4ffb809072f6ece07b6fe723a.png

它又长又宽

你们

在这里

看文章

觉得 很开心

就像 

我在这里

给你们

写文章

觉得很开心

skr~~

73d4d1f748d3070fe45dd932190c4bea.png

不好意思

走错片场了

ok..

接下来，就是

学习 python 的正确姿势

e9cc52ea52da6e6f826c98c55850efed.gif

咱们在上一次的

python爬虫13 | 秒爬，这多线程爬取速度也太猛了，这次就是要让你的爬虫效率杠杠的

了解了一些 python 高效爬虫的概念

比如多线程、多进程、协程等

那么我们这一篇就开始了解多线程的具体使用

在 python 中

常用的多线程的模块有这么几个

_thread

threading

Queue

之前有个 thread 模块

被 python3 抛弃了

改名为  _thread

但其实 _thread 也没什么人用

因为 _thread 有的 threading 都有

_thread 没有的 threading 依然有

22581f6ca2527ab300c9c7b1c567e59f.png

那么接下来我们就先来玩玩 threading 吧

在此之前

(请允许小帅b又开始吹水了~)

介绍一下 小帅b 的一点背景

小帅b呢

平常上班时间都会去河边摸鱼

每天得摸 20 条鱼

最低0.47元/天 解锁文章
宋安之
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
python 并发执行之多线程
weixin_34259559的博客
01-05 298
正常情况下，我们在启动一个程序的时候。这个程序会先启动一个进程，启动之后这个进程会拉起来一个线程。这个线程再去处理事务。也就是说真正干活的是线程，进程这玩意只负责向系统要内存，要资源但是进程自己是不干活的。默认情况下只有一个进程只会拉起来一个线程。多线程顾名思义，就是同样在一个进程的情况同时拉起来多个线程。上面说了，真正干活的是线程。进程与线程的关系就像是工厂...
python 多线程内子线程结束后执行主线程
weixin_44861659的博客
04-18 2203
python 多线程内子线程结束后执行主线程 今天写case时发现一个场景，请求助力接口后需要统计被助力用户的助力次数 助力接口用线程并发的方式进行，代码如下 def test_case_08(self): """多用户并发助力""" t1 = [threading.Thread(target=PreheatMethod().help, args=(i, self.A, 1)) for i in self.uid_list] [i.start() fo
python多线程结束_python 多线程
weixin_39875941的博客
12-07 398
什么是线程：在一个进程中，默认就有一个线程。将进程比喻成工厂车间的话，线程就相当于车间里的一条流水线。进程负责将资源整合到一起，而线程才是cpu上面的执行单位。多线程：一个进程中存在多个线程，多个线程共享该进程中的地址空间，相当于车间内的多条流水线，共享车间内的所有资源。进程和线程的区别：线程共享创建它的进程的地址空间。而进程有自己单独的地址空间。线程共享其进程资源，而进程完全copy其父进程资源...
在python 使用多线程方式完成3次任务，完成后自动结束（任务：吃饭3次，睡觉3次）
python技术专家
05-13 547
在python 使用多线程方式完成3次任务，完成后自动结束（任务：吃饭3次，睡觉3次） import threading import time # 1 定义一个 music 函数 def music(): for i in range(3): print(i, " 吃饭 ... ...") time.sleep(0.2) # 2 定义一个 coding 函数 def coding(): for i in range(3): print(i,
Python实现子线程代码“同时”执行完毕后，再执行后续函数模块
badwomen__的博客
04-19 4276
在python中用多线程完成任务时，在后面添加了一个提醒函数，结果发现线程开启后提醒函数就触发了。 解决方法：将多线程join()起来，就会跑完所有多线程任务再执行后续的函数模块。 join()的使用方法： import threading import time def run(): time.sleep(2) print('当前线程的名字是： ', threading.current_thread().name) time.sleep(2) if __name__ ==
python3爬虫中多线程的优势总结
01-19
有些小伙伴跟小编讨论了python中使用多线程原理的问题，就聊到了关于python多线程的弊端问题，这点可能在使用的过程中大家会能感觉到。而且之前讲过的GIL也是对python多线程的一种限制。那么，我们为什么还要用多...
php与python实现的线程池多线程爬虫功能示例
01-20
本文实例讲述了php与python实现的线程池多线程爬虫功能。分享给大家供大家参考，具体如下： 多线程爬虫可以用于抓取内容了这个可以提升性能了，这里我们来看php与python 线程池多线程爬虫的例子，代码如下： php例子...
python爬虫之多线程、多进程爬虫
02-24
多线程对爬虫的效率提高是非凡的，当我们使用python的多线程有几点是需要我们知道的：1.Python的多线程并不如java的多线程，其差异在于当python解释器开始执行任务时，受制于GIL(全局解释所)，Python的线程被限制到...
Python之多线程爬虫抓取网页图片的示例代码
12-25
目标 嗯，我们知道搜索或浏览网站时会有很多精美、漂亮的图片。 我们下载的时候，得鼠标一个个下载，而且还翻页。 那么，有没有一种方法，可以使用非人工方式自动识别并...3）支持构建多线程或线程池。 4）如果可能，
python如何在所有线程结束后执行最后操作_python多线程实现同时执行两个while循环的操作...
weixin_39937447的博客
11-26 347
如果想同时执行两个while True循环，可以使用多线程threading来实现。完整代码#coding=gbkfrom time import sleep, ctimeimport threadingdef muisc(func):while True:print 'Start playing： %s! %s' %(func,ctime())sleep(2)def move(func):whi...
Python多线程并发编程
m0_57468722的博客
11-20 421
一、Python中的GIL """ GIL的全称global interpreter lock 意为全局解释器锁。 Python中的一个线程对应与c语言中的一个线程。 GIL使得同一时刻一个CPU只能有一个线程执行字节码，...
python实现子线程代码“同时”执行完毕后，再执行某个代码（主进程）
zc20050614的博客
01-26 1050
python实现子线程代码“同时”执行完毕后，再执行某个代码（主进程）。 希望对大家有所帮助。 from threading import Thread from multiprocessing import Process## import time class MyThread(Thread): def init(self): super().init() def run(self): time.sleep(1) print("%s正线程正在下载。。。"%self.name) # print(self.
如何使用多线程，并且能够等待线程执行完之后再走主线程
最新发布
PCSpiderMan的博客
04-20 759
2.借用CompletableFuture去实现线程并行，并等待线程执行完成。3.附上allOf的源代码和join方法的源代码 ------自己看吧。1.配置一个全局线程池----等待主线程去使用。// 等待所有线程执行完成。
多线程所有子线程执行完后再执行主线程，子线程并行执行
u014644574的博客
02-07 1345
多线程所有子线程执行完后再执行主线程，子线程并行执行
【python】如何使python中线程等待其他线程完了再执行；python-threading中的join方法；python的thread库如何判断子线程所绑定的函数全部执行完毕？
点赞的都能无bug通过！
09-11 6109
让所有的子线程都join()就可以了.不用join()的时候是这样的用了join()之后是这样的.
Task1 Python基础入门：变量与异常处理（第三天）
jshmxwc的博客
09-08 565
Task1 Python基础入门：变量与异常处理（第3天） 一般异常处理： try: 执行 except A as e: # 异常错误 执行 存在finally的异常： try: 执行 except： #条件执行 执行 … finally: #必须执行 执行 存在else的异常： try: 执行 except: 执行 else: #执行try的内容时，else执行，否则不执行 执行
如何改变 Python 中线程的执行顺序
编程的朝圣之路
09-23 583
一、主线程会等待所有的子线程结束后才结束 首先我看下最普通情况下，主线程和子线程的情况。 import threading from time import sleep, ctime def sing(): for i in range(3): print("正在唱歌...%d" % i) sleep(1) def dance(): for i in range(3): print("正在跳舞...%d" % i) sle
python使用线程池多线程执行，并得到返回的结果
呆萌的代Ma
03-04 3784
示例代码 import time from concurrent.futures import ThreadPoolExecutor, as_completed from datetime import datetime def my_func(param1, param2): # 多线程执行的函数 print("开始：", param1, param2, "时间：", datetime.now()) time.sleep(3) return param1, param2
使用python3 进行多线程爬虫 线程池
04-13
使用 Python3 进行多线程爬虫的话，可以使用线程池来管理和调度线程，减少线程创建和销毁的频率，提高效率和性能。常用的线程池库有：concurrent.futures 和 ThreadPoolExecutor。在爬取网站时，可以通过多线程的...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值