python爬虫-全局的资源访问问题

最新推荐文章于 2022-05-27 15:58:12 发布

qq_41735391

最新推荐文章于 2022-05-27 15:58:12 发布

阅读量172

点赞数

分类专栏： python爬虫文章标签： queue 队列多线程

本文链接：https://blog.csdn.net/qq_41735391/article/details/108877069

版权

本文探讨了在Python爬虫中如何处理全局资源的访问问题，重点介绍了线程锁的运用、condition对象的使用以及通过队列实现线程同步的方法，以确保线程安全并优化CPU资源利用。

摘要由CSDN通过智能技术生成

python爬虫-全局的资源访问问题

概述

为了解决全局的变量的问题，线程不同步。

线程锁的使用

代码1

#在使用多线程的情况下，会使用到全局变量
import threading

gmoney=0
lock=threading.Lock()
def creater():
    global gmoney
    lock.acquire()
    for i in range(1000000):
        gmoney+=1
    lock.release()
    print(gmoney)
    return gmoney
def consumer():
    global gmoney
    lock.acquire()
    for i in range(1000000):
        gmoney+=1
    print(gmoney)
    lock.release()
    return gmoney


if __name__ == '__main__':
    threading.Thread(target=creater).start()
    threading.Thread(target=consumer).start()

代码2：

import threading
import time
import random

money=0
lock=threading.Lock()
gtime=0

class Product(threading.Thread):
    def run(self) -> None:
        global money
        global gtime
        while True:
            lock.acquire()
            num=random.randint(<