async python异步

最新推荐文章于 2024-08-26 16:16:15 发布

qq_20038305

最新推荐文章于 2024-08-26 16:16:15 发布

阅读量1.5k

点赞数

分类专栏： python

本文链接：https://blog.csdn.net/qq_20038305/article/details/70145419

版权

这篇博客介绍了Python中使用异步编程的方法，包括使用`asyncio`库创建异步任务，以及结合`Queue`进行并发处理。示例代码展示了如何使用`asyncio.Queue`进行任务调度，并确保任务的顺序执行和资源管理。

摘要由CSDN通过智能技术生成

但程序异步：

# coding=utf-8
import selenium2
from multiprocessing import Pool
import re
import os
from selenium import webdriver
import queue
import time
import multiprocessing
from pybloom import BloomFilter
import asyncio
from asyncio import Queue

async def foo(myqueue):
    while not myqueue.empty():
        selenium2.mainurl(myqueue.get())
        for this2plusurl in selenium2.linkurl:
            if not this2plusurl in f:
                f.add(this2plusurl)
                ln.append(this2plusurl)
                myqueue.put(this2plusurl)

if __name__ == '__main__':
    global ln
    ln = []
    f = BloomFilter(capacity=100000, error_rate=0.001)
    global myqueue
    myqueue = queue.Queue()
    url = 'qqms.dayanghang.net'
    f.add(url)