gevent 并发实例

t1=time.time()

#获得所有教授的链接

web_links=‘http://www.cmu.edu/engineering/materials/people/faculty/index.html’

l=requests.get(web_links)

li=BeautifulSoup(l.text,‘lxml’)

li1=li.find(‘div’,class_=‘bioIndex’)

lin=li1.find_all(‘div’,class_=‘row’)

links=[]

for link in lin:

temp=link.find('div',class_='names').find_all('div',class_='name')

for i in temp:

    t_link='http://www.cmu.edu/engineering/materials/people/faculty/'+str(i.find('a')['href'])

    links.append(t_link)

#对每个连接进行解析

def gettext(links):

i = 0

try:

    pro = requests.get( links ).text

    print('第{}位教授'.format(i) + '#########################################\n',

          '教授链接： ' + (links[i]) + '\n',

          )

    soup = BeautifulSoup(pro, 'lxml')

    detail = soup.find('div', class_='content')

    name = detail.find('h1').text

    title = detail.find('h2')

    contacts = detail.find_all('div', class_='bioContactInfo')

    bio = detail.find('p')

    print('教授姓名： ' + str(name) + '\n',

          'title    ' + title.text + '\n'

          'orginzation'+' Carnegie Mellon University  MECHANICAL ENGINEERING')

    for contact in contacts[1:]:

        print(contact.text)

    print(bio.text)

    i = i + 1

except Exception as e:

    i = i + 1

    print(e)

#定义并发的数量

pool=gevent.pool.Pool(10)

for i in links:

pool.add(gevent.spawn(gettext,i))

最后

自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数初中级Android工程师，想要提升技能，往往是自己摸索成长，自己不成体系的自学效果低效漫长且无助。

因此收集整理了一份《2024年Web前端开发全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上Android开发知识点！不论你是刚入门Android开发的新手，还是希望在技术上不断提升的资深开发者，这些资料都将为你打开新的学习之门！

如果你觉得这些内容对你有帮助，需要这份全套学习资料的朋友可以戳我获取！！

由于文件比较大，这里只是将部分目录截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且会持续更新！
/bbs.csdn.net/topics/618191877)

由于文件比较大，这里只是将部分目录截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且会持续更新！