python批量获取学术论文标题和作者

Algorithm F

已于 2023-02-14 15:08:36 修改

阅读量482

点赞数

分类专栏：记录文章标签： python

于 2023-02-13 19:39:37 首次发布

本文链接：https://blog.csdn.net/weixin_38169655/article/details/129015603

版权

python代码

这是要获取的信息

在这里插入图片描述

内容目录

源代码

需要提前安装好几个包

输出

输出显示到屏幕

1、源代码

import requests
from bs4 import BeautifulSoup

url = '链接'
headers = {
   
    'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.36',
    'Connection': 'keep-alive'
}

response = requests.get(url, headers=headers)
soup = BeautifulSoup(response.text, 'html.parser')
results = soup.find_all('div', class_='gs_r gs_or gs_scl')



for result in results:
    title = result