一个爬取豆瓣电影名称的例子

最新推荐文章于 2024-08-04 17:55:11 发布

bearang

最新推荐文章于 2024-08-04 17:55:11 发布

阅读量401

点赞数

CC 4.0 BY-SA版权

文章标签： python http

本文链接：https://blog.csdn.net/bearang/article/details/105666469

本文介绍了一个使用Python的requests和BeautifulSoup库来爬取豆瓣电影Top250榜单上电影名称和图片链接的示例代码。通过设置请求头避免被服务器拒绝，解析HTML获取img标签的alt和src属性。

一个爬取豆瓣电影名称的例子：

import requests
from bs4 import BeautifulSoup
url2="https://movie.douban.com/top250?start=0&filter="
hs={'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/74.0.3729.169 Safari/537.36',}
res = requests.get(url2, headers=hs)
print(res.status_code) 
text = res.text
#print(text)
soup = BeautifulSoup(text,'html.parser')
tags = soup('img')
for tag in tags:
  result=tag['alt']+":"+tag['src']
  print(result)