Python爬虫经典案例详解：爬取豆瓣电影top250写入Excel表格！

最新推荐文章于 2024-04-28 09:45:00 发布

Python资深程序员

最新推荐文章于 2024-04-28 09:45:00 发布

阅读量3.1k

点赞数

分类专栏： Python 文章标签： Python

本文链接：https://blog.csdn.net/Pythoncxy/article/details/101074924

版权

解析数据
我们需要使用BeautifulSoup这个功能模块来把充满尖括号的html数据变为更好用的格式。
from bs4 import BeautifulSoup这个是说从(from)bs4这个功能模块中导入BeautifulSoup，是的，因为bs4中包含了多个模块，BeautifulSoup只是其中一个。
soup = BeautifulSoup(html.text, 'html.parser')这句代码就是说用html解析器(parser)来分析我们requests得到的html文字内容，soup就是我们解析出来的结果。
For循环
豆瓣页面上有25部电影，而我们需要抓取每部电影的标题、导演、年份等等信息。就是说我们要循环25次，操作每一部电影。for item in soup.find_all('div',"info"):就是这个意思。
首先我们在豆瓣电影页面任意电影标题【右键-检查】（比如“肖申克的救赎”），打开Elements元素查看器。

有需要Python学习资料的小伙伴吗?小编整理【一套Python资料、源码和PDF】，感兴趣者可以关注小编后私信学习资料（是关注后私信哦）反正闲着也是闲着呢，不如学点东西啦

Python资源共享群：626017123

find_all('div',"info")，find是查找，find_all就是查找全部，查找什么呢？查找标记名是div并且class属性是info的全部元素&#

关注