第一次爬取豆瓣电影,纪念下
这里写自定义目录标题爬取豆瓣中的电影
学习爬虫,一直只能写简单的爬虫爬取静态页面,今天终于写出一个可以爬取AJAX页面的爬虫,记录一下代码编写的过程,纪念一下
目标:爬取豆瓣电影列表中的电影的名称和评分
分析页面,触发异步加载响应后在Name一栏可以看到网站实际响应的页面,在Headers栏中查找到响应的Request Headers.在pycharm中创建一个txt文档,把这些内容全部复制进去,格式如下:
Accept: */*
Accept-Encoding: gzip, deflate, br
Ac
原创
2020-07-16 14:47:58 ·
1326 阅读 ·
0 评论