爬虫实战(8)-爬取豆瓣网最近要上映的电影

下饭文章,客官里面请,看菜单,先点菜吧

这次就是一个豆瓣网近期要上映电影的爬虫

废话不多说了,直接上代码吧:

• 特别注意本文直接看代码,文中的重要知识点,有注释,本文用到的知识点在我之前的文章中全部都有详细的讲解.
• 文中部分代码注释,是我在爬虫中写代码的步骤,代码永远不是一次写成,要逐步调试,步步简单输出,这样代码发生错误后,很好修改.很快的能确定错误的地方.

#encoding: utf-8
import requests
from lxml import etree
import csv
headers ={
   
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.92 Safari/537.36',
    'Referer': 'https://movie.douban.com/'
}
url = 'https://movie.douban.com/cinema/later/xian/'
response = requests.get(url,headers=headers)
text = response.text

#数据解析
html