文章目录
Jupyter notebook 简介
基于网页交互式运算的应用程序,可以在网页上编写和执行代码。本文将使用Xpath方法获取信息。
代码
导入request包,对网页发出请求、获取响应
导入etree函数
第一个页面中只包含10部电影信息
根据网页的地址信息,利用for循环遍历全部网页
导入csv,将数据存储在本地的csv类型文件中
将以上代码整合
import requests
from lxml import etree
import csv
##创建列表存储数据
mov_list=[]
##构造翻页url
for i in range(10):
url="https://www.maoyan.com/board/4?offset="+str(i*