qq_52586764的博客

原创 学习网络爬虫经历（豆瓣TOP250）

首先明确我们所需要的爬虫的对象 豆瓣电影 Top 250 由于豆瓣TOP250页面的分页方式是每页25所以我们需要爬取10个页面的数据。 然后右键打开检查： 我们所需要的数据全部在ol class中。 import requests from bs4 import BeautifulSoup import pprint import json import pandas as pd 首先导入以下四个库 page_indexs =range(0,250,25) #运用ran...