爬虫数据分析：上海旅游景点排名分析

最新推荐文章于 2024-07-19 15:37:43 发布

菜鸡小单

最新推荐文章于 2024-07-19 15:37:43 发布

阅读量1.9k

点赞数 3

分类专栏：数据分析文章标签：爬虫

本文链接：https://blog.csdn.net/weixin_39862029/article/details/95750136

版权

本文通过爬虫技术获取了上海旅游景点的网页数据，详细分析了景点的排名情况。首先，成功导入所需模块，接着逐页抓取了网址如'https://travel.qunar.com/p-cs299878-shanghai-jingdian-1-1'等。在获取到HTTP响应状态码200表示请求成功后，进一步解析网页代码，提取出景点信息，如'上海迪士尼度假区'的相关详情，包括地理位置、评论数量和排名等。最后，展示了完整的爬虫流程，包括访问、解析、获取和存储数据四个步骤。

摘要由CSDN通过智能技术生成

import requests
from bs4 import BeautifulSoup
import numpy as np
import pandas as pd
import matplotlib.pyplot as plt
print('导入模块')

输出导入模块。则代表导入这些模块成功。

#批量获取页面，因为有好几页，所以可以把所有的网页放在一个列表里面
urllst=[]
ui='https://travel.qunar.com/p-cs299878-shanghai-jingdian-1-'
for i in [1,2,3,4]:
    u=ui+str(i)
    print(u)
    urllst.append(u)#append就是把每个u都添加到urlst列表中去