python爬虫+数据可视化项目

最新推荐文章于 2024-07-19 15:17:08 发布

置顶

程序员lamed

最新推荐文章于 2024-07-19 15:17:08 发布

阅读量1.4w

点赞数 17

文章标签： Python 程序员编程新手入门

本文链接：https://blog.csdn.net/weixin_45342712/article/details/94736719

版权

本文介绍了一个Python爬虫项目，通过requests和BeautifulSoup库抓取中国天气网上的全国实时温度最低的十个城市数据，再利用pyechart模块将数据转化为柱状图进行可视化展示，适合Python编程新手入门。

摘要由CSDN通过智能技术生成

取目标：中国天气网（起始url：http://www.weather.com.cn/textFC/hb.shtml#）

爬取内容：全国实时温度最低的十个城市气温排行榜

使用工具：requests库实现发送请求、获取响应。

beautifulsoup实现数据解析、提取和清洗

pyechart模块实现数据可视化

爬取结果：柱状图可视化展示：在这里插入图片描述

直接放代码

from bs4 import BeautifulSoup
from pyecharts import Bar
 
'''
遇到python不懂的问题，可以加Python学习交流qun  688244617一起学习交流，还有零基础入门的学习资料和大量干货哦
'''
ALL_DATA = []
def send_parse_urls(start_urls):
    headers = {
    "User-Agent": "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
    }
    for start_url in start_urls:
        response = requests.get(start_url,headers=headers)
        # 编码问题的解决
        response = response.text.encode(