爬取12个月天气数据/csv数据去除符号并转存为新的csv/绘出最高气温与最低气温折线图并显示在一个表里面

智商25的憨憨

于 2020-06-10 11:31:07 发布

阅读量1.7k

点赞数 5

分类专栏：代码

本文链接：https://blog.csdn.net/gxc19971128/article/details/106661444

版权

本文展示了如何爬取2019年7月至2020年6月阜阳地区的天气数据，清理CSV文件中的摄氏度符号，并通过可视化呈现12个月的最高与最低气温变化趋势。

摘要由CSDN通过智能技术生成

纪念一下搞出来的一个东西，不过都是参考网上的，只懂一些表面的，不会深层的东西，欢迎批评指正

1.爬取2019年7月到2020年6月阜阳地区的天气：

#爬取气温代码
months = []
for year in (2019,):
    for month in range(6,12):
        months.append("%d%02d"%(year, month+1))
for year in (2020,):
    for month in range(0,6):
        months.append("%d%02d"%(year, month+1))
todo_urls = [
    f"http://tianqi.2345.com/t/wea_history/js/{month}/58203_{month}.js"

    for month in months
]
import requests

datas = []
for url in todo_urls:
    r = requests.get(url)
    if r.status_code!=200:
        raise Exception()
    # 去除javascript前后的字符串，得到一个js格式的JSON
    data = r.text.lstrip("var weather_str=").rstrip(";")
    datas.append(data)
import demjson
demjson.decode(datas[0])
tqInfos = demjson.decode(datas[0])["tqInfo"]
# 解析所有月份的数据
all_datas = []

for data in datas:
    tqInfos = demjson.decode(data)["tqInfo"