python爬取某地十年天气数据

想要获得一个城市的历史天气,可以在天气后报网站上查询获得
如果要通过大量历史天气数据做分析,可以通过爬虫的方式获得。 

网站:天气,天气预报查询,24小时,今天,明天,未来一周7天,10天,15天,40天查询_2345天气预报

可以查看到某个城市的历史天气信息如下图所示:

 上图就是我们要爬取的网页以及数据

这里切换年份和月份,网站的url是不会改变的,表明该网页是后台异步加载,需要进行抓包分析,点击检查点击network来到下图所示:

先不要刷新网页我们切换年份和月份试试:

 

此时可以看到 多了几行,随便点开一个查看即可:

 由于是非静态网页,爬取的时候需要设置一些参数。

在Palyload中:

 params = {
        "areaInfo[areaId]": 60295,
        "areaInfo[areaType]": 2,
        "date[year]": year,
        "date[month]": month
    }

接着是设置heade

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值