天气爬取

根据https://www.sojson.com/blog/305.html(非常感谢该楼主的无私奉献)网站提供的api,调取天气数据,
(1)该网站提供2000多个城市天气查询。
(2)提供数据基本为当日,未来15天,以及前一天一共17天的天气数据。存在少量城市地区无法获取数据。
(3)历史一天,当天,未来5天天气的字段是不同,我将其分别存储。
(4)频繁多次调用小心封号,我是设置了随机sleep数字,一次调所有的城市将近3小时吧,作者也提供建议调用的时间:
天气更新时间为每天的:3点,8点,13点,19点,所以建议不要凌晨去获取,加上CDN有1个小时的缓存,建议4点,9点,14点,20点后获取。
(5)网站中的城市代号在上述网页中下载,存为json格式。

1 获取城市信息

def citys():
    city_file =open( r"你电脑保留的绝对路径\city.json", encoding='utf-8')
    res = city_file.read()
    df = json.loads(res)
    dfs = pd.DataFrame(df)
    dfs2 = dfs[dfs['city_code']!=''].reset_index(drop=True)
    url01 = 'http://t.weather.sojson.com/api/weather/city/'
    dfs2['url'] =  &#
  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值