【python】爬虫获取全国各个城市的历史天气、温度、风向和风力

输入:

年份:target_year_list = ["2013", "2014", "2015", "2016", "2017"]

城市信息(城市名 城市拼音):http://yinter.iteye.com/blog/575549

北京 BEIJING 
上海 SHANGHAI 
天津 TIANJIN 
重庆 CHONGQING 
阿克苏 AKESU 
安宁 ANNING 
安庆 ANQING 
鞍山 ANSHAN 
安顺 ANSHUN 
安阳 ANYANG 
白城 BAICHENG 
白山 BAISHAN 
白银 BAIYIN 

 

输出:每个城市的历史数据

源源不断地获取每个城市对应的历史数据:

每个城市对应的历史数据,如下所示:

python 写入(write)文件时,出现乱码问题:

## 以下方式在mac上出现中文内容乱码
file = open('./weather_result/{}_weather.csv'.format(city_dict[city]), 'w')

## encoding='gb18030' 以这种方式创建文件即可
file = open('./weather_result/{}_weather.csv'.format(city_dict[city]), 'w', encoding='gb18030')

部分城市的“风级”数据缺失:以北京市2016年7月份为例

字段缺失,会导致程序报错,具体细节看代码(有注释)。

_str += li.string + ','
## li.string 不能为空,否则报错,如下:
TypeError: unsupported operand type(s) for +: 'NoneType' and 'str'

 

源代码-1:历史天气网址好像出问题,详见源代码-2

#encoding:utf-8                                                                      
import requests                                                                      
from bs4 import BeautifulSoup                      
评论 24
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值