未来天气爬取具体代码

最新推荐文章于 2024-10-09 17:22:23 发布

于大浪

最新推荐文章于 2024-10-09 17:22:23 发布

阅读量194

点赞数

分类专栏：天气爬取文章标签： python kafka

本文链接：https://blog.csdn.net/zzjrjbsdxcn/article/details/111560619

版权

本文展示了如何使用Python爬取天气网的数据，包括获取不同城市7天和15天的天气预报。代码中定义了多个函数，用于获取城市编码、天气URL、HTML内容，解析并保存天气数据到CSV文件。程序会根据用户输入的城市名，爬取相应天气信息。

摘要由CSDN通过智能技术生成

未来天气爬取具体代码

爬取城市：部分城市，城市可改
爬取网站：天气网
爬取时间：2020年12月，时间可改
需要自己先行安装需要的库
需要先行将一个text文档放在D:\天气爬取里面，text文档里面应该含有城市名称对应的城市编码

具体代码如下：

import requests
from bs4 import BeautifulSoup
import csv

‘’’
获取不同城市code
‘’’
def get_citycode(city_name):
with open(‘D:\天气爬取\city.txt’, ‘r’, encoding=‘UTF-8’) as fs:
lines = fs.readlines()#一次读取整个文件内容，且自动分成一行列表，readline(）每次只读取一行
for line in lines:
if(city_name in line):
code = line.split(’=’)[0].strip()#每行去掉头尾空格，且用“=”分隔出code和cityname，返回字符串列表
return code
raise ValueError(‘invalid city name’)#抛出异常

‘’’
获取不同城市7天url
‘’’
def get_7d_url(city_name):
url = ‘http://www.weather.com.cn/weather/’
code = get_citycode(city_name)
return url + code + ‘.shtml’

‘’’