历史天气爬取

最新推荐文章于 2024-06-25 12:47:07 发布
最新推荐文章于 2024-06-25 12:47:07 发布
阅读量219 收藏
点赞数
分类专栏： 天气爬取 文章标签： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zzjrjbsdxcn/article/details/111560774
版权
本文介绍了如何使用Python从2345天气网爬取历史天气数据，包括爬取的城市列表、月度数据以及保存到CSV文件的过程。通过示例代码展示了请求网页、解析JSON数据并写入CSV文件的实现。
摘要由CSDN通过智能技术生成

历史天气爬取

爬取来源：2345天气网
爬取周期：月度，可自行更改
爬取城市：部分城市，可自行更改

具体代码：
import requests
import demjson
import csv

list = [
‘71398’,
‘60169’,
‘70912’,
‘60901’,
‘70924’,
‘60554’,
‘60495’,
‘60400’,
‘58633’,
‘60181’,
‘71013’,
‘70353’,
‘60083’,
‘60498’,
‘60841’,
‘60900’,
‘60705’,
‘58927’,
‘60899’,
‘70034’,
‘60552’,
‘60715’,
‘60890’,
‘60854’,
‘60551’,
‘60181’,
‘60366’,
‘60654’,
‘71401’,
‘61021’,
‘70145’,
‘60597’,
‘60563’,
‘60189’,
‘61042’,
‘60116’,
‘60181’,
‘60181’,
‘70471’,
‘71409’,
‘71011’,
‘60116’,
‘60761’,
‘60191’,
‘60591’,
‘70328’,
‘61081’,
‘61027’,
‘60708’,
‘58549’,
‘71391’,
‘6

最低0.47元/天 解锁文章
于大浪
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
python爬取历史天气查询_历史天气爬取
weixin_29549793的博客
01-29 366
历史天气爬取爬取来源：2345天气网爬取周期：月度，可自行更改爬取城市：部分城市，可自行更改具体代码：import requestsimport demjsonimport csvlist = [‘71398’,‘60169’,‘70912’,‘60901’,‘70924’,‘60554’,‘60495’,‘60400’,‘58633’,‘60181’,‘71013’,‘70353’,‘60083...
python爬取网络历史天气数据
05-24
python爬取网络历史天气数据
历史天气爬虫
01-25
# 可以这么用 weather = Weather_2345('广州', '201811', '201901') print(weather.get_weather()) # 也可以这么用 weather = Weather_2345('下面会再次设置区域这里可以随便填', '201811', '201901') area_list = ["白云", "从化", "花都", "海珠", "黄埔", "荔湾", "南沙", "番禺", "天河", "越秀", "增城"] with open('./weather.log', 'w', encoding='utf-8') as fw: fw.write("区域,日期,最高气温,最低气温,天气,风向,风力,空气指数,空气情况,空气等级" + "\n") for area in area_list: print() weather.area = area weather_list = weather.get_weather() for lines in weather_list: fw.write(",".join(lines) + '\n')
python爬取某地十年天气数据
m0_73511684的博客
06-25 638
观察我们需要的数据发现其位于一个表格中html中td和table两个标签表示该数据是表格类型数据。如果要通过大量历史天气数据做分析，可以通过爬虫的方式获得。想要获得一个城市的历史天气，可以在天气后报网站上查询获得。由于是非静态网页，爬取的时候需要设置一些参数。上图就是我们要爬取的网页以及数据。
python爬取历史天气
05-08
利用python爬取网站上面的历史天气，并且使用正则表达式针对于网站上面的数据进行获取，最后生成excel表格
PYTHON爬取天气网历史天气
ZiQingRan的博客
12-08 442
#encoding:utf-8 import requests from bs4 import BeautifulSoup import random import urllib import urllib.request imp...
使用Python 爬取历史天气
qq_38347727的博客
11-20 761
Python 的简单爬取天气 最近做个简单小项目需要一些天气数据值，所以想去网上爬取一些。下面是我的爬取案例。使用的网站是2345天气网。 首先我们分析下网站。打开网页按住F12则可以看到网页的结构。如下图。 但当我们改变年份和月份时候发现网页没有发生变化，那我们可以考虑我们需要的东西肯定是动态加载的。 当我们看network里相应发下，改变年份或者月份出来一个响应，我们点开看看。发现header的URL是 http://tianqi.2345.com/Pc/GetHistory?areaInfo
历史天气爬取，绝对可以用，百分百
12-22
with open("./历史天气爬取.csv", "w", newline="", encoding="utf-8") as csv_file: Weather_file = csv.writer(csv_file) title = yearTq[0].keys() Weather_file.writerow(title) for data in yearTq: ...
用python爬取历史天气数据的方法示例
09-18
本文将详细介绍使用Python爬取历史天气数据的方法，并通过示例代码进行说明，以帮助大家更好地理解和掌握该技能。 首先，我们需要明白爬虫技术的基本原理。爬虫是一种自动获取网页内容的程序，通过模拟人类上网的...
爬取各个城市历史天气及数据可视化成功.py
06-28
爬取各个城市历史天气及数据可视化，爬虫，方便导入直接操作，适合初学者避坑，爬取各个城市历史天气及数据可视化
使用Scrapy框架爬取历史天气数据
yanjizang0663的博客
02-17 880
#爬取主程序 # -*- coding: utf-8 -*- import scrapy from scrapy import Request from ..items import SpainweatherItem class SpainSpider(scrapy.Spider): #爬取2016年西班牙的天气数据 name = 'Spain' allowed_dom...
【python爬虫】——历史天气信息爬取
qq_38734327的博客
09-19 2013
网页使用get方式发送请求，所需参数包括areaInfo[areaId]、areaInfo[areaType]、date[year]、date[month]，分别为城市id、城市类型，年、月。在2345天气信息网。
python学习系列3——爬取历史天气数据
yanjizang0663的博客
08-07 1500
根据输入的城市和年月，对该地区该时间段的历史天气数据进行爬取。其中用到了xpinyin库Pinyin类对输入的地名转换为拼音，用于获取信息时的地址输入。将获得的天气数据进行打印和保存 代码： import urllib2 import urllib import codecs import random import os from xpinyin import Pinyin from bs...
爬虫攻守道 - 2023最新 - JS逆向 - Python Scrapy实现 - 爬取某天气网站历史数据
biaobro的博客
01-10 2947
爬虫与反爬虫 - 2023最新爬取某天气网站历史数据 - JS逆向 - Python实现
如何使用Python爬取历史天气信息
weixin_42785935的博客
10-03 1863
如何使用python获取天气信息
python 爬取指定城市得近几年天气情况 并做可视化展示（附代码）
pythonuser1的博客
09-22 1430
# 前言 ### 需要准备环境 python 3.9 pycharm 2021 ### 模块使用 re, csv -- 内部模块，不需要安装 requests, bs4, pandas, matplotlib -- 第三方库，win + R 输入cmd 打开命令窗口 输入安装命令 pip install 模块名 # 分析网站 [查看全国各地得历史天气](http://www.tianqihoubao.com/lishi/) 点击任意城市，因为我在武汉，这里以
历史天气信息数据爬取
Aronup
02-13 2300
北京市2020年1月份历史天气爬取 视频教程（讲的阔以的） 1 确定目标网址 1.1 目标网址 [2345天气] 1.2 目标数据 北京2020年一月份 2 分析网页 分析过程大家去看视频吧，讲的很好，现学现卖 ???? 3 爬取js文件 爬取过程 1.构造URL 2.用requests获取js，处理成json样式，接下转换成标准的json 3.用demjson转换成标准的json 4.解析数据放入...
Python爬虫 历史天气网
qq_40298768的博客
09-16 366
从历史天气网获取天气信息 import requests from bs4 import BeautifulSoup import re import random my_headers = [ "Mozilla/5.0 (Windows NT 6.3; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/39.0.2171.95 Safari/537.36", "Mozilla/5.0 (Macintosh; Intel Mac OS
python爬取呼伦贝尔历史天气
最新发布
08-14
对于呼伦贝尔历史天气这种特定需求，你需要访问一个提供历史天气数据的网站，比如中国气象局、AccuWeather这类站点。 首先，你需要安装必要的库： ```bash pip install requests beautifulsoup4 lxml ``` 接着，...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值