爬取广州天气数据和数据可视化

原创 2017年05月03日 16:20:40

基于python中scrapy框架广州天气爬虫,并对爬取到的信息进行了两种可视化
github实现代码传送门
确保本地python中有numpy,pandas,matplotlib,scrapy

  1. 第一步,在windows cmd项目路径中运行scrapy crawl tianqi -o gzweather.csv 获取广州天气数据
  2. 第二步,在conversationppt路径下运行python dataclean.py处理数据(处理后的数据被保存为newgzweather.csv)
  3. 第三步,在conversationppt路径下运行python

    下面是PPT演示视频:

版权声明:本文为博主原创文章,未经博主允许不得转载。

相关文章推荐

Delphi7高级应用开发随书源码

  • 2003年04月30日 00:00
  • 676KB
  • 下载

Python自定义豆瓣电影种类,排行,点评的爬取与存储(进阶下)

Python 2.7 IDE Pycharm 5.0.3如有兴趣可以从如下几个开始看起,其中有我遇到的很多问题: 基础抓取(限于“豆瓣高分”选项电影及评论)请看Python自定义豆瓣电影种类,排行...

写个Python程序上下班抢个顺风单

一眨眼一个极顺路的滴滴顺风单被别人抢走了. 手就是慢, 怎么办? 敲个Python程序搞定它. 本程序只限研究目的, 请勿非法使用!...

Python的charts和Jupyter的使用 使数据可视化 对58同城的爬取

尝试学习了将爬取的数据进行清洗,更新数据库后。进行可视化。记录一部分主要是对两个库的使用使用pip进行安装jupyter安装后再cmd下输入 jupyter notebook成功的话会跳转到浏览器: ...

豆瓣电影Top250爬取的数据的一些简单可视化笔记

豆瓣Top250网址 将之前爬取到的豆瓣电影进行简单的可视化: 数据列表保存为CSV格式,如图#!-*- coding:utf-8 -*- import pandas as pd import n...
  • cjooo0
  • cjooo0
  • 2016年05月19日 20:23
  • 1718

怎样成为知乎大V?爬取张佳玮138w+知乎关注者:数据可视化

作者:Deserts_X      用python爬虫玩点好玩的;用可视化看见不一样的内容。 个人公众号: 牛衣古柳(ID:Deserts-X) 简书:http://www.j...

python爬取历史天气数据

环境说明扒取的网站:天气网,http://lishi.tianqi.com/ python版本:2.7 操作系统:windows 7 所依赖的包(如若没有请安装) 包名 说明 官方地...
  • huanbia
  • huanbia
  • 2017年01月04日 15:37
  • 3159

【Python】Python简单网络爬虫-爬取近几年的天气数据

Python简单网络爬虫引用的包import urllib2 import random import csv import datetime from bs4 import BeautifulSou...
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:爬取广州天气数据和数据可视化
举报原因:
原因补充:

(最多只允许输入30个字)