python爬虫项目之中国天气网的爬取终极版

说明:此项目替代了我们每天从网页或者其他途径上看全国各地的气温情况(本项目只是爬取的全国各个地区的最低气温,其他扩展功能根据此项目来完善即可!!!)

我们先看一下非常人性化的结果:

在这里插入图片描述用到的模块:

  1. requests
  2. pyecharts
  3. bs4

在这里必须说明一点(必做):我们用到的python版本基本上会在3.6以上,所以在用到pyecharts中的Bar时候会出现问题;为了解决这个问题,作者也有具体的解决步骤:升级版本:仅支持 Python3.6+

cmd命令下执行下面的三条:


1. pip install wheel
 
2. pip install pyecharts==0.1.9.4 或则 pip install pyecharts -U
 
3. pip install pyecharts-snapshot

注:引起这个问题是版本引起的,看了下官方的github发现的。

下面我们直接上完整代码:(具体操作的步骤会在后续文章中发出)

import requests
# from pyecharts import Bar
from bs4 import BeautifulSoup
from pyecharts import Bar
# 目标网站:http://www.weather.com.cn/textFC/hb.shtml

All_DATE=[]
def parse_url(url):
    headers = {
   'User-Agent':'此处需要更改成你本机的User-Agent'
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值