实战：爬取7天天气预报

尹天仇沙雕

于 2018-12-09 22:22:18 发布

阅读量1.9k

点赞数 2

分类专栏： python

本文链接：https://blog.csdn.net/leon1827/article/details/84933180

版权

本文通过Python结合request和BeautifulSoup库，介绍如何爬取7天的天气预报数据，旨在提升静态网页信息抓取技能。

摘要由CSDN通过智能技术生成

利用python+request+bs4爬取7天的天气预报信息

为了熟练掌握静态页面信息爬取，几种方法如下所示，希望大神指点。

#!/usr/bin/env python3
#-*- coding:utf-8 -*-

import requests
import re
from bs4 import BeautifulSoup

url = 'http://www.weather.com.cn/weather/101221001.shtml'
headers={
   
        'User-Agent':'Mozilla/5.0 (Windows NT 10.0; WOW64; rv:62.0) Gecko/20100101 Firefox/62.0',
    }
html = requests.get(url, headers=headers)
html.encoding = 'utf-8'
htmlText = html.text
soup = BeautifulSoup(html.text, 'html.parser')

# 方法 1： find_all 一层层找，先标签h1，然后标签p
date = []
weather = []
templerature = []
lis = soup.find_all('li', class_='sky')
for li in lis:
    h1_dates = li.find_all('h1')
    p_weas = li