python 3.6不停歇爬取天气数据并存入sqlite数据库

最新推荐文章于 2024-07-24 14:36:42 发布

咫尺云天

最新推荐文章于 2024-07-24 14:36:42 发布

阅读量3.1k

点赞数 3

文章标签： python sqlite

本文链接：https://blog.csdn.net/qq_37956302/article/details/104331609

版权

该博客介绍了一个使用Python 3.6编写的脚本，该脚本每两分钟从中国天气网抓取武汉的实时天气数据。当抓取到的数据更新时，新的天气信息会被存储到SQLite数据库中。

摘要由CSDN通过智能技术生成

目标中国天气网武汉真实天气数据
网站数据一小时内更新一次，具体更新时间未知
两分钟爬取一次数据，若爬取的时间数据更新则将对应天气数据存入数据库

import requests
import re
from bs4 import BeautifulSoup
import json
import datetime
import time
import sqlite3  


#连接到一个现有的数据库。如果数据库不存在，那么它就会被创建，最后将返回一个数据库对象。
db = sqlite3.connect('data.db') 
print ("成功连接数据库");

#创建一个cursor
c = db.cursor()   


#执行SQL语句,创建weather_表
c.execute('''CREATE TABLE IF NOT EXISTS weather_  
              (id             INT     PRIMARY KEY     NOT NULL,
              date           CHAR(10),
              time           CHAR(4),
              temperature    CHAR(4),
              humidity       CHAR(4),
              air_quality    CHAR(4) );''')
db.commit()
print ("weather_表创建成功或者已存在该表");
    
id_Cursor = c.execute("SELECT id FROM weather_")
if len(list(id_Cursor))==0 :  #判断数据库是否为空
    #执行SQL语句，为weather_表添加数据
    c.execute("INSERT INTO weather_ (id ,date ,time,temperature ,humidity ,air_quality) \
              VALUES (0, 0, 25, 0, 0 ,0 )");
    db.commit()
    print ("weather_表添加数据成功")