python爬虫6：将数据保存到数据库

goxingman

于 2021-12-16 09:28:10 发布

阅读量1k

点赞数

分类专栏： python 文章标签：数据库 python 爬虫

本文链接：https://blog.csdn.net/goxingman/article/details/121967310

版权

python 专栏收录该内容

8 篇文章 0 订阅

订阅专栏

本文介绍了如何使用Python的sqlite3库进行数据库操作，包括插入数据到title和detail表中，并强调了commit()的重要性以确保数据持久化。示例展示了如何通过游标执行多条SQL语句并一次性提交。

摘要由CSDN通过智能技术生成

注意：

1、切记一定要commit() ，否则存不到数据库

2、可以多条execute() 然后一次性commit()

3、使用完后记得close()

import sqlite3

def saveDataToDB(data):
    connect = sqlite3.connect("test.db")
    c = connect.cursor()  #获取游标
    # i=1
    # for title in data:
    #     sql = r"insert into t1 (id,title) values (%d,'%s');"%(i,title)
    #     i+=1
    #     print(sql)
    #     c.execute(sql)
    titleList = data['titleList']
    detailList = data['detailList']
    for key,value in titleList.items():
        sql = r"insert into title (id,title) values (%d,'%s');" %(key, value)
        c.execute(sql)
    for val in detailList:
        sql = r"insert into detail (`name`,titleId,url) values ('%s',%d,'%s');" %(val[1], val[0],val[2])
        c.execute(sql)
    connect.commit()
    c.close()