Spider学习笔记（四）:将爬取数据存入数据库

最新推荐文章于 2024-06-18 12:28:46 发布

小火skr车

最新推荐文章于 2024-06-18 12:28:46 发布

阅读量1.3k

点赞数

分类专栏： Spider 文章标签： Spider 爬虫数据库

本文链接：https://blog.csdn.net/xiaohuoche175/article/details/81773999

版权

Spider 专栏收录该内容

14 篇文章 3 订阅

订阅专栏

import pymysql
conn = pymysql.connect(host='127.0.0.1',user='root',password='123456',
                       database='world',port=3306,charset='utf8')

#游标
cur = conn.cursor()

#读取
with open('tencent.txt','r',errors='ignore',encoding='utf-8') as f :
    jobList = f.readlines()
    for job in jobList:
        job = eval(job)
        sql = "INSERT INTO tencent(jobname,joburl,jobIofo,jobcompany,jobmoney,jobtime)VALUES " \
              "(%r,%r,%r,%r,%r,%r)" % (job[0], job[1], job[2], job[3], job[4], job[5])
        print(job)
        print(sql)
        cur.execute(sql)
        conn.commit()
cur.close()
conn.close()