从Redis把数据导入mysql数据库脚本

# -*- coding: utf-8 -*-
import json
import redis  # pip install redis
import pymysql


def main():
    # 指定redis数据库信息
    rediscli = redis.StrictRedis(host='10.15.112.29', port = 6379, db = 0)
    # 指定mysql数据库
    mysqlcli = pymysql.connect(host='10.15.112.29', user='root', passwd='123456', db='py08', charset='utf8')
    # 无限循环
    while True:
        source, data = rediscli.blpop(["lianjia:items"]) # 从redis里提取数据
        item = json.loads(data.decode('utf-8')) # 把 json转字典
        try:
            # 使用cursor()方法获取操作游标
            cur = mysqlcli.cursor()
            # 使用execute方法执行SQL INSERT语句
            sql = 'insert into fan1y(title,link,community,housetype,direction,floor,region,totalPrice,followInfo,unitPrice,acreage,frequency) ' \
                  'VALUES(%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s)'
            cur.execute(sql, (item["title"], item["link"], item["community"], item["housetype"], item["direction"], item["floor"], item["region"],item["totalPrice"], item["followInfo"], item["unitPrice"], item["acreage"], item["frequency"]))
            # 提交sql事务
            mysqlcli.commit()
            #关闭本次操作
            cur.close()
            print ("插入 %s" % item['link'])
        except pymysql.Error as e:
            mysqlcli.rollback()
            print ("插入错误" ,str(e))


if __name__ == '__main__':
    main()
--------------------- 
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值