python存储数据到mysql--针对dataframe格式下的

这个导入时间大概在5秒左右,因为是一条一条的导入的(50000条数据)

import pymysql

conn = connect((host='主机名', port='端口号', user='用户名', password='密码', database='数据库名', charset='utf8')
# 获取游标
con_cursor = conn.cursor()
# 假设存入50000条数据
for num in range(1,50000):
	try:
		sql = 'insert into tabel1(col1, col2, col3) values(%s, %s, %s)' %(df.loc[:, "col1"].iloc[num], df.loc[:, "col2"].iloc[num], df.loc[:, "col3"].iloc[num]))
		con_cursor.execute(sql)
	except:
		pass
conn.commit()
con_cursor.close()
conn.close()
print("ok")
	

这个导入时间大概在1秒左右,因为是多条记录的导入,一次性写入数据库

conn = connect((host='主机名', port='端口号', user='用户名', password='密码', database='数据库名', charset='utf8')
# 获取游标
con_cursor = conn.cursor()
# 假设df有col1,col2两列
usersvalues = []
for num in range(1, 50000):
	 # 注意要用两个括号扩起来,必须是元组的形式,放到usersvalues 这个空列表里
     usersvalues.append((df.loc[:, "col1"].iloc[num], df.loc[:, "col2"].iloc[num])) 
# 结果就是类似与[(1, 'word'), (2, 'wdas'), (3, 'asda')],这里就是相当于把记录放在一个列表里,上一种方法就是一条记录一条记录执行,这里就是一次性全部执行,速度快
sql = 'insert into table1(col1, col2) values(%s, %s)'
# table1是表名
# usersvalues包含所有信息
con_cursor.execute(sql, usersvalues)
# 提交到数据库
conn.commit()
con_cursor.close()
conn.close()
print('OK')
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值