python executemany_Python MySQLdb executemany

我正在使用Python及其MysqLdb模块将一些测量数据导入MysqL数据库.我们拥有的数据量非常高(目前大约有250 MB的csv文件,还有很多其他文件).

目前我使用cursor.execute(…)导入一些元数据.这不是问题,因为这些只有少数条目.

问题是,当我尝试使用cursor.executemany()导入更大量的实际测量数据时,MysqLdb提出了一个问题.

TypeError: not all arguments converted during string formatting

我目前的代码是

def __insert_values(self,values):

cursor = self.connection.cursor()

cursor.executemany("""

insert into values (ensg,value,sampleid)

values (%s,%s,%s)""",values)

cursor.close()

其中values是一个元组列表,每个元组包含三个字符串.任何想法可能有什么问题吗?

编辑:

这些值由.生成

yield (prefix + row['id'],row['value'],sample_id)

然后一次读入一个列表,其中row是和来自csv.DictReader的迭代器.

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值