django批量mysql_Django批处理/批量更新还是创建?

批量更新将是一个upsert命令,就像@imposeren所说的,Postgres 9.5提供了这种能力。我认为Mysql 5.7也可以(参见http://dev.mysql.com/doc/refman/5.7/en/insert-on-duplicate.html),这取决于您的确切需求。也就是说,使用db游标可能是最简单的。没什么问题,因为虫子还不够。

沿着这条线的东西应该有用。这是一个伪代码,所以不要只是剪切粘贴,但概念是为你。class GroupByChunk(object):

def __init__(self, size):

self.count = 0

self.size = size

self.toggle = False

def __call__(self, *args, **kwargs):

if self.count >= self.size: # Allows for size 0

self.toggle = not self.toggle

self.count = 0

self.count += 1

return self.toggle

def batch_update(db_results, upsert_sql):

with transaction.atomic():

cursor = connection.cursor()

for chunk in itertools.groupby(db_results, GroupByChunk(size=1000)):

cursor.execute_many(upsert_sql, chunk)

假设如下:db_results是某种结果迭代器,在列表或字典中

来自db_results的结果可以直接馈送到原始sql exec语句中

如果任何批处理更新失败,您将回滚所有更新。如果要将每个块移动到,只需将with块向下推一点

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值