sql sugar 查询优化十多万订单id查询出几十万条数据,分批查询处理以避免一次加载太多数据到内存

            var orderIds = new List<long>();

            foreach(var _order in list)
            {
                orderIds.Add(_order.OrderId);
            }

            orderIds = orderIds.Distinct().ToList();

            // 分批处理以避免一次加载太多数据到内存
            int batchSize = 2000; // 可根据实际情况调整大小
            int numberOfBatches = (int)Math.Ceiling(orderIds.Count / (double)batchSize);

            var orderStatus = new List<object>();

            for (int i = 0; i < numberOfBatches; i++)
            {
                List<long> batchIds = orderIds.Skip(i * batchSize).Take(batchSize).ToList();
                //使用In里面的查询条件加索引更快
                var batchOrders = _db.Queryable<Order>()
                                            .In(o => o.OrderId, batchIds)
                                            .Select(it => new object
                                            {
                                                it.OrderId,
                                                it.Status
                                            })
                                            .ToList();
                orderStatus.AddRange(batchOrders);
            }

  • 2
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值