Mongodb批量插入大量数据。

  Mongodb批量插入大量数据,使用python脚本也能实现。在这种场景下尽量减少与数据库的通信,即准备好一定量的数据后批量插入。java mongodb的api提供了批量插入的功能。代码如下。

  

import com.mongodb.BasicDBObject;
import com.mongodb.DBCollection;
import com.mongodb.DBObject;
import com.mongodb.MongoClient;

import java.util.ArrayList;
import java.util.Date;
import java.util.List;

public class MonConnections {

    //Mongo db 批量插入数据
    private static MongoClient mongoClient = new MongoClient("127.0.0.1", 30000);
    private static long count = 2000000;
    public static MongoClient getClient(){
        return  mongoClient;
    }

    public static void  main(String[] args){
        List<DBObject> list = new ArrayList<>();
        DBCollection collection = mongoClient.getDB("test").getCollection("book");

        for (int i = 0; i < 2200000; i++){
            DBObject object = new BasicDBObject();
            object.put("id", String.valueOf(count));
            Date date = new Date();
            object.put("add_time", date);
            object.put("title", "mongo"+count++);
            list.add(object);
            if (i != 0 && i %10000 == 0){
                System.out.println("插入" + " " + i + "本书");
                collection.insert(list);
                list.clear();
            }
        }


    }
}

   注意插入后list一定要clear,否则可能出现id重复。

转载于:https://www.cnblogs.com/mercurys/p/7685184.html

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值