MongoDB 在 Java 中 如何插入大量的数据

[向上的芽儿]

我这里用的是最新的mongodb，version：3.4 Java 驱动版本：3.4.
现在有需求要做大量数据的插入操作，通过Java 驱动完成插入操作。
mongo db 所在的服务器是win server 2008 的，服务器性能有限；
我这里插入了100000 条数据，每条数据是50个字段，然后通过java
驱动调用insertMany 的写法：

for(int i=0;i<documents.size();i++){
     if(i > 0 && (i+1) % 10000==0){
	 collection.insertMany(documents.subList(i-9999, i+1));
     }
}

10000 条插入一次；结果测试下来的时间是55073 毫秒。。简直慢的可以。
另外通过bulkWrite的写法也试过了；

JsonArray jsonArr = new JsonParser().parse(jsonData).getAsJsonArray();
			int insert_size = jsonArr.size();
			for(int i=0;i<insert_size;i++){
				if(i >0 && i % 10000==0){
					collection.bulkWrite(bulkInsert);
					bulkInsert.clear();
				}
				
				bulkInsert.add(new InsertOneModel<Document>(
						Document.parse(jsonArr.get(i).toString())));
			}

；
跑下来的时间更久。。因为中间还有数据转换的时间， 实在是不知道怎么解决，
各位有经验的朋友还希望帮帮忙。

[rucypli]

手动写个js试试 如果快的话 只能说不是mongodb的问题了 Uptime:1499090 Documents:10100011 > for(var i=0;i<10000;i++)db.a.insert({id:"aaaa"}); WriteResult({ "nInserted" : 1 }) Uptime:1499126 Documents:10110011 >

[神奇五花肉]

楼主解决了吗？我也遇到了同样的问题．．．．

[「已注销」]

第一，建立数据库连接池，每次存储数据其实大多数时间都在做数据库连接， 第二，做事物的优化，你可以用HIbernate框架去配置，楼主肯定刚学Java不久，以后会学习的，java驱动是入门时学习的 @Transactional

[「已注销」]

并且就算是有了连接池也不要一条一条存，放在集合中，规定每一千条或者一万条存一次