本文探讨了在使用MongoDB与Storm进行大数据分析时遇到的多线程高并发导致的Vertica数据库中出现重复数据问题。经过研究发现，由于MongoDB Java驱动不支持事务性，通过在操作DB时正确使用requestStart(), requestEnsureConnection()和requestDone()方法，可以确保数据操作的完整性和一致性，从而解决数据重复的问题。"
112589929,10552553,Illustrator模糊效果教程：如何制作模糊图片边缘,"['Adobe Illustrator', '图片处理', '设计技巧', '图形设计', '模糊效果']
最近项目用到 MongoDB , 主要是一些读取数据及改状态位的操作. 因为是结合了最近流行的 Storm进行大数据的分析处理，并将分析结果插入Vertica数据库，所以在多线程高并发的情境下, 会发现 Vertica 数据库中有部分重复的数据. 这到底是什么原因导致的呢？笔者开始也是一筹莫 展，重复去看 MongoDB 的 API , 终于有了新发现 ：
com.mongodb.DB 这个类有三个很重要的方法 ：
public abstract void requestStart() ： starts a new "consistent request". Following this call and until requestDone() is called, all db operations should use the same underlying connection. This is useful to ensure that operations happen in a certain order with predictable results. public abstract void requestDone()： ends the c
最低0.47元/天 解锁文章
8588
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
