多线程读取重复数据入库java_解决Java多线程数据插入重复问题的建议

解决高并发环境下Java多线程数据插入重复问题，有一个解决博客网站多线程博客网站数据重复的案例可供参考：

1.背景描述

应用框架:Spring + SpringMVC + Hibernate

数据库：Oracle11g

一家博客网站向我系统推多线程低并发推送数据，我这边观察日志和数据库，发现有一个作者被存储了2次到数据库中。按照程序的编写逻辑，重复的数据应当是会被判断出来不被存储的。

2.原因分析

可能是由于网络原因，客户可能连续推送了两条重复的数据，两条数据时间间隔非常小，因此导致了我们的

if(用户不存在)

{

xxxxx

存储用户到数据库

}

else

{

重复推送，不采取任何措施

}

这个操作还没有执行完毕，第二条拥有相同数据的线程已经进入并通过了if的检验，导致数据库存储了两条相同的数据。后来我自己写了个100并发的多线程测试程序，发现100条相同数据中有40条被插入到了数据库里！因此确定了是多线程的并发导致了程序的判断逻辑失效。

3.解决思路：

1) 在Author主表中对 身份证号 添加了唯一索引，现在Author主表不会出现重复数据了，如果连续推送客户会收到一条推送失败的提示信息。

2) 但是AuthorOrg表(Author与AuthorOrg是一对多关系)依然会出现重复数据，想过添加siteId + userUniqueId的 联合唯一索引来解决，但是想到