lucene 处理大规模数据的一些解决方法 katta--简介

lucene 索引文件有大概10G,搜索时候比较慢，最好拆分存放索引，多位置同时搜索

当数据量较大访问量较大的时候，分布式就不可避免，处理方式有下面几种：

1，用一个好服务器作为索引服务器，磁盘冗余的方式保证搜索的正常进行；

2，索引服务器用一台，检索服务器用分布式；

3，编写索引算法，分布式存放，检索时采用多线程搜索合并搜索结果返回；

4，索引分布式存储用硬件的方式保证索引文件的同步，检索也采用分布式。

5  不同业务，不同分布。

分布如何做好，看对搜索的要求，比如要求整个索引搜索要求多少时间内完成，搜索整体便于扩展，当中一服务器宕机，如何快速调整，承受高并发搜索，如何监视 整个集群的运转，如何不断提升搜索。