Zookeeper集群管理SolrCloud（solr集群）

solr集群，也就是solrCloud，是Solr提供的分布式搜索方案，当需要大规模，容错，分布式索引和检索能力时使用 SolrCloud，当一个系统的索引数据量少的时候是不需要使用SolrCloud的，当索引量很大，搜索请求并发很高，这时需要使用SolrCloud来满足这些需求。

SolrCloud是基于Solr和Zookeeper的分布式搜索方案，它的主要思想是使用Zookeeper作为集群的配置信息中心。
它有几个特色功能：
1）集中式的配置信息
2）自动容错
3）近实时搜索
4）查询时自动负载均衡

Solr集群的系统架构（简单举例）：

Collection：在SolrCloud集群中是一个逻辑意义上的完整的索引结构。它常常被划分为一个或多个Shard（分片），它们使用相同的配置信息
Shard：Collection的逻辑分片。每个Shard被化成一个或者多个replication，通过选举确定哪个是Leader。（上图是两个，可以增加多个）
Core：每个Core是Solr中一个独立运行单位，提供 索引和搜索服务。一个shard需要由一个Core或多个Core组成。由于collection由多个shard组成所以collection一般由多个core组成。
Master或Slave：Master是master-slave结构中的主结点（通常说主服务器），Slave是master-slave结构中的从结点（通常说从服务器或备服务器）。同一个Shard下master和slave存储的数据是一致的，这是为了达到高可用目的。

简易版solr集群的搭建（这里使用虚拟机搭建伪分布式集群）：

集群架构：

为一个Collection建立两个分区：Shard1、Shard2，每个分区都有两个solr服务组成，一主一备。使用zookeeper来管理solr集群，为了解决zookeeper的高并发和高可用，需要搭建一个Zookeeper集群，而其内部有一个选举机制来觉得那个zookeeper为主，所以建议是奇数节点，这里使用三个zookeeper节点。

搭建solr集群：

1.将zookeeper上传到服务器，解压得到文件夹，将文件夹复制三份到文件夹中（/usr/local/solr-cloud/）,命名为zookeeper01，02，03。
2.在每个zookeeper目录下建立一个data目录，在data目录下创建一个myid文件，文件名就叫做“myid”，内容就是每个实例的id值，如1，2，3。可以使用

echo 1 >myid
cat myid

命令来分别给三个zookeeper创建文件。
3.将每个zookeeper目录下的conf里的zoo_sample.cfg文件改名为zoo.cfg
并且修改dataDir的值，且修改clientPort的值，三个zookeeper要不一样

三个zookeeper中的server应该配置成一样。
4.创建启动三个zookeeper的服务的批处理(start-zookeeper-all.sh)，启动服务
创建之后要使用chmod u+x start-zookeeper-all.sh让文件可以执行

cd zookeeper01/bin/
./zkServer.sh start
cd ../../
cd zookeeper02/bin/
./zkServer.sh start
cd ../../
cd zookeeper03/bin/
./zkServer.sh start
cd ../../

solr集群的搭建

1.复制四个tomcat服务器，将他们的端口号分别改成8180、8280、8380、8480（在/usr/local/solr-cloud/）下，命名为tomcat01，02，03，04。
2.在每个tomcat中部署solr的war包，（可以仿照在window下安装solr单机版的方式–(https://blog.csdn.net/weixin_43231076/article/details/83144327)，每个tomcat中的solr项目都可以配置成一样）。
3.为每个solr创建一个solrhome（路径也在/usr/local/solr-cloud/下），这里需要配置中文解析器，也可仿照windows下安装solr的方式–
（https://blog.csdn.net/weixin_43231076/article/details/83144327）（https://blog.csdn.net/weixin_43231076/article/details/83145375）
4.修改每个tomcat中的solr的web.xml，将把对应的solrhome关联起来:

5 .配置solrCloud相关的配置。每个solrhome下都有一个solr.xml，把其中的ip及端口号配置好（ip地址改成自己的）:

6.让zookeeper统一管理配置文件。需要把solrhome/collection1/conf目录上传到zookeeper。上传任意solrhome中的配置文件即可。
进入解压solr压缩包得到的那个文件夹，cd 到 example/scripts/cloud-scripts/下有个zkcli.sh文件，执行（这里指定自己的zookeeper的ip，端口和solrhome的路径）

./zkcli.sh -zkhost 192.168.25.154:2181,192.168.25.154:2182,192.168.25.154:2183 -cmd upconfig -confdir /usr/local/solr-cloud/solrhome01/collection1/conf -confname myconf

7.修改tomcat/bin目录下的catalina.sh 文件，关联solr和zookeeper。
把此配置添加到配置文件中：（这里指定自己的zookeeper的ip）

JAVA_OPTS="-DzkHost=192.168.25.154:2181,192.168.25.154:2182,192.168.25.154:2183"

8.启动每个tomcat实例。要包装zookeeper集群是启动状态
9.访问集群，可以访问任一tomcat，访问之后，得到的结果是

Collection1下只有一个分片，此时，为了搭建我们想要的集群架构，可以直接在浏览器中输入请求，来创建Collection，且进行分片
http://192.168.25.154:8180/solr/admin/collectionsaction=CREATE&name=collection2&numShards=2&replicationFactor=2
这样就创建了一个Collection2

这就是我们要的集群架构，此时可以把Collection1删除，浏览器输入
http://192.168.25.154:8180/solr/admin/collectionsaction=DELETE&name=collection1
即可删除。