CDH 中solrcloud 关于shard副本问题

最新推荐文章于 2022-02-24 16:15:39 发布

weixin_34326429

最新推荐文章于 2022-02-24 16:15:39 发布

阅读量362

点赞数

原文链接：https://my.oschina.net/u/2293326/blog/609862

版权

2019独角兽企业重金招聘Python工程师标准>>>

version CDH5.4.4
the number of nodes:3
想实现个节点直接互相备份：

命令：

      solrctl instancedir --create myCollection /home/test
      solrctl collection --create myCollection -s 1 -r 2 (It was successful)

      but :solrctl collection --create myCollection -s 3 -r 2:
      it is an error:Cannot create collection mycollection. Value of maxShardsPerNode is 1

可以看看官方这个帖子：https://community.cloudera.com/t5/Cloudera-Search-Apache-SolrCloud/Indexing-files-on-HDFS-using-solrcloud-on-cloudera-and-searching/td-p/30656

也可以看官方文档：http://wiki.apache.org/solr/SolrCloud

其实默认情况下：每个节点的最大分片是1（maxShardsPerNode=1），

但是我们可以：however, you can override this by overriding the value of the "maxShardsPerNode" parameter, as you did with the curl command. （即用过URL命令来实现）

步骤：solrctl instancedir --create myCollection /home/test

可以点开CDH的solrcloud管理界面：

http://hadoopnamenode:8983/solr/admin/collections?action=CREATE&name=myCollection&numShards=3&replicationFactor=3&maxShardsPerNode=3

注意：这里是管理collection，所以用collections?

在node1上创建core，如下：

 'http://node1:8983/solr/admin/cores?action=CREATE&name=mycore&collection=collection1&shard=shard2'

然后用：solrctl collection --list 发现我们创建成功

注意：当我们用cdh做分片备份的时候，建立collection的时候必须maxShardsPerNode大于1，比如这里为3，以后当一个服务器挂了，新添加的服务器，我们才能用创建core的URL，如果使用默认的maxShardsPerNode=1，尽管创建成功，但是查询的时候依然会失败，当创建备份之后，新的core会自动复制索引。

转载于:https://my.oschina.net/u/2293326/blog/609862