SolrCloud路由学习总结

最新推荐文章于 2020-01-21 22:00:04 发布
最新推荐文章于 2020-01-21 22:00:04 发布
阅读量914 收藏
点赞数
分类专栏： 技术学习
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/tanxinliang/article/details/78727038
版权
本文介绍了SolrCloud中的两种路由算法：compositeId和implicit。compositeId采用一致性哈希，不可扩展shard，而implicit允许指定索引所在的shard，但不均匀分布。在实际应用中，可以通过修改clusterstate.json将implicit转换为compositeId策略。
摘要由CSDN通过智能技术生成

SolrCloud提供了两种路由算法：compositeId、implicit。 

          在创建Collection时，需要通过router.name指定路由策略，默认为compositeId路由。

compositeId

该路由为一致性哈希路由，shards的哈希范围从80000000~7fffffff。初始创建collection是必须指定 numShards，compositeId路由算法根据numShards的个数，计算出每个shard的哈希范围，因此路由策略不可以扩展shard。


需要注意的是：使用compositeId路由创建collection，指定numShards后，不可扩展Shard，即使勉强增加Shard，新建索引也不会落在该Shard上。查看clusterst

最低0.47元/天 解锁文章
tanxinliang
关注
专栏目录
solrCloud中的路由策略：DocRouter、CompositeIdRouter、ImplicitDocRouter
iteye_14612的博客
03-15 1039
sorlCloud是分片的，那么如何决定一个document应该到哪一个分片呢？负责解决这个问题的东西就是DocRouter，翻译过来是doc路由器。在创建一个集合（collection）的时候，我们必须要给集合置顶一个docRouter，solr中默认是使用基于hash策略的docRouter（CompositeIdRouter），当然还有其他的Router，这个博客就要说这些。 我们先看...
solrCloud中CompsiteId路由策略的collection的操作分析
iteye_14612的博客
03-06 360
       solrCloud有多个shard，一个shard有一个或者多个replica，那么再solrj发起添加documnet（这里称作update请求）或者是查询（这里叫做query请求）的时候，是如何向最终的各个solr的不同的shard的replica发送的请求呢？我看了看solrj中的CloudSolrServer的处理请求的源码以及solr服务端的部分源码，终于弄懂了，几个笔...
SolrCloud使用implict路由规则创建Shard
10年职场两茫茫，35岁凄凉奈若何
03-07 3022
SolrCloud有两种创建Shard的路由规则：compositeId和implict。 1.使用http://localhost:8983/solr/admin/collections?action=CREATE&name=collection&numShards=3&replicationFactor=2创建collection 2. 使用以下命令增加shard，http://local
Solr构建分布式搜索+面试题讲解
07-04
本课程共分26节，内容包括solr概述，文档的导入删除和修改，修改大启动时间和默认时区，主要配置文件详解，solrcore详解与使用，mysql数据导入索引库，定时任务，中文分词，solrcloud创建和使用，路由规则，负载均衡，leader选举与容错，solrj操作solr，自动提交与软提交，函数简介，开启身份验证，springmvc集成等。
SolrCloud 5.0 路由、Collection创建与数据迁移
工作室
06-28 5080
Solr4.0版本后引入了solrcloud，用于扩展Solr的索引与搜索能力，同时提高Solr的容错能力与高可用。 在SolrCloud中，有几个比较重要的知识点：SolrCloud中collection、shard、core、node相关概念；SolrCould路由策略；创建Collection；和如何进行数据迁移。 通过学习研究，总结SolrCloud学习中的心得，较为详细地介绍了上述几个知识点。
大数据入门没有头绪？这份总结的大数据学习路线希望你用得着
qq_43958467的博客
08-22 598
1、为什么要学习大数据？ 1.1，门槛 它比 Java 高一点，因为除了对数据库的操作之外，要学习大数据生态的东西，需要会分布式、数仓、中间件等知识。它比机器学习低一些，不需要你会很多的机器学习算法和数学知识，而像机器学习算法和数学知识是需要长时间的磨练和沉淀，所以做这块的研究生和博士居多。 无论是哪个学校的计算机专业，Java、数据、C、C++什么的都会接触到，但是大数据呢？第一...
2020年大数据学习路线指南（最全知识点总结）零基础入门大数据学习必备系统教程和学习目录
大数据入门零基础教程学习教学
01-21 3948
大数据是对海量数据进行存储、计算、统计、分析处理的一系列处理手段，处理的数据量通常是TB级，甚至是PB或EB级的数据，这是传统数据处理手段所无法完成的，其涉及的技术有分布式计算、高并发处理、高可用处理、集群、实时性计算等，汇集了当前IT领域热门流行的IT技术。 系统的学习知识点我 大数据入门，需要学习以下这些知识点： 先附上一张自己总结的学习线路图 1、Java编程技...
Solr学习
08-07
总结，SolrCloud为大规模数据的全文搜索提供了高效、可靠的解决方案。了解和掌握SolrCloud的架构和工作原理对于构建高性能、高可用的搜索引擎至关重要。通过不断学习和实践，我们可以更好地利用SolrCloud解决实际...
SolrCloud之Sharding路由介绍
三劫散仙
07-19 296
[img]http://dl2.iteye.com/upload/attachment/0118/7931/33d59663-e9ab-3923-91d0-414f5258ea49.png[/img] [size=medium] 在Solr4.4之后，Solr提供了SolrCloud分布式集群的模式，它带来的主要好处是： （1）大数据量下更高的性能 （2）更好扩展性 （3...
solrcloud document路由
weixin_33859504的博客
07-12 161
2019独角兽企业重金招聘Python工程师标准>>> ...
solr亿万级索引优化实践（二）
cyony的博客
03-14 5100
      通过上一篇的几个优化方案，我们的索引速度其实已经能得到很大的提升了，从最初的平均每台机器7000TPS/S，大概能到2.5WTPS/S。但是这个速度远远还达不到我们的需求，最关键的时候随着节点数增加并不能速度并不能线性增加，然后又做了许多其他方面的尝试，其中路由方式是比较大的一个方向，本篇将重点介绍这一方案。            前面介绍了solr在创建索引库的时候可以指定多个sha...
Solr4.8.0源码分析(27)之ImplicitDocRouter和CompositeIdRou
03-17 114
同样在公司工作中发现了一个现象， 1.我用/solr/admin/collections?action=CREATE&name=collection&numShards=3&replicationFactor=2创建collection 2. delete其中的一个...
docker-compose安装和使用
热门推荐
tanxinliang的专栏
12-06 1万+
1、安装（直接安装网络太慢，使用python安装） yum -y install epel-release    安装python pip依赖 vi /etc/yum.repos.d/epel.repo    修改依赖repo，使用base的地址 yum -y install python-pip    安装python pip pip install docker-compo
Cbase多数据中心扩展、切换及监控搭建
tanxinliang的专栏
01-19 2696
一、版本要求新机器的cbase版本要与老机器版本一致二、配置1、首先把老的配置直接拷贝到新机器的conf目录下2、seeds，两个数据中心的节点都要有至少一个3、endpoint_snitch，改成多数据中心的策略，GossipingPropertyFileSnitch4、auto_bootstrap，新机器要改成false，没有则手动添加，防止启动就同步数据5、配置新机器的datacenter名
Solr查询
tanxinliang的专栏
12-06 1760
篇一：solr查询需求转换 solr查询需求转换 Solr的检索运算符 1. “:” 指定字段查指定值，如返回所有值*:* 2. “?” 表示单个任意字符的通配 3. “*” 表示多个任意字符的通配（不能在检索的项开始使用*或者?符号） 4. “~” 表示模糊检索，如检索拼写类似于”roam”的项这样写：roam~将找到形如foam和roams的单词；roam~0.8，检索返回相似度在
docker私有仓库和监控及报警环境搭建
tanxinliang的专栏
12-06 1246
一、私有仓库搭建（registry）以172.16.113.12仓库为例 1、下载registry镜像 docker pull registry 2、运行镜像 docker run -d -p 5000:5000 -v /home/registry/:/var/lib/registry/ --name registry registry 3、push镜像 镜像的标签改成仓库地址 
docker扩容
tanxinliang的专栏
12-06 541
For a loop-lvm configuration docker info获取docker基本信息： $ sudo docker info Containers: 0 Running: 0 Paused: 0 Stopped: 0 Images: 2 Server Version: 1.11.0 Storage Driver: devicemapper Pool Name:
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值