solr 集群搭建

最新推荐文章于 2024-09-27 00:45:01 发布
最新推荐文章于 2024-09-27 00:45:01 发布
阅读量104 收藏
点赞数
文章标签： java 大数据 web.xml
原文链接：https://my.oschina.net/u/1985192/blog/291639
版权

Solr集群搭建

集群环境准备

操作系统： Centos 6.4

Java 环境： JDK版本１.７

Zookeeper 版本 3.4.5

Solrcloud  版本 4.7.1

Tomcat 7

服务器5台 ,ip 和 hostname 的修改

Ip  192.168.56.11    hostname master

Ip  192.168.56.12   hostname node1

Ip  192.168.56.13   hostname node2

Ip  192.168.56.14   hostname node3

Ip  192.168.56.15   hostname node4

 

zookeeper 集群的搭建

1）压zookeeper 安装包

 tar -zxvf zookeeper-3.4.5.tar.gz

2)进入zookeeper-3.4.5文件夹,创建data 和log

   创建目录并赋于写权限

   指定zookeeper的数据存放目录和日志目录

3)拷贝zookeeper配制文件zoo_sample.cfg

拷贝zookeeper配制文件zoo_sample.cfg并重命名zoo.cfg

cp /solrcloud/zookeeper-3.4.5/conf/zoo_sample.cfg  /solrcloud/zookerper-3.4.5/conf/zoo.cfg

4)修改zoo.cfg

  加入 dataDir=/solrcloud/zookeeper-3.4.5/data

        dataLogDir=/solrcloud/zookeeper-3.4.5/log

       server.1=192.168.56.11:2888:3888

       server.2=192.168.56.12:2888:3888

       server.3=192.168.56.13:2888:3888

       server.4=192.168.56.14:2888:3888

       server.5=192.168.56.15:2888:3888

zoo.cfg配制完后如下:

tickTime=2000

initLimit=10

syncLimit=5

dataDir=/solrcloud/zookeeper-3.4.5/data

dataLogDir=/solrcloud/zookeeper-3.4.5/log

clientPort=2181

server.1=192.168.56.11:2888:3888

server.2=192.168.56.12:2888:3888

server.3=192.168.56.13:2888:3888

server.4=192.168.56.14:2888:3888

server.5=192.168.56.15:2888:3888

5)进入data文件夹 建立对应的myid文件

 例如server.1=192.168.56.11 data文件夹下的myid文件内容为1

6)制zookeeper-3.4.5文件夹到其他机器

7）动zookeeper

进入bin

./zkServer.sh start

查看集群状态

./zkServer.sh status   刚启动可能会有错误，集群中其他节点一并起来后就正常了

 

SolrCloud配置

1)在solrcloud下新建solrhome，并赋于读写权限

2)将上传的solr.4.6.0压缩包解压缩,

       tar -zxvf solr-4.6.0.tgz

3)将solr.4.6.0/dist/solr-4.6.0.war 复制到/solrcloud/solrhome 并重命为solr.war

       cp /solrcloud/solr-4.6.0/dist/solr-4.6.0.war /solrcloud/solrhome/solr.war

4)将上传的tomcat解压缩

　　   tar -zxvf apache-tomcat-6.0.29.tar.gz

5)进入tomcat bin目录，启动tomcat

      cd /solrcloud/apache-tomcat-6.0.29/bin  进入bin目录

      ./startup.sh  启动tomcat  此时会在tomcat下的conf文件夹下多出一个目录Catalina

      cd /solrcloud/apache-tomcat-6.0.29/conf/Catalina/localhost

      新建solr.xml文件内容如下:

<?xml version="1.0" encoding="UTF-8" ?>

<Context docBase="/solrcloud/solrhome/solr.war" debug="0" crossContext="false" > 

   <Environment name="solr/home"

    type="java.lang.String"

    value="/solrcloud/solrhome"

    override="true" />

</Context>

    docBase="/solrcloud/solrhome/solr.war" 指定为solrcloud/solrhome下复制出来solr的war包

6)停tomcat 再次启动tomcat, webapps 下边多了解压出来的solr文件夹

进入solr/WEB-INF/ 下修改web.xml

  <!--

    <env-entry>

       <env-entry-name>solr/home</env-entry-name>

       <env-entry-value>/put/your/solr/home/here</env-entry-value>

       <env-entry-type>java.lang.String</env-entry-type>

    </env-entry>

   -->

 

 改为 :

<env-entry>

       <env-entry-name>solr/home</env-entry-name>

       <env-entry-value>/solrcloud/solrhome</env-entry-value>

       <env-entry-type>java.lang.String</env-entry-type>

    </env-entry>

7)将/solrcloud/solr-4.6.0/example/solr 文件夹下所有东西复制到 /solrcloud/solrhome

  cp  -r /solrcloud/solr-4.6.0/example/solr/*  /solrcloud/solrhome

8)复制solr-4.6.0/example/lib/ext下所有jar包到tomcat 的lib下

  cp /solrcloud/solr-4.6.0/example/lib/ext/*  /solrcloud/apache-tomcat-6.0.29/lib/

  复制 solr-4.6.0/example/resources/log4j.properties  到solr/WEB-INF/class

   如果没有class先创建class文件夹，并赋于写权限

  cp  /solrcloud/solr-4.6.0/example/resources/log4j.properties /solrcloud/apache-tomcat-6.0.29/webapps/solr/WEB-INF/class/

 

9)启动tomcat 访问 http://localhost:8080/solr 如图，至此单机版solr配制完成

  

10)配制集群

将zookeeper和tomcat关联

 

192.168.56.11台机修改tomcat 的 bin目录下catalina.sh文件在第二行加入

 

JAVA_OPTS="-Dbootstrap_confdir=/solrcloud/solrhome/collection1/conf -Dcollection.configName=myconf -DzkHost=192.168.56.11:2181,192.168.56.12:2181,192.168.56.13:2181,192.168.56.14:2181,192.168.56.15:2181,192.168.56.16:2181 -DnumShards=3"

 

 

192.168.56.12-16 , 5台机都修改tomcat 的 bin目录下catalina.sh文件在第二行加入

JAVA_OPTS="-DzkHost=192.168.56.11:2181,192.168.56.12:2181,192.168.56.13:2181,192.168.56.14:2181,192.168.56.15:2181,192.168.56.16:2181"

 

至此集群配制完毕

 创建config 并和 指定primaryconf连接

  • java -cp .:/opt/solr/tomcat/webapps/solr/WEB-INF/lib/* org.apache.solr.cloud.ZkCLI -cmd upconfig -zkhost netutel04:2181,netutel05:2181,netutel06:2181 -confdir /opt/solr/libType/collection/conf -confname libType

java -cp .:/opt/solr/tomcat/webapps/solr/WEB-INF/lib/* org.apache.solr.cloud.ZkCLI -cmd linkconfig -zkhost netutel04:2181,netutel05:2181,netutel06:2181 -collection libInfo -confname libType

创建集群

http://192.168.56.11:8080/solr/admin/collections?action=CREATE&name=libInfo &numShards=3&replicationFactor=3

 

 

任何一个ip均可访问

http://192.168.56.11:8080/solr/#/~cloud

 


转载于:https://my.oschina.net/u/1985192/blog/291639

chihongsheng5034
关注
solr cloud 学习
百岁
05-12 250
启动solr cloud ，启动到一半发现抛出这样的异常：ZkController.java第1087行代码 "Could not find configName for collection " + collection + " found:" + configNames        原因在于solr cloud 集群在启动的过程中需要加载zookeeper中的 collection...
Solr集群搭建
Lewis的博客
11-24 932
Solr集群搭建 1. Solr集群 1.1 什么是SolrCloud SolrCloud(solr 云)是Solr提供的分布式搜索方案，当你需要大规模，容错，分布式索引和检索能力时使用 SolrCloud。当一个系统的索引数据量少的时候是不需要使用SolrCloud的，当索引量很大，搜索请求并发很高，这时需要使用SolrCloud来满足这些需求。 SolrCloud是基于Solr和Zookeeper的分布式搜索方案，它的主要思想是使用Zookeeper作为集群的配置信息中心。 它有几个特色功能： 集
solr集群搭建
Sakuraaaaaaa的博客
07-05 423
solr集群solr集群solr集群原理solr集群搭建 solr集群 solr集群原理 solr集群搭建 一、创建solr-cluster目录 在/usr/local/src下创建solr-cluster目录 二、copy 单机版的solr到该目录下 copy单机版的solr到该目录下，即：copy tomcat到该目录下 三、copy solr home到该目录下 四、删除solr home下的数据 五、修改tomcat下solr的home 六、zookeeper管理配置文件 由于zooke
大数据之 Solr 集群搭建
JIE的博客 --- moon_coder
04-07 870
Solr 是一个高性能，采用 Java 开发，基于 Lucene 的全文搜索服务器。同时对其进行了扩展，提供了比 Lucene 更为丰富的查询语言，同时实现了可配置、可扩展并对查询性能进行了优化，并且提供了一个完善的功能管理界面，是一款非常优秀的全文搜索引擎。它对外提供类似于 Web-service 的 API 接口。用户可以通过 HTTP 请求，向搜索引擎服务器提交一定格式的 XML 文件，生成索引；也可以通过 Http Get 操作提出查找请求，并得到 XML 格式的返回结果。
solr集群的搭建
weixin_41758407的博客
04-11 322
solr集群两步骤（可能有遗漏，欢迎提出）： 一、zookeeper集群 上传zookeeper安装包，解压，重命名zookeeper-1 把conf文件夹下的zoo_sample.cfg改名为zoo.cfg 在解压包下创建data目录和logs目录 修改配置文件zoo.cfg,把dataDir的值改为data目录的路径，再添加dataLogDir=logs的路径，clientPort=2...
zookeeper+solr集群搭建
嘻哈王大头
04-19 1059
一、整体拓扑说明 规划3个zookeeper做zookeeper集群 规划4个solr做solr集群 二、准备工作 1.版本选择 亲测得到的结论是：jdk使用1.8及以上版本，tomcat使用8及以上版本，否则会各种报错。 软件 版本 zookeeper 3.4.9 solr 7.4.0 jdk jdk-8u101-linux-x64.tar.gz tomcat 8....
centos solr 集群搭建
weixin_30284355的博客
03-28 103
一、什么是 SolrCloud 　　SolrCloud(solr 云)是Solr提供的分布式搜索方案，当你需要大规模，容错，分布式索引和检索能力时使用 SolrCloud。当一个系统的索引数据量少的时候是不需要使用SolrCloud 的，当索引量很大，搜索请求并发很高，这时需要使用 SolrCloud 来满足这些需求。 　　SolrCloud是基于Solr和Zookeeper的...
solr 集群搭建1
08-04
Solr集群搭建是构建大规模、高可用搜索服务的基础。在这个过程中，我们将主要关注以下几个关键步骤和概念： 1. **Solr的基本介绍**：Solr是一款开源的企业级全文搜索引擎，由Apache软件基金会开发，用于处理和索引...
solr集群搭建文档
07-07
Solr集群搭建是一个复杂但重要的任务，它涉及到分布式搜索引擎的配置和管理，使得大量数据能够被高效、快速地检索。Solr是Apache软件基金会的一个开源项目，它提供了一个高性能、可扩展的全文检索平台，广泛应用于...
Solr集群搭建,Solr提供的分布式搜索方案
10-26
### Solr集群搭建与SolrCloud分布式搜索方案详解 #### 一、SolrCloud概述 SolrCloud 是 Apache Solr 提供的一种分布式搜索解决方案。它主要用于处理大规模数据集的索引和检索工作，并具备容错性和分布式特性。当...
Spring Boot 学习和使用
cesske的博客
09-24 1060
Spring Boot是一款开源的Java Web应用框架，旨在简化Spring应用的初始搭建以及开发过程。Spring Boot通过整合Spring技术栈中的诸多关键组件，为开发者提供了一种快速、简便的Spring应用开发方式。它遵循“约定优于配置”的原则，通过自动配置、起步依赖和内置的Servlet容器，极大地简化了传统Spring应用的配置和部署过程。Spring Boot通过其自动化配置、起步依赖、内嵌服务器等特性，极大地简化了Spring应用的开发和部署过程。
工厂模式的介绍及实现
户伟伟的博客
09-25 109
工厂模式（Factory Pattern）是一种创建型设计模式，提供了一种创建对象的接口，而无需显式指定对象的具体类。在这种模式中，我们通过定义一个工厂类，专门负责生产各种类型的对象，这样我们可以避免直接在代码中实例化具体类，使代码更具扩展性、灵活性和维护性。解耦：客户端代码与具体的类解耦，避免了对象创建逻辑的重复。简化对象创建：通过工厂统一管理对象的创建逻辑，使代码更清晰易懂。扩展性强：新增类时，只需在工厂中增加创建逻辑，而不必修改现有的业务代码。
基于Hive和Hadoop的哔哩哔哩网站分析系统
最新发布
图南的博客
09-27 350
本项目是一个基于大数据技术的哔哩哔哩平台分析系统，旨在为用户提供全面的哔哩哔哩视频数据和深入的用户行为分析。系统采用 Hadoop 平台进行大规模数据存储和处理，利用 MapReduce 进行数据分析和处理，通过 Sqoop 实现数据的导入导出，以 Spark 为核心进行高效的数据处理。整个系统结合了大数据处理技术，为用户提供精准的内容推荐和深入的用户兴趣分析，帮助平台更好地了解视频趋势和用户需求。
智能BI平台项目
2302_79400545的博客
09-22 237
BI商业智能：数据可视化、报表可视化系统。
基于JavaWeb开发的Java+SpringMvc+vue+element实现驾校管理系统详细设计
央顺科技官方博客
09-24 876
机遇与挑战始终并存。在开放的互联网平台面前，驾校预约管理系统的信息管理面临着巨大的挑战。传统的管理模式局限于简单数据的管理，无法适应不断变化的市场格局。在早期阶段，在将计算机技术和网络技术融入驾校预约管理系统数据管理方法之前，所有管理方式都通过人工操作完成了管理信息的。系统管理也都将通过计算机进行整体智能化操作，对于驾校预约管理系统所牵扯的管理及数据保存都是非常多的，举例像所有详细信息包括，管理员；首页、个人中心、学员管理、驾校教练管理、驾校车辆管理、预约管理、取消预约管理、驾校公告管理、系统管理。
Java Alibaba Druid 数据库连接池
miracle的专栏
09-24 734
在Java开发中，数据库连接池是性能优化的重要一环。而作为一款强大的数据库连接池解决方案，凭借其和对多种数据库的支持，成为了许多企业级应用的首选。本篇文章将介绍Druid的核心特性，并结合不同数据库的实际用法。
JPA+Thymeleaf增删改查
y050505的博客
09-25 458
在使用JPA（Java Persistence API）和Thymeleaf作为模板引擎进行Web开发时，实现增删改查（CRUD）操作是一个常见的需求。下面，我将简要介绍如何使用Spring Boot框架结合JPA和Thymeleaf来实现这一功能。
一分钟掌握 Java11 新特性
java那些事儿
09-24 602
Java 11 的新特性使得语言更加现代化，增强了代码的可读性和可维护性，同时改善了性能和开发体验。无论是在日常编程中，还是在处理复杂的应用程序时，这些新特性都能够为开发者提供更大的便利。
Solr集群搭建教程：从基础到实践
"solr集群搭建1" Solr是一款流行的开源搜索引擎，它提供了高效、可扩展的全文检索、分析和分布式存储功能。在本资源中，主要介绍了如何搭建一个Solr集群，以及在这个过程中涉及到的关键组件——Zookeeper。 首先，...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值