Solr的使用

最新推荐文章于 2024-02-07 00:13:41 发布
最新推荐文章于 2024-02-07 00:13:41 发布
阅读量260 收藏
点赞数 2
分类专栏： 项目阶段
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq1076376640/article/details/100125485
版权

Solr简介：

基于Lucene的java搜索引擎服务器程序
输出多种格式（XML/XSLT和JSON等）建立索引，维护索引
数据检索（全文检索，高亮显示，精确搜索）

Solr下载

下载地址：
https://archive.apache.org/dist/lucene/solr/

solr依赖环境
JDK TOMCAT

Solr的服务器搭建

解压下载的solr的zip包，目录如下 ：

在这里插入图片描述

将dist\solr-4.9.1.war文件复制到tomcat的webapps目录下，并将文件命名为solr.war ：
在这里插入图片描述
在这里插入图片描述
复制 solr解压包下example\lib\ext 下所有的jar 到tomcat 的lib目录下 ：
在这里插入图片描述
在计算机本地新建一个文件夹solr_home（当然你可以随便起名字）, 然后复制
solr-4.9.1\example\solr 下的所有文件到 solr_home下 ：
在这里插入图片描述
启动tomcat，待tomcat启动成功后，关闭tomcat。打开tomcat的webapps目录。注意，
此时solr的war包以及被解压成solr文件夹。删除tomcat 的webapps目录下的solr的war
包，保留solr文件夹。

修改配置文件 apache-tomcat-7.0.67\webapps\solr\WEB-INF\web.xml

<env-entry> 
<env-entry-name>solr/home</env-entry-name>  
<env-entry-value>E:\solr_home</env-entry-value> 
<env-entry-type>java.lang.String</env-entry-type> 
</env-entry>

访问solr(http://localhost:端口号/solr/),如出现以下界面则solr部署成功。
在这里插入图片描述

新建数据配置 core

新建core(solr中把配置的每一个模块都叫core),在solr_home目录下，拷贝collection1文件夹，并起名为test。打开test文件夹，修改core.properties文件,将name修改为test
在这里插入图片描述在这里插入图片描述
重新启动tomcat，并访问solr,如出现以下界面,则表示新建test core成功。
在这里插入图片描述

新增数据库配置

到目前为止，我们已经完成了solr的基础配置，并且创建了test core，接下来我们需要把数
据的数据和搜索引擎连接起来，让搜索引擎可以读取数据库的数据。

  1. 拷贝数据库连接jar包(mysql-connector-java-5.1.18.jar)到tomcat的lib目录
  2. 以创建test core的方式新建hotel core
  3. 打开hotel的conf文件夹中的solrconfig.xml文件，在requestHandler name="/select"
    class=“solr.SearchHandler”>前面上加上一个dataimport的处理的Handler
<requestHandler name="/dataimport"  class="org.apache.solr.handler.dataimport.DataImportHandler"> 
<lst name="defaults"> 
         <str name="config">data-config.xml</str> 
</lst> 
</requestHandler>

在hotel的的conf文件夹下并新建data-config.xml文件，配置如下

<?xml version="1.0" encoding="UTF-8"?> 
<dataConfig> 
<dataSource type="JdbcDataSource" driver="com.mysql.jdbc.Driver" 
url="jdbc:mysql://127.0.0.1:3306/newsdb" user="root" password="123456" /> 
<document name="hotel_doc"> 
<entity name="hotel" pk="id"  query="SELECT * FROM news_user"> 
<field column="id" name="id"/> 
<field column="userName" name="userName"/> 
<field column="passWord" name="passWord"/> 
</entity> 
</document> 
</dataConfig>

打开hotel的conf目录下的schema.xml文件
（1）保留_version_ 这个field 如下：（删除其它所有field,dynamicField,copyField标签）
在这里插入图片描述
保留uniqueKey标签如下：
在这里插入图片描述

（2）添加索引字段：这里每个field的name要和data-config.xml里的entity的field的name一样，一一对应。
在这里插入图片描述

   <field name="_version_" type="long" indexed="true" stored="true"/>
    <field name="id" type="string" indexed="true" stored="false"/>
 <field name="userName" type="string" indexed="true" stored="false"/>
 <field name="passWord" type="string" indexed="true" stored="false"/>
 
 <uniqueKey>id</uniqueKey> 
<field name="text" type="text_general" indexed="true" stored="false" multiValued="true"/>

将导入数据的JAR包拷贝到webapps/solr/WEB-INF/lib的lib目录下
在这里插入图片描述
启动Tomcat，执行数据导入。

如果报错：
在这里插入图片描述
在这里插入图片描述
解决：
可能是把solr schema.xml的id设置成了int类型。本身并没有错，但solr启动会扫描cinf目录下的elevate.xml文件，这个文件中定义的id值是MA147LL/A，所以会出现SolrException异常： Invalid Number: MA147LL/A。
打开solr中conf的elevate.xml:
在这里插入图片描述
注解掉：

 <query text="ipod">
   <doc id="MA147LL/A" />  <!-- put the actual ipod at the top -->
   <doc id="IW-02" exclude="true" /> <!-- exclude this cable -->
 </query>

在这里插入图片描述
成功显示的页面：
在这里插入图片描述
执行查询操作：
在这里插入图片描述

配置增量更新

配置solr的增量更新，即定时将数据库的数据导入到solr中。

将apache-solr-dataimports-cheduler.jar包添加至solr的\solr\WEB-INF\lib目录下

注：apachesolrdataimportscheduler.jar的jar包是apache提供的用于增量更新的jar包，但
apache提供的原jar包中，代码有BUG。该bug在教学资料提供的jar包中已经被修复，具体可参
考提供的apachesolrdataimportscheduler的源码，在此不再赘述。

增加增量更新配置文件,在solr_home文件夹下新建conf文件夹，并新建名为dataimport.properties的配置文件，配置如下：

################################################# 
#                                             							 # 
#       dataimport scheduler properties      				 # 
#                                            							 # 
################################################# 

#  to sync or not to sync 
#  1 - active; anything else - inactive 
syncEnabled=1 
#  which cores to schedule 
#  in a multi-core environment you can decide which cores you want syncronized 
#  leave empty or comment it out if using single-core deployment 
syncCores=test,hotel 
#  solr server name or IP address 
#  [defaults to localhost if empty] 
server=localhost 
#  solr server port 
#  [defaults to 80 if empty] 
port=8080 
#  application name/context 
#  [defaults to current ServletContextListener's context (app) name] 
webapp=solr 
#  增量索引的参数 
#  URL params [mandatory] 
#  remainder of URL 
params=/dataimport?command=delta-import&clean=false&commit=true 
#  重做增量索引的时间间隔 
#  schedule interval 
#  number of minutes between two runs 
#  [defaults to 30 if empty] 
interval=1 
#  重做全量索引的时间间隔，单位分钟，默认7200，即5天; 
#  为空,为0,或者注释掉:表示永不重做索引 
#reBuildIndexInterval=7200 
#  重做索引的参数 
reBuildIndexParams=/dataimport?command=full-import&clean=true&commit=true 
#  重做索引时间间隔的计时开始时间，第一次真正执行的时间=reBuildIndexBeginTime+reBuildIndexInterval*60*1000；   
#  两种格式：2012-04-11 03:10:00 或者  03:10:00，后一种会自动补全日期部分为服务启动时的
日期   
reBuildIndexBeginTime=03:10:00

新增增量更新数据的监听器，在solr的web.xml中加入以下监听器

<listener>
	<listener-class>
		org.apache.solr.handler.dataimport.scheduler.ApplicationListener
	</listener-class>
</listener>

修改导入数据查询SQL
在这里插入图片描述
说明：deltaQuery是根据dataimport.properties配置文件中的更新时间，从数据库中查询出，修
改日期在最后一次更新日期之后的酒店数据，并记录其id，而deltaImportQuery的目的是将
deltaQuery查询出的数据导入到solr中

<?xml version="1.0" encoding="UTF-8"?> 
<dataConfig> 
 <dataSource type="JdbcDataSource" driver="com.mysql.jdbc.Driver" 
 url="jdbc:mysql://127.0.0.1:3306/newsdb" user="root" password="123456" /> 
 
  <document name="news"> 
    <entity name="news_user" pk="id"  query="SELECT   id,userName,passWord  FROM news_user"
    
      deltaImportQuery="SELECT   id,userName,passWord  FROM news_user  where  id='${dih.delta.id}'"
      deltaQuery="SELECT id as id FROM news_user where  modifyDate > '${dih.last_index_time}'"> 
      	
      
      <field column="id" name="id"/> 
      <field column="userName" name="userName"/> 
      <field column="passWord" name="passWord"/> 
    </entity> 
  </document> 
</dataConfig>

启动Tomcat进行测试 ：
正常导入，还未修改在这里插入图片描述
数据库修改
原：
在这里插入图片描述
修改后：
在这里插入图片描述
1分钟后查询数据，确定数据是否更新 成功！！
在这里插入图片描述

配置分词器

分词器: 是从用户输入的一段文本中提取关键词，用于其它业务操作

常见的 JAVA 分词器:
word 分词器、
Ansj 分词器、
Stanford 分词器、
IKAnalyzer分词器

我们这里使用：IKAnalyzer 分词器 ，solr 如果是 3.x 版本的用 IKAnalyzer2012_u6.zip 如果是 4.x 版本的用 IK Analyzer 2012FF_hf1.zip，一定要对应上，要不然会配置失败。

IK 分词器下载地址: https://download.csdn.net/download/shangyishang/10803443
百度云网盘：链接: https://pan.baidu.com/s/1H742jeLLZQRh6tYoO-zkTw 提取码: mea3

首先，下载IKAnalyzer 。
将ik的所有jar文件 拷贝到 webapps\solr\WEB-INF\lib 目录下
在这里插入图片描述
在webapps\solr\WEB-INF\下新建classes文件夹，将\solr\WEB-INF\lib下的IKAnalyzer.cfg.xml和stopword.dic
文件拷贝到改文件夹下
在这里插入图片描述
在 solr_home\test\conf\schema.xml 增加如下配置：
对分词器类型进行配置

<fieldType name="text_ik" class="solr.TextField">
		 <analyzer type="index" isMaxWordLength="false" class="org.wltea.analyzer.lucene.IKAnalyzer"/>    
 		 <analyzer type="query" isMaxWordLength="true" class="org.wltea.analyzer.lucene.IKAnalyzer"/> 
 </fieldType>

修改solr_home\hotel\conf\schema.xml将userName和passWord指定成为text_ik类型
在这里插入图片描述
重启Tomcat，访问solr测试分词器 成功！
在这里插入图片描述

Solr查询语法

在这里插入图片描述
1.q关键字查询
2.fq对q关键字的过滤查询
3.sort排序 id asc正序 ； id desc倒序
4.start从那个位置开始，rows显示几条数据
5.fl对字段进行过滤；列：只显示id和userName字段：id userName
6.wt数据的返回类型

Solr多字段的匹配

对多个字段进行检索

步骤：在\solr_home\test\conf\schema.xml下新建指定的multiValued=“true”
配置copyField如下：
在这里插入图片描述
测试：
在这里插入图片描述

齁甜的柑茶
关注
  • 2
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
Solr技术分析及项目配置应用
一笑奈何
05-30 1780
solr 开发指南1.1.1 官网介绍Solr是一个基于Lucene的Java搜索引擎服务器。Solr 提供了层面搜索、命中醒目显示并且支持多种输出格式（包括 XML/XSLT 和 JSON 格式）。它易于安装和配置，而且附带了一个基于 HTTP 的管理界面。Solr已经在众多大型的网站中使用，较为成熟和稳定。Solr 包装并扩展了 Lucene，所以Solr的基本上沿用了Lucene的相关术语。...
Solr使用指南
11-18
Solr使用指南，操作步骤很详细
SOLR自定义实现增量更新
weixin_43881950的博客
08-30 344
SOLR自定义实现增量更新 为了在SOLR定制过程中，更好的了解SOLR使用方式，个人决定对solr增量更新使用自定义方案，即整合SOLR源码实现增量更新。 方式： 1、引入第三方框架quatz 理由：通过引入该框架实现实例增量数据更新的在线维护，并尽可能的保证各个增量实例更新时序的独立性。 最重要的是该框架操作简单，方便。 2、SOLR与quzta整合 在SOLR项目中引入，quatz-*.j...
Solr 学习心得
qq_36367121的博客
11-18 266
Solr 学习心得 前言 感谢关注本文，希望能为你带来帮助。不足之处，多多指出。本文的初衷是互相学习与进步。 本文主要针对7.7.2版本进行讲解，基于windows环境进行操作。目前最新版本是8.3.0， 于今年11月3日发布。 1.Solr介绍 Solr是一款采用java 语言编写，基于Apache Lucene（非常优秀的开源搜索引擎）开发的搜索WEB服务器，面向与企业级的应用，支持XM...
SolrException Invalid Number MA147LL/A或IW-02
一叶知春秋
12-05 1423
基于solr-4.10.3部署启动没问题，所有自己修改schema.xml部署并自定义type类型，但是启动时候报错 SolrException: Invalid Number: MA147LL/A 首先爆的是这个， 修改的schema.xml的id类型使用long.但是collection1下面的elevate.xml使用的id是MA147LL/A这个是字符串，所以出问题。 解决办
solr查询空值、null、不存在的字段的方法--转载
有一颗前端心的后端开发小哥
10-10 770
solr查询空值、null、不存在的字段的方法--转载 正常情况下我们都是按有值的方式去搜索，但是有时候有一些字段为null,solr中就没有存储进去，我们怎么获取这个字段不存在为条件的搜索结果了，我们只需要在搜索字段前加上负号，如下图 转载链接 https://blog.csdn.net/fay462298322/article/details/53081908 ...
Solr学习（一）-基本介绍，安装配置及运用4.9.1版本[亲测]
丨Anna丨的博客
05-16 2525
Solr学习（一）-基本介绍，安装配置及运用4.9.1版本[亲测] 什么是Solr solr是一个java搜索引擎服务器（是一套war程序），内部集成了Lucene(apache提供的一些对搜索引擎做支持的jar包)。 搜索引擎运行原理 搜索引擎首先导入数据库数据，用户在操作时查询所搜引擎，搜索引擎查询导入的数据将数据返回给用户。具体流程如图。在这里涉及定时导入数据库原始...
Solr5.5使用schema.xml
fish的专栏
05-14 4755
与之前版本不同，Solr5.5中默认不再使用schema.xml, 取而代之的是Managed Schema，此种方式必须通过Schema API的方式进行管理，不太方便。现在改为传统的schema.xml的配置文件方式。 以下是简介： “ The schemaFactory option in solrconfig.xml controls whether the Schema shoul
调用solr查询，将结果转为实体类，属性为null的情况
weixin_42245133的博客
04-07 470
调用solr查询，将结果转为实体类，属性为null的情况 在实体类的属性上加上solr的注解 @Field
solr id非String报错的解决方法
gcno93的博客
06-05 1466
HTTP Status 500 - {msg=SolrCore 'collection1' is not available due to init failure: Error initializing QueryElevationComponent.,trace=org.apache.solr.common.SolrException: SolrCore 'collection1' is no...
solr使用过程中遇到的一些问题
段宜恩的博客
03-08 1万+
1.solr部署到tomcat报错 com.sun.org.apache.xerces.internal.impl.io.MalformedByteSequenceException: 1 字节的 UTF-8 序列的字节 1 无效。  有可能是由于上面的web.xml中写了中文的注释 2.对表进行查询时 http://localhost:8080/solr/db/dataimport
solr使用指南1
08-04
1、环境要求 2、启动： 3、建立一个简单实例： 4、怎么进行搜索 1、导入smartcn的jar包 2、配置分词器 3、 效果 1、导入相关jar包 2、配置
solr使用和原理
12-07
solr使用和原理 简单明了的介绍了solr的使用和原理，及其部署方式，适合初学者第一次部署
solr使用教程结合taotao项目的search模块1
08-08
solr使用教程结合taotao项目的search模块1
Solr的基本使用
01-27
schema.xml，在SolrCore的conf目录下，它是Solr数据表配置文件，它定义了加入索引的数据的数据类型的。主要包括FieldTypes、Fields和其他的一些缺省设置。...通过使用solr查询要看出返回给客户端是数组：Field
配置solr增量更新
qq_41622603的博客
01-08 341
增量更新：根据某一字段得值，动态导入更新数据 配置增量更新： 第一步：导入增量更新jar包 把apache-solr-dataimportscheduler.src放到tomcat的solr目录下的lib目录下 jar包链接：//download.csdn.net/download/qq_41622603/12088202 第二步：配置增量更新文件 在solr_home...
Solr 全量更新和增量更新 配置方式
最新发布
qq_30294911的博客
02-07 894
deltaImportQuery 指定的sql要求我们将满足PK的数据进行填充，需要配置在FieId中出现的属性，其作用和query类似，只不过该作用是将前面两个deltaQuery、deletedPkQuery过滤后进行了一次封装，以更新部分需更新的记录所对应的Solr的数据库索引。基于项目的特殊性，本项目将所有的文本类型记录的表全部读取进入Solr进行管理，但因文本记录的表比较多和复杂，导致了后面在使用solr自带功能增量更新时出现了问题。该配置在使用全量更新full-import显得尤为的突出；
【solr专题之三】Solr常见异常
apple01010105的博客
07-19 490
1、RemoteSolrException:Expected mime type application/octet-stream but got text/html 现象： SLF4J: Failed to load class "org.slf4j.impl.StaticLoggerBinder". SLF4J: Defaulting to no-operat...
【问题处理】ORA-01722: invalid number （类型隐式转换）
热门推荐
haiross的专栏
10-15 11万+
Oracle报ORA-01722错误的排查经验 最近开发的一个C++程序中，通过OCI访问数据库，在某个查询的时候，报ORA-01722错误。Oracle关于1722错误的描述是这样的：ORA-01722: invalid number（无效数字）。 刚开始排查SQL语句是否有问题，发现同样的SQL语句在PL/SQL dev中执行不会报错。 经过多次排
solr5.5.2使用说明
12-21
以下是solr5.5.2的使用说明： 1. 在Windows环境下配置JDK1.7或更高版本。 2. 下载solr-5.5.2并解压缩。 3. 打开命令提示符，进入solr-5.5.2/bin目录。 4. 创建一个新的solr集合： ```shell solr create_...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值