Solr实现全文检索

1.Solr是什么？

Solr 是Apache下的一个顶级开源项目，采用Java开发，它是基于Lucene的全文搜索服务器。Solr提供了比Lucene更为丰富的查询语言，同时实现了可配置、可扩展，并对索引、搜索性能进行了优化。 Solr可以独立运行，运行在Jetty、Tomcat等这些Servlet容器中，Solr 索引的实现方法很简单，用 POST 方法向 Solr 服务器发送一个描述 Field 及其内容的 XML 文档，Solr根据xml文档添加、删除、更新索引 。Solr 搜索只需要发送 HTTP GET 请求，然后对 Solr 返回Xml、json等格式的查询结果进行解析，组织页面布局。Solr不提供构建UI的功能，Solr提供了一个管理界面，通过管理界面可以查询Solr的配置和运行情况。

2.Solr的安装及配置

从Solr官方网站（http://lucene.apache.org/solr/ ）下载Solr4.10.3，根据Solr的运行环境，Linux下需要下载lucene-4.10.3.tgz，windows下需要下载lucene-4.10.3.zip。
Solr使用指南可参考：https://wiki.apache.org/solr/FrontPage。

3.文件说明

bin：solr的运行脚本
contrib：solr的一些贡献软件/插件，用于增强solr的功能。
dist：该目录包含build过程中产生的war和jar文件，以及相关的依赖文件。
docs：solr的API文档
example：solr工程的例子目录：
– example/solr：该目录是一个包含了默认配置信息的Solr的Core目录。
– example/multicore：该目录包含了在Solr的multicore中设置的多个Core目录。
– example/webapps： 该目录中包括一个solr.war，该war可作为solr的运行实例工程。
licenses：solr相关的一些许可信息

4.安装环境

solr 需要运行在一个Servlet容器中，Solr4.10.3要求jdk使用1.7以上，Solr默认提供Jetty（java写的Servlet容器），本教程使用Tocmat作为Servlet容器，环境如下：

Solr：Solr4.10.3
Jdk：jdk1.7.0_72
Tomcat：apache-tomcat-7.0.53

5.安装步骤

1.创建文件夹

[root@localhost /]# mkdir /usr/local/solr/

2.将Tomcat解压后的文件放进solr文件夹

[root@localhost /]# cp apache-tomcat-7.0.85 /usr/local/solr/tomcat -r

3.将solr压缩包上传服务器并解压
4.把/solr-4.10.3/dist/solr-4.10.3.war包部署到tomcat下。并改名为solr.war

[root@localhost dist]# cp solr-4.10.3.war /usr/local/solr/tomcat/webapps/solr.war
[root@localhost dist]# cd /usr/local/solr/tomcat/webapps/

5.解压war包。启动tomcat自动解压。关闭tomcat。删除solr.war.

[root@localhost bin]# ./startup.sh
[root@localhost bin]# ./shutdown.sh
[root@localhost bin]# cd ..
[root@localhost tomcat]# cd webapps/

6.把/solr-4.10.3/example/lib/ext 目录下所有的jar包复制到solr工程中。

[root@localhost /]# cd solr-4.10.3/example/lib/ext/
[root@localhost ext]# cp * /usr/local/solr/tomcat/webapps/solr/WEB-INF/lib/

7.创建solrhome。Solrhome是存放solr服务器所有配置文件的目录。example文件夹solr就是一个标准的Solrhome

[root@localhost /]# cd solr-4.10.3/example/
[root@localhost example]# cp -r solr /usr/local/solr/solrhome

8.告诉solr服务器solrhome的位置。需要修改solr工程的web.xml文件

[root@localhost solr]# cd tomcat/webapps/solr/WEB-INF/
[root@localhost WEB-INF]# vim web.xml

将注释去掉，并将Solrhome路径写进去

9.启动Tomcat,浏览器访问IP:8080/solr

10.使用IK-Analyzer。把分析器的文件夹上传到服务器。
链接：https://download.csdn.net/download/weixin_40263776/10274623
11.需要把分析器的jar包添加到solr工程中。

[root@localhost IKAnalyzer2012FF_hf1]# cp IKAnalyzer2012FF_u1.jar /usr/local/solr/tomcat/webapps/solr/WEB-INF/lib/

12.需要把IKAnalyzer需要的扩展词典及停用词词典、配置文件复制到solr工程的classpath。

[root@localhost IKAnalyzer2012FF_hf1]# mkdir /usr/local/solr/tomcat/webapps/solr/WEB-INF/classes
[root@localhost IKAnalyzer2012FF_hf1]# cp IKAnalyzer.cfg.xml ext_stopword.dic mydict.dic /usr/local/solr/tomcat/webapps/solr/WEB-INF/classes

注意：扩展词典及停用词词典的字符集必须是utf-8。不能使用windows记事本编辑。

13.配置fieldType。需要在solrhome/collection1/conf/schema.xml中配置。
技巧：使用vi、vim跳转到文档开头gg。跳转到文档末尾：G

[root@localhost solr]# vim solrhome/collection1/conf/schema.xml

<fieldType name="text_ik" class="solr.TextField">
  <analyzer class="org.wltea.analyzer.lucene.IKAnalyzer"/>
</fieldType>

6.业务字段配置

业务字段判断标准(这个是根据自己的业务分析)：
1、在搜索时是否需要在此字段上进行搜索。例如：商品名称、商品的卖点、商品的描述
2、后续的业务是否需要用到此字段。例如：商品id。

需要用到的字段：
1、商品id
2、商品title
3、卖点
4、价格
5、商品图片
6、商品分类名称
7、商品描述

Solr中的业务字段：
1、id → 商品id
其他的对应字段创建solr的字段。

<field name="item_title" type="text_ik" indexed="true" stored="true"/>
<field name="item_sell_point" type="text_ik" indexed="true" stored="true"/>
<field name="item_price"  type="long" indexed="true" stored="true"/>
<field name="item_image" type="string" indexed="false" stored="true" />
<field name="item_category_name" type="string" indexed="true" stored=