solr安装配置以及使用数据库同步数据至solr引擎

最新推荐文章于 2023-07-27 16:45:36 发布
最新推荐文章于 2023-07-27 16:45:36 发布
阅读量595 收藏 1
点赞数
分类专栏： springboot 开发工具 软件安装教程 文章标签： solr big data tomcat 搜索引擎
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_48033003/article/details/120275412
版权

solr安装配置以及使用数据库同步数据至solr引擎

本文目录

文章目录

一、solr简介

Solr是一个独立的企业级搜索应用服务器，它对外提供类似于Web-service的API接口。
用户可以通过http请求，向搜索引擎服务器提交一定格式的XML文件，生成索引；也可以通过Http Get操作提出查找请求，并得到XML格式的返回结果。

Solr是一个高性能，采用Java开发，基于Lucene的全文搜索服务器。
同时对其进行了扩展，提供了比Lucene更为丰富的查询语言，同时实现了可配置、可扩展并对查询性能进行了优化，并且提供了一个完善的功能管理界面，是一款非常优秀的全文搜索引擎。
工

二、安装环境以及版本

solr是java开发的，安装solr需要有jdk，
使用Tomcat部署，需要安装Tomcat

软件版本
jdk1.8
solr4.10.3
tomcat8.5.7

三、安装JDK

略（傻瓜式安装）

四、安装tomcat

  • 新建文件夹solr_my2
  • 复制一个tomcat到该目录下
    在这里插入图片描述
  • 解压
    tar -zxvf apache-tomcat-8.5.70\ (1).tar.gz

在这里插入图片描述

  • 启动测试下（注意由于没有修改端口，使用的是8080，如有冲突，请自行百度修改tomcat的端口）
    在这里插入图片描述
  • 成功启动
    在这里插入图片描述

五、安装solr

  • 安装包可以百度
    在这里插入图片描述

  • 解压
    tar -zxvf solr-4.10.3.tgz.tgz
    在这里插入图片描述

PS(我没使用)：进入solr-4.10.3/example目录有start.jar，可以使用java -jar
start.jar启动内置的jetty服务器，从而启动solr服务

把solr部署到Tomcat

  • 停止之前运行的Tomcat
    在这里插入图片描述
  • 删除Tomcat的webapps文件夹所有文件，并创建solr文件夹
    在这里插入图片描述
  • 复制solr解压目录的solr.war到Tomcat中
    在这里插入图片描述

在这里插入图片描述

  • 解压solr.war
    在这里插入图片描述
  • 删除war包
    在这里插入图片描述
  • 把solr-4.10.3/example/lib/ext目录下的所有的jar包，添加到solr工程中
[root@ithouse-01 ROOT]# cd /usr/local/solr_my2/solr-4.10.3/example/lib/ext/
[root@ithouse-01 ext]# cp * /usr/local/solr_my2/apache-tomcat-8.5.70/webapps/solr/WEB-INF/lib/
  • 加入配置文件到solr工程中

注：只有一个log4j文件，classes文件夹是自己创建的


[root@ithouse-01 ext]# cd /usr/local/solr/solr-4.10.3/example/resources/
[root@ithouse-01 resources]# cp * /usr/local/solr/apache-tomcat-8.5.70/webapps/solr/WEB-INF/classes/

在这里插入图片描述

  • 创建solrhome
    /example/solr目录就是一个solrhome。复制此目录到/usr/local/solr/solrhome

在这里插入图片描述

  • 关联solr及solrhome
    需要修改solr工程的web.xml文件

在这里插入图片描述

  1. 删除注释
  2. 修改第43行，指定solrhome地址(42行的solr/home是固定写法，不能修改)
  • 启动tomcat
[root@ithouse-01 example]# /usr/local/solr_my2/apache-tomcat-8.5.70/bin/startup.sh

在这里插入图片描述

  • solr安装成功

六、配置中文分词器

搜索商品标题需要中文分词，需要配置中文分词器IK

  • 停止tomcat
[root@ithouse-01 example]# /usr/local/solr_my2/apache-tomcat-8.5.70/bin/shutdown.sh
  • 上传中文分词器jar包
    在这里插入图片描述
  • 复制IKAnalyzer的配置文件和自定义词典和停用词词典到Tomcat服务
    在这里插入图片描述
  • 内容大致如下
    在这里插入图片描述
  • IKAnalyzer.cfg.xml
<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE properties SYSTEM "http://java.sun.com/dtd/properties.dtd">  
<properties>  
	<comment>IK Analyzer 扩展配置</comment>
	<!--用户可以在这里配置自己的扩展字典 	-->
	<entry key="ext_dict">ext.dic;</entry> 

	<!--用户可以在这里配置自己的扩展停止词字典-->
	<entry key="ext_stopwords">stopword.dic;</entry> 
	
</properties>
  • 配置schema.xml文件
<!-- IKAnalyzer-->
    <fieldType name="text_ik" class="solr.TextField">
      <analyzer class="org.wltea.analyzer.lucene.IKAnalyzer"/>
    </fieldType>

<!--IKAnalyzer Field-->
<field name="content_ik" type="text_ik" indexed="true" stored="true" />

在这里插入图片描述

  • 重启tomcat生效（可以先不启动）

七、配置业务域

  • 根据数据库的表的字段来书写字段名，以及类型
    在这里插入图片描述
  • 重新启动tomcat

八、springboot项目（maven也行）使用solr

  • 创建一个maven项目，或者springboot项目，然后导入jar包，以及数据库驱动jar
    在这里插入图片描述
  • 创建一个测试类
package cn.solr;

import org.apache.solr.client.solrj.SolrQuery;
import org.apache.solr.client.solrj.SolrServerException;
import org.apache.solr.client.solrj.impl.HttpSolrServer;
import org.apache.solr.client.solrj.response.QueryResponse;
import org.apache.solr.common.SolrDocument;
import org.apache.solr.common.SolrDocumentList;
import org.apache.solr.common.SolrInputDocument;

import java.io.IOException;
import java.sql.Connection;
import java.sql.DriverManager;
import java.sql.PreparedStatement;
import java.sql.ResultSet;
import java.util.ArrayList;
import java.util.List;
import java.util.Map;

public class SolrAction {
    public static void main(String[] args) {
        querySolr();
    }
    //solr地址
    private static String solrUlr="http://172.16.248.201:8080/solr";
    /*增 从数据库中查询数据插入到solr引擎中*/
    public static void addSolr(){

        HttpSolrServer httpSolrServer=new HttpSolrServer(solrUlr);
        List<SolrInputDocument> listSolr=new ArrayList<>();
        try {
            Class.forName("com.mysql.jdbc.Driver");
            String url="jdbc:mysql://localhost/ebuy?useUnicode=true&characterEncoding=utf-8";
            Connection connection= DriverManager.getConnection(url,"root","123");
            String sql="select * from easybuy_product";
            PreparedStatement ps=connection.prepareStatement(sql);
            ResultSet rs=ps.executeQuery();
            while (rs.next()){
                SolrInputDocument solrInputDocument=new SolrInputDocument();
                solrInputDocument.addField("id",rs.getString("ep_id"));
                solrInputDocument.addField("ep_name",rs.getString("ep_name"));
                solrInputDocument.addField("ep_price",rs.getLong("ep_price"));
                solrInputDocument.addField("ep_image",rs.getString("ep_file_name"));
                solrInputDocument.addField("epc_id",rs.getLong("epc_id"));
                listSolr.add(solrInputDocument);
            }

            rs.close();
            ps.close();
            connection.close();

        }catch (Exception e){
            e.printStackTrace();
        }
        try {
            httpSolrServer.add(listSolr);
            httpSolrServer.commit();
        } catch (SolrServerException e) {
            e.printStackTrace();
        } catch (IOException e) {
            e.printStackTrace();
        }
    }
    /*删 删除solr引擎库中指定、全部的数据*/
    public static void delSolr(){
        HttpSolrServer httpSolrServer=new HttpSolrServer(solrUlr);
        //1.根据主键id删除
        try {
            httpSolrServer.deleteById("1172680");
            httpSolrServer.commit();
        } catch (SolrServerException e) {
            e.printStackTrace();
        } catch (IOException e) {
            e.printStackTrace();
        }
        //2.根据指定字段指定值删除
//        try {
//            httpSolrServer.deleteByQuery("ep_name:锤子");
//            httpSolrServer.commit();
//        } catch (SolrServerException e) {
//            e.printStackTrace();
//        } catch (IOException e) {
//            e.printStackTrace();
//        }
        //3.删除全部数据
//        try {
//            httpSolrServer.deleteByQuery("*:*");
//            httpSolrServer.commit();
//        } catch (SolrServerException e) {
//            e.printStackTrace();
//        } catch (IOException e) {
//            e.printStackTrace();
//        }
    }
    /*查 查询solr引擎库中的指定条件的数据*/
    public static void querySolr(){

        HttpSolrServer httpSolrServer=new HttpSolrServer(solrUlr);
        //创建solr的query对象
        SolrQuery solrQuery=new SolrQuery();
        //设置查询条件
        solrQuery.setQuery("ep_name:华为");
        //设置起始数据位置
        solrQuery.setStart(0);
        //设置查询的条数
        solrQuery.setRows(10);
        //设置高亮
        solrQuery.setHighlight(true);//开启高亮
        solrQuery.addHighlightField("ep_name");//指定高亮增强的solr字段
        //设置高亮增强的样式
        solrQuery.setHighlightSimplePre("<font color=\"red\">");
        solrQuery.setHighlightSimplePost("</font>");
        //查询数据
        QueryResponse queryResponse=null;
        try {
            queryResponse= httpSolrServer.query(solrQuery);
            //拿到查询结果集
            SolrDocumentList results= queryResponse.getResults();
//            System.out.println(results);
            System.out.println("搜索回来的条数为"+results.getNumFound());
            Map<String, Map<String, List<String>>> map= queryResponse.getHighlighting();
            System.out.println(map);
            // 解析查询结果
            for (SolrDocument solrDocument : results) {
                System.out.println("----------------------------------------------------");
                System.out.println(solrDocument);
                // 获取高亮数据
                List<String> list = map.get(solrDocument.get("id")).get("ep_name");
                // 显示高亮
                if (list != null && list.size() > 0) {
                    System.out.println("商品名称1：" + list.get(0));
                } else {
                    System.out.println("商品名称2：" + solrDocument.get("ep_name"));
                }
                System.out.println(solrDocument.get("id"));
                System.out.println(solrDocument.get("ep_price"));
                System.out.println(solrDocument.get("ep_image"));
            }
        }catch (Exception e){
            e.printStackTrace();
        }
    }
}
  • 查询详解
    在这里插入图片描述

在这里插入图片描述

  • 至此便是结束了！！！
小吕努力变强
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
solr同步数据库需要jar包
08-17
solr同步数据库需要jar包，多个solr同步数据库数据的jar包。压缩文件里面有说明
JAVA开发之Solr的配置使用和安装插件与数据库表同步数据
最新发布
sulei627719296的博客
08-23 678
4、通过第三步以后，系统会启动solr自带的jetty服务器，通过 http://localhost:8983/solr/便可访问solr。1、解压solr-4.7.0.zip到你想到存放的路径，比如当前用户根目录/Users/liuxun/solr-4.7.0。Solr 下载地址：http://archive.apache.org/dist/lucene/solr/2、cmd打开命令行窗口，进入/Users/liuxun/solr-4.7.0/example目录。此时，solr已成功启动。
官方配置solr步骤（二）---solr数据库同步数据步骤
热门推荐
凌大大的博客
06-02 1万+
官方配置solr单节点数据库同步数据   大体solr的同步数据的一个大概图如下：   有关solr服务启动配置参照上一篇文章官方配置solr步骤（一）—solr下载及单节点的启动、配置说明 1、core的配置文件拷贝   在上一篇文章中，我用的是solr-7.2.1,这里，我用的是solr-7.3.1 ,当然步骤都是一样的，上一篇中写到过，solrHome 其实就是我们下载下来的so...
Solr（3）：Solr的名词解释及配置文件说明
u013938578的博客
05-07 619
这些文件中的很多都是 XML 格式的，尽管与配置设置交互的 API 在需要时往往接受 JSON 以进行编程访问。Solr 里面搜索出来的每个数据，都是以xml 文件或json 来表示，这些数据被称为文档。Solr 主目录包含重要的配置信息，并且是 Solr 将存储其索引的地方。当您第一次安装 Solr 时，您的主目录是：server/solr。在 Solr 中有几个配置文件，您将在执行过程中与之交互。Solr在导入数据库时，会对某些语句进行分词。在运行 Solr 时，您需要访问主目录。
solr mysql 分词_solr 7+tomcat 8 + mysql实现solr 7基本使用(安装、集成中文分词器、定时同步数据库数据以及项目集成)...
weixin_34738304的博客
01-19 114
基本说明Solr是一个开源项目，基于Lucene的搜索服务器，一般用于高级的搜索功能；solr还支持各种插件(如中文分词器等)，便于做多样化功能的集成；提供页面操作，查看日志和配置信息，功能全面。solr 7 + tomcat 8实现solr 7的安装Solr自带集成jetty，但是一般都不直接使用，而是将solr另外和tomcat或jetty服务器集成到一起，形成搜索引擎。Solr 7解压后的目...
Solr与数据库结合实现全文检索
互联网
04-05 285
一下给出了一个简单的实例展示了如何将Solr与数据库结合实现全文检索。生产环境下，会有很大差别，这里的配置仅作为调试或是开发所用。 1. 安装Java JDK 和Tomcat 第一步骤就是安装jdk 和Server 服务器Tomcat，这个也挺简单，这里就省略了。 2. 配置Solr Core 将Solr自带的一个例子复制一份，我这里演示的版本是So...
Solr概述
weixin_44603464的博客
07-27 325
Solr 中数据存储是存储在 Document 对象中，对象中可以包含的属性和属性类型都定义在 schema.xml 中。其中词典文件不仅保存有每个关键词，还保留了指向频率文件和位置文件的指针，通过指针可以找到该关键字的频率信息和位置信息。分词时，忽略”在“、”的“之类的没有意义的介词，以及标点符号可以过滤。b.关键词位置，即记录该词是文章中第几个关键词（优点是节约索引空间、词组（phase）查询快），，简单说就是通过给定的关键字，找到包含关键字的文章的索引。文章1的内容为：老超在卡子门工作，我也是。
linux 下安装solr
qq_24692021的博客
08-20 190
linux 下安装solr 1.安装solr 首先要安装tomcat,这里就不说安装tomcat了。 2.把solr的压缩包上传到linux上。我用的版本是solr-4.10.3。 3.解压solr 。命令 tar -zxvf solr-4.10.3.tar.gz 4.把/home/service/solr-4.10.3/dist/solr-4.10.3.war包部署到tomcat下。并改
solr快速上手：搭建solr集群并创建核心，设置数据同步（十一）
55555的博客
07-10 2815
自此，我们针对solr集群的搭建，核心创建，数据同步都讲解完了，同时还需要改变的呢，是我们客户端连接时的代码，要调整为集群模式，这个我们在下一章继续讲解。
solr快速上手：配置从mysql同步数据（五）
55555的博客
06-04 1582
mysql同步solr的核心在于配置文件的书写，当发现有错误时，可以通过服务端日志排查具体错误。但数据同步还未完成，我们目前还没有实现自动的同步，还需要手动点击同步，下一节继续讲解，solr从mysql自动同步数据。
solr-7.7.3配置详解，并且连接数据库 (一)
weixin_43085797的博客
02-09 981
第一步：Solr下载 官网：https://lucene.apache.org/solr/ solr包下载，里面有solr-7.7.3包和中文分词器、定时更新索引的包 第二步：solr配置 2.1、配置solr与tomcat整合： 官网下载一个tomcat: 官网：http://tomcat.apache.org 下载：apache-tomcat-9.0.43 jdk:1.8 将下载好的solr7.7.3解压缩 1、solr-7.7.3\server\solr-webapp\路径下的webapp改名为s
solr-dataimportscheduler-1.4.jar 增量定时同步数据到solr.rar
07-05
solr定时同步数据 直接把jar包放到solr下的lib即可，亲测可用
solr在tomcat下的搭建和配置数据库
03-24
solr在tomcat下的搭建和配置数据库
solr7.4.0入门讲解，实时增量同步等
11-19
solr入门环境搭建，sorl ik分词器分词，solr数据库数据导入，solr同步等技术实现及配置.版本solr7.4.0 + ikanalyzer-solr5 + solr-dataimport-scheduler
solr定时自动同步数据库需要用到的apache-solr-dataimportscheduler.jar包
08-06
亲测solr7.7.2可用，并且在原有的无需验证的基础上增加了带账号密码验证的功能，所以有两个jar包，网友可根据自己的需要下载。账号密码验证的格式为user_pwd=user:password
SpringCloud开始的第二课（consul、Feign声明式调用、Jmetter压力测试工具、Hystrix熔断降级兜底、）
qq_48033003的博客
09-16 5331
SpringCloud开始的第二课（） 一、前提回顾 上文我们讲解了（RestTemplate、Eureka、Eureka集群、Ribbon负载均衡、Eureka节点服务剔除） 上文链接 接下来我们继续讲讲其他的微服务的知识示例 二、Eureka的替换方案 疑问：Eureka那么好用为什么要换掉它呢？ 在Euraka的GitHub上，宣布Eureka 2.x闭源。近这意味着如果开发者继续使用作为 2.x 分支上现有工作 repo 一部分发布的代码库和工件，则将自负风险。 那么我们可以替换哪些注册中心
mybatis generator插件的使用（一键生成、配置规则）
qq_48033003的博客
08-07 3048
mybatis generator插件的使用 mybatis generator插件的使用可以快速的生成数据库表对应的pojo和mapper层，以及一些简单的sql查询业务 使开发者节省时间，提高效率， 这篇文章主要讲解如何使用该插件 引入插件 在pom.xml文件中 <build> <!--Mybatis自动生成映射文件、实体类、Mapper接口 插件--> <plugin> <
Springboot项目@Scheduled()定时任务
qq_48033003的博客
11-28 2610
文章目录前言创建springboot项目添加依赖启动器添加注解写一个定时任务工具类启动服务定时任务cron规则详解快捷生成规则规则详解本文结束 前言 在项目中通常会用到定时任务，来实现某些业务（比如凌晨服务器比较空闲的时候，做一些数据库的操作），本文将大致的讲解一下如何使用@Scheduled实现定时任务 创建springboot项目 创建一个springboot项目，不再赘述 添加依赖 <?xml version="1.0" encoding="UTF-8"?> <project
使用@Configuration扫描配置文件（@Configuration、@ConfigurationProperties和@PropertySource组合使用）
qq_48033003的博客
08-07 2426
使用@Configuration扫描配置文件（@Configuration、@ConfigurationProperties和@PropertySource组合使用） @Configuration：相当于传统的xml配置文件，如果有些第三方库需要用到xml文件，建议仍然通过@Configuration类作为项目的配置主类——可以使用@ImportResource注解加载xml配置文件。 比如我要写一个配置类，扫描我的数据库配置信息，那么我可以这样写 一、@Configuration+@Configura
solr 定时器 配置
08-12
回答: 要配置Solr定时器，你需要进行以下步骤：首先，在solrhome/dist中找到solr-dataimporthandler-5.5.0.jar，solr-dataimporthandler-extras-5.5.0.jar，solr-core-5.5.0.jar三个包，将它们一并复制到solrhome/server/lib中。然后，在solrconfig.xml文件中添加以下代码片段：<requestHandler name="/dataimport" class="org.apache.solr.handler.dataimport.DataImportHandler"><lst name="defaults"><str name="config">data-config.xml</str></lst></requestHandler>[2如果已经存在请求处理程序节点，你需要在其后面添加以下配置：<requestHandler name="/dataimport" class="solr.DataImportHandler"><lst name="defaults"><str name="config">data-config.xml</str></lst></requestHandler>[3这样就完成了Solr定时器的配置。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* [solr安装笔记与定时器任务](https://blog.csdn.net/weixin_34050005/article/details/92981244)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"] - *3* [Linux下安装Solr7.2.1以及配置Solr（CentOS7）](https://blog.csdn.net/weixin_42400413/article/details/83143176)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

小吕努力变强

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值