solr安装、使用、配置中文分词器

最新推荐文章于 2024-06-28 10:02:40 发布
最新推荐文章于 2024-06-28 10:02:40 发布
阅读量877 收藏
点赞数
分类专栏： java 文章标签： solr ik 搜索引擎 中文分词器
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yuruixin_china/article/details/80037873
版权

solr 是基于lucene搜索库的一个搜索引擎框架,它将lucene进行了封装，实现了企业级应用框架。有提供完整集群及索引库优化方案。

solr可以独立运行，运行在Jetty、Tomcat等这些Servlet容器中，Solr 索引的实现方法很简单，用 POST 方法向Solr 服务器发送一个描述 Field 及其内容的 XML 文档，Solr根据xml文档添加、删除、更新索引 。Solr 搜索只需要发送HTTP GET 请求，然后对 Solr返回Xml、json等格式的查询结果进行解析，组织页面布局。Solr不提供构建UI的功能，Solr提供了一个管理界面，通过管理界面可以查询Solr的配置和运行情况。

  1. 安装
    下载地址：http://archive.apache.org/dist/lucene/solr/
    （服务器在国外，下载会比较慢。可以使用solr6.1.0下载）

  2. 下载完成解压压缩包
    这里写图片描述

  3. 启动solr
    这里写图片描述
    这里写图片描述

  4. 访问solr后台管理界面
    http://127.0.0.1:8983/solr/#/
    这里写图片描述
  5. 创建core（可以理解为mysql中的数据库，即一个服务可以有多个库）
solr create -c gxl_core

这里写图片描述
这里写图片描述
6. 进入你刚创建的core，测试分词
这里写图片描述
由于solr自带的分词器无法将中文根据语义分词，需要引入中文分词器IKAnalyzer

a. 将ik的jar放入solr-6.1.0\server\solr-webapp\webapp\WEB-INF\lib目录下
b. 修改solr-6.1.0\server\solr\corename\conf\managed-schema.xml文件，在schema标签中添加如下代码

<!-- IKAnalyzer-->
  <fieldType name="text_ik" class="solr.TextField" autoGeneratePhraseQueries="false">
            <analyzer class="org.wltea.analyzer.lucene.IKAnalyzer" type="index">
            </analyzer>
            <analyzer class="org.wltea.analyzer.lucene.IKAnalyzer" type="query">
            </analyzer>
    </fieldType>

c. 重启solr

solr restart -p 8983

经过以上操作后，再看下分词效果
这里写图片描述

嗯，满意了~

yuruixin_china
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
docker 安装solr8.6.2 配置中文分词器的方法
09-29
主要介绍了docker 安装solr8.6.2 配置中文分词器的方法，本文给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下
solr环境搭建和中文分词器IK配置
04-11
在本教程中，我们将深入探讨如何搭建Solr 7.2.1环境，并配置中文分词器IKAnalyzer以支持中文搜索。 首先，我们来了解Solr 7.2.1的安装步骤： 1. **下载Solr**：访问Apache Solr官方网站，下载最新稳定版的Solr，...
Solr：配置IK中文分词器
qq_33240556的博客
04-07 468
从IK分词器的官方仓库、GitHub或其他可信来源下载适用于您Solr版本的IK分词器JAR包。确保下载的版本与您的Solr版本兼容。例如，如果您使用的是Solr 8.x版本，应下载对应版本的IK分词器。对于Solr服务的重启方式，请参考您的Solr部署指南或相关文档。至此，Solr已成功配置为使用IK中文分词器处理指定字段的中文文本。如果您的Solr部署结构不同，请确保将JAR文件放置到Solr实例能够加载到类路径的位置。可以根据需要添加或调整IK分词器的其他参数以及后续的分析器组件（如过滤器）。
Solr安装、使用、配置中文分词器
杨春建的博客
04-24 339
原文地址：https://blog.csdn.net/yuruixin_china/article/details/80037873solr 是基于lucene搜索库的一个搜索引擎框架,它将lucene进行了封装，实现了企业级应用框架。有提供完整集群及索引库优化方案。solr可以独立运行，运行在Jetty、Tomcat等这些Servlet容器中，Solr 索引的实现方法很简单，用 POST 方法向...
Solr安装IK中文分词器
最新发布
陆漫漫的博客
06-28 300
我们才Schema中重新添加字段，并选择字段对应的type就可以了，我们在dataimport中将查询出来的数据对应到school_name就可以。由于solr自带的分词器无法将中文根据语义分词，需要引入中文分词器IKAnalyzer。由于我在windows上没有看到具体的重启命令，所以这里我我是先关闭再启动。我们直接下载jar包就可以了。
docker 安装solr8.6.2 配置中文分词器
yulate的个人博客
09-10 749
一、环境版本 Docker version 19.03.12 centos7 solr8.6.2 二、docker安装 1.使用官方安装脚本自动安装 curl -fsSL https://get.docker.com | bash -s docker --mirror Aliyun 2.使用国内 daocloud 一键安装命令： curl -sSL https://get.daocloud.io/docker | sh 三、docker安装solr8.6.2 1.docker拉取solr docker
solr快速上手：配置IK中文分词器（七）
55555的博客
06-10 2137
IK中文分词器是一个国人开源的，基于java开发的轻量级中文分词器，能够实现对中文进行自然语言处理，并且支持自定义分词库，IK分词器本身也支持英文和数字的分词，满足中英文混合的业务场景。为什么需要中文分词器？我们可以在solr Analysis中进行分词，采用默认的英文分词器，可以看到中文被切分成了单个汉字，而按照自然语言来讲，我们更希望将其分词为俺中国man，这样本身也符合语言习惯，同时不用单个字分词，也节约了存储空间，所以我们需要更加灵活的中文分词器这种。
Solr7.6 配置中文分词器和业务字段
Stay Hungry
02-03 1031
上面一篇文章讲了如何安装solr,现在来配置中文分词器 跳转地址 在solr7.0以前是使用IKAnalyzer,但是Solr7.6已经自带了中文分词器，本文使用的是solr自带的中文分词器 直接使用solr启动服务 1.   使用tomcat启动solr 1.首先在solrhome下面新建一个core，随便取名，我是取了一个叫AA solrhome目录下可以有多个core,每一个c...
solr7.7.2配置自带中文分词器及IK分词器
mdy9953MDY的博客
03-08 667
solr7.7.2配置自带中文分词器及IK分词器 solr7.7.2的安装请查看：https://blog.csdn.net/mdy9953MDY/article/details/104671135 这里记录两种中文分词器：smartcn 和 ik 分词器 1、solr7.X以后自带分词器（smartcn）： solr7.X之后已有内置了中文分词器，下面是内置分词器配置 1.1 将我们解压的so...
solr8.2 配置中文分词器 ik-analyzer-solr8
小匠心的博客
10-08 1931
一、下载安装Apache Solr 8.2.0 下载地址：http://lucene.apache.org/solr/downloads.html 解压缩： 二、启动solr服务 进入solr-8.2.0/bin目录： 输入cmd回车 控制台输入以下命令： // 启动服务 .\solr start // 关闭服务 .\solr stop -all // 重启服务 sol...
Solr使用IKAnalyzer中文分词器配置教程
cyb_123的博客
08-17 1064
Solr使用IKAnalyzer中文分词器配置教程文件准备开始配置1.将分词器jar包放到自定义lib目录下2.将IKAnalyzer.cfg.xml配置文件放到core的conf目录下3.将分词词典放到随意目录下，记住路径4.修改IKAnalyzer.cfg.xml配置中的词典路径，和3一致5.修改schema.xml配置文件，添加分词类型6.修改solr.in.sh配置文件7.重启solr，将配置生效查看效果 文件准备 IK分词器文件有三个：分词器jar包，配置文件和分词词典 jar包下载地址：点
给solr配置中文分词器
爱雨轩
08-02 8107
目录 Solr的中文分词器 1 1. smartcn 分词器的安装 1 2. IK 分词器的安装 2 3.中文分词器mmseg4j 3Solr的中文分词器 中文分词在solr里面是没有默认开启的，需要我们自己配置一个中文分词器。 目前可用的分词器有smartcn，IK，Jeasy，庖丁。其实主要是两种，一种是基于中科院ICTCLAS的隐式马尔科夫HMM算法的中文分词器，如sma
solr安装包与ik中文分词器.zip
12-09
完成以上步骤后，Solr就能使用Ik中文分词器对输入的中文文本进行分析，从而支持高效的中文搜索。对于初学者来说，按照博客中的教程进行操作，通常能顺利安装并运行。需要注意的是，实际应用中可能还需要进行性能调优...
solr-4.10.3+ik分词器
03-28
在Solr的配置文件中，如“solr/conf/solrconfig.xml”和“solr/conf/managed-schema”中，我们需要指定使用IK分词器。添加或修改相应的分析器设置，比如设置默认的查询分析器和索引分析器为IKAnalyzer。重启Solr服务...
同一个电脑安装两个jdk版本
热门推荐
以码为梦
12-13 6万+
场景：公司项目使用的jdk为1.7，最近不是很忙，找到一个爬虫系统学习。该系统使用到了jdk1.8的特性，所以I need 俩版本，开整！！！ 1 . 准备两个版本的jdk我的两个jdk路径为： D:\jdk1.7.0_80 D:\Program Files\Java\jdk1.8.0_111 2 . 设置两个子JAVA_HOME，一个总设置两个子JAVA_HOME: ...
发送邮箱验证码（带html格式）
以码为梦
06-15 3万+
场景：用于用户注册、密码重置等。 1 . 邮件html模板 emailTemplet.html<!DOCTYPE html> <html> <head> <meta http-equiv="Content-Type" content="text/html; charset=utf-8" /> <title></title> <meta charset="utf-8" /></
springboot扫描自定义类注解、方法注解
以码为梦
03-26 1万+
import lombok.Data; import org.springframework.context.ApplicationListener; import org.springframework.context.event.ContextRefreshedEvent; import org.springframework.core.annotation.AnnotationUtils; ...
由一个自动部署脚本引发的血案。。。This is very likely to create a memory leak
以码为梦
09-01 1万+
前阵子，为了提高项目部署的效率，写了个shell脚本如下： #!/bin/sh export tomcat_name=apache-tomcat-8.5.16-front export tomcat_home=/data/$tomcat_name TomcatID=$(ps -ef |grep tomcat |grep -w $tomcat_name|grep -v 'grep'|awk '...
java中的同步集合与并发集合
以码为梦
08-26 1万+
同步集合可以简单地理解为通过synchronized来实现同步的集合。如果有多个线程调用同步集合的方法，它们将会串行执行。 arrayList和vector、stack： 1. Vector是线程安全的，源码中有很多的synchronized可以看出，而ArrayList不是。导致Vector效率无法和ArrayList相比 2. ArrayList和Vector都采用线性连续存储空间，当存...
solr 9.2.0版本 配置中文分词
05-05
Solr 9.2.0默认使用Lucene 8.6.0，其自带了一个中文分词器SmartChineseAnalyzer。 在Solr中配置中文分词器的步骤如下： 1. 在solrconfig.xml中配置分词器 在schema.xml中定义field时，需要指定使用的分词器，例如： ``` <field name="text" type="text_cn" indexed="true" stored="true"/> ``` 在solrconfig.xml中，需要配置text_cn类型的分词器，例如： ``` <fieldType name="text_cn" class="solr.TextField"> <analyzer type="index"> <tokenizer class="org.apache.lucene.analysis.cn.smart.SmartChineseTokenizerFactory"/> </analyzer> <analyzer type="query"> <tokenizer class="org.apache.lucene.analysis.cn.smart.SmartChineseTokenizerFactory"/> </analyzer> </fieldType> ``` 其中，tokenizer指定了使用的分词器，这里使用的是SmartChineseTokenizerFactory，它是SmartChineseAnalyzer的底层分词器。 2. 配置停用词 在solrconfig.xml中，可以配置停用词，在分词时将停用词过滤掉，例如： ``` <filter class="solr.StopFilterFactory" words="stopwords.txt" ignoreCase="true" /> ``` 其中，words指定了停用词文件的路径，可以自己定义。 3. 配置同义词 在solrconfig.xml中，可以配置同义词，在分词时将同义词替换掉，例如： ``` <filter class="solr.SynonymFilterFactory" synonyms="synonyms.txt" ignoreCase="true" expand="true" /> ``` 其中，synonyms指定了同义词文件的路径，可以自己定义。expand指定是否将同义词扩展，例如"中国, 中国人, 中国人民"，如果expand=true，则搜索"中国"时会将其扩展为"中国 中国人 中国人民"。 以上就是在Solr 9.2.0中配置中文分词器的基本步骤。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值