solr学习日记···文本分析-filter

最新推荐文章于 2020-10-14 14:55:05 发布
最新推荐文章于 2020-10-14 14:55:05 发布
阅读量226 收藏
点赞数
分类专栏： solr学习日记 文章标签： solr
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_19656425/article/details/78962661
版权

上一节简单介绍了一下tokenizer，那么接下来来了解一下filter。
tokenizer按照自定义的规则分解文本产生了token流，而filter就是对token流进行进一步的过滤，针对token流中的每一个token顺序检验，符合的保留，不符合的丢弃，然后生成新的token流。所以我们可以将多个filter连接起来使用，对token进行多重过滤。不过要注意filter的连接顺序，一般来说会将更通用的放在前面。就好像垫在一起的几张鱼网，网格大一些的会放在上面。
与tokenizer类似，所有的filter工厂类都是继承了同一个父类：TokenFilterFactory
父类
可以看到它与TokenizerFactory继承自同一个父类(关于这些类的关系，之后会做一个分析总结),它的子类就是filter元素class属性的取值。而它的作用如最后一行英文所说：创建TokenFilter实例的工厂类的抽象父类
因为solr定义的filter比较多，就不一一介绍了，可以在官网查看：
https://lucene.apache.org/solr/guide/7_2/filter-descriptions.html

RelFly
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Solr学习总结-Analyze
09-26 4567
payload：可以用来对某些词语的匹配增加权重，前提是增加的文档已经分词，首先定义field的类型以及采用的分词和过滤器，还有payload标识 <filter class="solr.DelimitedPayloadTokenFilterFactory" encoder="integer" delimiter="|"/> 定义field使用payload的fieldtype<field
Solr学习总结-Facet
热门推荐
09-26 1万+
返回查询集合中指定field的统计情况，例如找到city一样的文档数目： 加入文档 1 Company 1 New York 2 Company 2 New Orleans 3 Company 3 New York 查询：http://localhost:8983/solr/select?q=name:company&facet=true&facet.field=city&facet
Solr学习总结（三）Solr web 管理后台
weixin_33875839的博客
12-14 247
　　前面讲到了Solr的安装，按道理，这次应该讲讲.net与数据库的内容,C#如何操作Solr索引等。不过我还是想先讲一些基础的内容，比如solr查询参数如何使用，各个参数都代表什么意思？ 还有solr 自带的web 管理系统如何使用等。只有先明白了solr的基本内容，后续学习solr 的C#和数据库操作，才不会费劲。本人刚开始也是配置完solr 之后，直接找solr客户端，写相应的测试代码，但是...
solr文本分析
huangliuyu00的博客
01-02 529
Solr文本分析包括以下组件：       分析器（Analyzer）、字符过滤器(CharFilter)、分词器(Tokenizer)、分词过滤器（TokenFilter）.分析器将分词器和分词过滤器链组合成一个组件。 标准分词器 · StandardTokenizer移除停用词 · StopFilterFactory小写转换 · LowerCaseFilterFactory折叠重复字母 · P...
solr学习日记···搜索相关
RelFly的博客
02-24 215
在介绍了solr的索引和文本分析的内容后，接着就是solr的核心内容–搜索。 solr执行搜索的过程是怎样的？基于怎样的规则搜索？如何处理搜索结果等等。 下面就简单介绍一下solr搜索相关的一些内容。 solr执行搜索的过程(图片取自官网)： Request Handler(请求处理器)作为solr的请求入口，用户的搜索请求会发送到Request Hanlder处理。 Query P...
Apache Solr（solr-8.11.1-src.tgz）
01-10
标题中的"solr-8.11.1-src.tgz"表明这是Apache Solr 8.11.1版本的源代码包，适用于那些希望对Solr进行深度定制或开发的用户。 源代码发布通常包含了编译和构建Solr所需的所有文件，包括Java源代码、配置文件、测试...
solr-mongo-importer-1.1.0.jar
01-22
solr-mongo-importer-1.1.0.jar solr-mongo-importer-1.1.0.jar solr-mongo-importer-1.1.0.jar
solr-import-export-json最新代码
最新发布
06-16
solr-import-export-json最新代码solr-import-export-json最新代码solr-import-export-json最新代码solr-import-export-json最新代码solr-import-export-json最新代码solr-import-export-json最新代码solr-import-...
solr6.5.1定时增量apache-solr-dataimportscheduler
10-11
总的来说，Apache Solr6.5.1的定时增量数据导入特性通过`solr-dataimporthandler`和`solr-data-import-scheduler`这两个组件，实现了对数据源的自动化、智能化管理，极大地提高了数据检索的实时性和系统的响应速度。...
solr（solr-9.0.0-src.tgz）源码
06-02
这里我们将围绕"solr-9.0.0-src.tgz"这个源码包，详细探讨其主要组成部分、核心功能以及开发过程中的关键知识点。 1. **Solr架构** Solr的架构基于Lucene，一个强大的全文搜索引擎库。它提供了分布式、可扩展、高...
SolrLogReader:高性能的Apache Solr日志读取器解析器。 我经常要面对许多演出的Solr日志进行分析。 这就是我应付的方式
05-14
高性能的Solr日志读取器/解析器。 分析并总结Solr日志文件。 java -jar slr.jar [文件或文件夹路径] {TextMatchAspect} {TextMatchAspect} {-o outputdir} {-r'2015-05-12 14:23:00''2015-05-12 15:11:56' } 示例： java -jar slr.jar / solr / logs 可选的TextMatchAspect将提取具有匹配文本的所有日志，并且您可以根据需要指定任意数量的日志，例如： java -jar slr.jar / solr / logs org.apache.solr.cloud -o / results 注意： TextMatchAspect仅在使用-o指定输出目录时才有效。 -o如果指定outputdir，则会将更多详细的摘要以及html错误图表转
基于Solr的海量日志信息查询性能优化的研究
09-19
随着传统互联网和移动互联网的持续发展，网络带给我们的是不断增长的各种不同价值信息，然而如何在信息海洋中快速检索到有价值信息，对于我们来讲至关重要。目前一些搜索公司在公共互联网领域提供了很好的解决方案，但是企业或者政府机关内部相关信息往往需要应用独立的搜索系统，Solr Cloud则是很好的一个平台选择。
Solr/Lucene日志分析-查询热点词-脚本工具
weixin_34321977的博客
05-02 199
solr/lucene 在中文搜索使用中，会输出非常多的类似下面的内容：2012-04-24 00:00:01,396 INFO [org.apache.solr.core.SolrCore] - [XXXX-0] webapp=null path=/select params={q=status:0+AND+(img_file_id:(++123330...
solr学习日记···文本分析-analyzer
RelFly的博客
12-28 288
solr中文本分析是很重要的一环，它发生在创建索引和搜索两个阶段。 在创建索引时，当一个字段被创建时，来自分析结果的令牌流被添加到索引中，并为该字段定义一组术语(包括位置、大小等)。 在查询时，对搜索的值进行分析，结果与存储在字段索引中的值相匹配。 文本分析的配置同样在schema配置文件中完成，它的元素标签为，属于元素的子元素。下面是它的一个普通例子： fieldTy
Solr学习总结
Jack 架构师之路
08-02 1191
引用    之前在一个电商项目中使用了solr进行了站内搜索，并且很好的完成了需求，但是的当时没有系统的总结一下，现在回过头来总结一下，以便加深理解    什么是Slor？    Solr是Apache下的一个顶级开源项目，采用的是java开发，它是基于Lucene的全文搜索服务器。Solr提供了比Lucene更为丰富的查询语言，同时实现了可配置，可扩展，并对索引，搜索性能进行了优化。  
Solr的学习总结一
Echo的博客
12-15 393
心语：因为以前一直接触的都是关系型数据库，所有在接触到这些nosql的时候确实不太适应。在公司有经常的用到。这个学习起来并不困难，但为了以后的复习。我决定还是写下自己学习的一些技巧和心得Solr的环境配置这个网上资料较多这里就不多废话 https://www.cnblogs.com/lengzhijun/p/4281363.html查询参数 基本查询 Solr的检索运算符 当然了这些概念性的
solr学习日记···文本分析-相关类梳理
RelFly的博客
01-10 196
solr文本分析的相关内容涉及到了许多类，这一节就来梳理一下这些类的关系，相信会对理解文本分析的配置有些帮助。首先是工厂相关类： 至于具体的工厂类就不一一列举了，它们都在包org.apache.lucene.analysis.util中。可以点击这里查看其它的方法和具体介绍。然后工厂产生的实例类： tokenizer产生的实例和filter产生的实例实际上都是token流，实际上文本分析
solr学习总结＜一＞
weixin_44088982的博客
10-14 246
Solr学习 一、为什么学习solr 1.solr的作用 ​ solr是一个基于Apache Lucene之上的搜索服务器，它是一个开源的、基于Java的信息检索库。它旨在驱动功能强大的文档检索应用程序 -无论您需要根据用户的查询将数据服务到何处，Solr都可以为您服务。Solr与应用程序的集成以为您服务。 2.为什么数据库可以模糊查询还需要solr ​ select * form sku where sku_name like “%手机%” ​ 我们分析一下上面的sql ​ 问题: ​ 1、这个查询的速度
solr学习日志
汪汪汪汪吁的博客
07-05 191
首先需要下载并解压solr，然后利用cmd进入solr的bin目录下，然后利用solr.cmd start启动。（添加core以及如何使用中文分词，网上教程比较多） 在java中使用： 1.需要在maven中添加相关的solr依赖(主要就是java操作solr的Api包–solrj)： <dependency> <groupId>org.apache.solr</groupId> <artifactId>solr-solrj</ar

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值