Lucene--IndexWriter

最新推荐文章于 2020-12-18 22:55:25 发布
最新推荐文章于 2020-12-18 22:55:25 发布
阅读量302 收藏
点赞数
分类专栏： Lucene
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Love_xmei/article/details/48440063
版权

IndexWriter：创建和维护索引

IndexWriterConfig.OpenMode 决定新的索引被创建或者新的索引被打开。

当readers使用索引时，也可以用 IndexWriterConfig.OpenMode.CREATE打开这个索引。旧的readers只能读取当时的索引情况，新增的索引是看不到的。

IndexWriterConfig.OpenMode.CREATE_OR_APPEND：如果不存在就增加索引，如果存在就打开索引。


阿肥猪
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
基于JAVA的搜索引擎 lucene-2.2.0
11-15
对数据源进行分析，是为建立索引服务的；为指定的文件建立索引，是为检索服务的。 对数据源分析，使用Lucene的分析器(Analyzer)，根据分析器所得到的词条，构造一个索引器IndexWriter。索引器IndexWriter的功能主要就是创建索引，是建立索引工作中最核心的。 当构造完一个索引器IndexWriter之后，就可以向其中添加Document了。 在前面Lucene-2.2.0 源代码阅读学习(1)中，根据Lucene提供的一个Demo，详细分析研究一下索引器org.apache.lucene.index.IndexWriter类，看看它是如果定义的，掌握它建立索引的机制。 通过IndexWriter类的实现源代码可知，它包含的内容相当丰富了。乍一看无从入手，不知道从何处去分析。可以通过Lucene提供的Demo的，根据它的实现过程l来一点点地解析。 在Demo中，实例化一个索引器： IndexWriter writer = new IndexWriter(INDEX_DIR, new StandardAnalyzer(), true); 它使用的IndexWriter的一个构造函数，定义如下所示： public IndexWriter(String path, Analyzer a, boolean create) throws CorruptIndexException, LockObtainFailedException, IOException { init(FSDirectory.getDirectory(path), a, create, true, null, true); } 这个构造函数具有三个参数： path ：根据一个字符串描述的路径，为建立的索引文件指定存放目录。 a ：一个分析器。 create：它是一个boolean型变量，如果为true，表示要重写指定的存放索引目录下的索引文件；如果为false，表示在指定存放索引目录下已经存在的索引文件的基础上，向其中继续追加新的索引文件。 简单做个测试吧： package org.shirdrn.lucene; import java.io.IOException; import org.apache.lucene.analysis.Analyzer; import org.apache.lucene.analysis.standard.StandardAnalyzer; import org.apache.lucene.index.CorruptIndexException; import org.apache.lucene.index.IndexWriter; import org.apache.lucene.store.LockObtainFailedException; public class MyIndexWriterTest { public static void main(String[] args) throws Exception { String path = "E:\\index"; Analyzer a = new StandardAnalyzer(); IndexWriter myWriter = new IndexWriter(path,a,true); } } 这里没有指定要进行建立索引的文件，因此，应该是“建立空索引”。这里，指定了create的值为true，是新建索引文件。 这里，只是实例化了一个IndexWriter索引器，并没有建立索引。建立索引的过程是在一个IndexWriter索引器实例存在的前提下，通过为其添加Document，这样才能真正就爱你里索引。 运行程序，可以在指定的索引文件的存放目录E:\\index下看到生成的三个与索引有关的文件： segments.gen (大小为1K) segments_1 (大小为1K) write.lock (大小为0K) 如果再次运行程序，会发现文件segments_1变成了segments_2，再次运行还会变成segments_3……，这就说明参数create为true表示重写现存的索引文件。 如果第一次执行上述程序，指定create为false，由于指定的索引目录下面缺少被追加索引的索引文件，将会抛出异常： Exception in thread "main" java.io.FileNotFoundException: no segments* file found in org.apache.luce
一步一步跟我学习lucene（1）---lucene的IndexWriter对象创建和索引策略的选择
wuyinggui的专栏
05-05 184
应工作的需要（数据量大造成原有系统查询效率低），最近做了搜索引擎相关的内容，之前培训的时候对lucene即有接触，当时做的是3.x版本的，本人比较激进，毫不犹豫的选择了lucene5版本（15年刚发布的，O(∩_∩)O哈哈~）。 lucene是一个开放源代码的全文搜索引擎开发工具包，提供了简单强大的搜索引擎接口，其优点如下： 数据以索引文件的形式存储，索引文件可以跨平台，只要保证索引完整...
LUCENE-第三课IndexWriter
emailscott的博客
05-25 188
1. 代码步骤:// 创建使用的分词器Analyzer analyzer = new IKAnalyzer4Lucene7(true);// 索引配置对象IndexWriterConfig config = new IndexWriterConfig( analyzer );// 设置索引库的打开模式：新建、追加、新建或追加config.setOpenMode(OpenMode.CREATE_OR...
.NET 中选择合适的文件打开模式（CreateNew, Create, Open, OpenOrCreate, Truncate, Append）
walterlv - 吕毅
04-30 1042
.NET 中文件打开的 API File.Open 提供了多种不同的文件打开方式，这些方式大多数与 Windows 文件 API 中的模式是对应的，但也有一些 .NET 层面的判断以及名称的变化。在 .NET 层你可以选择适合你业务场景需要的文件打开方式。 本文内容文件打开方式`FileMode``CreateNew``Create``Open``OpenOrCreate``Truncate``...
linux下c —open函数
fyfcauc的专栏
02-05 1478
好记性胜不过烂笔头 头文件 #include  /*提供类型pid_t,size_t的定义*/ #include #include 函数原型 int open(const char *path, int oflags,mode_t mode); 函数说明     open建立了一条到文件或设备的访问路径。 open函数一般用于打开或者创建文件，
Solr__luence（一）简述_入门
CoffeeAndIce的博客
08-17 442
简介 Lucene4它是非常优秀的开源的全文检索框架，但是不是一个引擎，与搜索引擎是有差异的，最少需要爬虫以及对数据的储存管理等。它主要用于解决一些sql代码无法完成或者完成需要许多like、or的sql语句问题，也就是全文检索：将要查询的目标文档中的词提取出来，组成索引，通过查询索引达到搜索目标文档的目的。这种先建立索引，再对索引进行搜索的过程就叫全文检索（Full-text Se
Lucene系列五：Lucene索引详解（IndexWriter详解、Document详解、索引更新）
HelloWorld搬运工
03-02 881
一、IndexWriter详解 问题1：索引创建过程完成什么事？ 　　　　分词、存储到反向索引中 1. 回顾Lucene架构图： 介绍我们编写的应用程序要完成数据的收集，再将数据以document的形式用lucene的索引API创建索引、存储。 这里重点要强调应用代码负责做什么,lucene负责做什么。 2. Lucene索引创建API 图示 通过该图介绍luce...
Lucene系列六：索引过程和IndexWriter
布道
11-28 5884
索引过程是由Lucene所提供的核心功能之一，而IndexWriter 是索引过程中最重要的和核心组件。 目录 1. 索引基本流程 2. IndexWriter 2.1. 关于线程安全 2.2. IndexWriterConfig 2.3 核心API 2.4 演示实例 3. 数据存储格式 4. 总结 1. 索引基本流程 索引文件的写入顺序: fdt--->fdx -...
pylucene构建索引_Lucene 6.0 实战（1）-创建索引
weixin_39774905的博客
12-18 241
字数统计:10k|阅读时长 ≈0:10引言Lucene6.0于2016年4月8日发布，要求最低Java版本是Java 8。相信大多数公司的数据库都需要采用分库分表等一些策略，而对于某些特定的业务需求，分别从不同的库不同的表中去检索特定的数据显得比较繁琐，而Lucene正好可以解决某些特殊需求，对于不同库不同表中的数据先建立全量索引，然后将需要检索的数据写入某个单独的表中，供其它业务需求方...
Lucene：IndexWriterConfig的设置
weixin_34015336的博客
10-08 261
Lucene系列介绍 实例代码如下所示： 1 Analyzer analyzer = new StandardAnalyzer(Version.LUCENE_36); 2 IndexWriterConfig iwconf = new IndexWriterConfig(Version.LUCENE_36, analyzer); 3 iwconf.setOpenMode(IndexWri...
learn-lucene:lucene学习
07-03
lucene_learnlucene学习day_01:索引创建的步骤:创建directory创建IndexWriter创建Document为Document添加Field通过IdexUriter添加文档到索引中搜索的步骤：创建directory创建IndexReader根据IndexReader创建...
Apache Lucene全文检索和IKAnalyzer分词工具类
04-22
IndexWriter indexWriter = new IndexWriter(indexDir, luceneAnalyzer,true); for (int i = 0; i (); i++) { LuceneVO vo = (LuceneVO)list.get(i); Document doc = new Document(); Field FieldId = ...
Homework-4 作业补充1
08-03
2.1 在创建索引过程中，首先提供的是一个目录，用于存储索引 2.2 然后建立索引写文件入口 IndexWriter 2.3 创建索引过程中会使用 Field，
Lucene 源码解析
02-19
在创建完最重要的IndexWriter之后，就开始遍历需要索引的文件，构造对应的Document和Filed类，最终通过IndexWriter的addDocument函数开始索引。 Document的构造函数为空，StringField、TextField和Field的构造函数...
Lucene--DirectoryReader
阿肥猪的博客
09-29 2090
DirectoryReader ireader= DirectoryReader.open(directory)public static DirectoryReader open(final Directory directory) throws IOException { return StandardDirectoryReader.open(directory, null); }
Lucene--TokenStream（TokenFilter、Tokenizer）
阿肥猪的博客
09-11 1478
TokenStream即是从Document的域（field）中或者查询条件中抽取一个个分词而组成的一个数据流。继承TokenStream的类必须是final类型的，或者至少increamStoken的方法是final的，TokenStream是抽象类，两个子类如下： Tokenizer：输入为Reader的TokenStream TokenFilter：输入参数为另一个TokerStre
Lucene--AttributeSource
阿肥猪的博客
09-11 864
一个AttributeSource中包含着一个由不同AttributeImpl组成的列表，以及添加和获取AttributeImpl的一些方法。 内部类：State，标示每个AttributeImpl的状态 AttributeSource()：默认使用AttributeFactory.DEFAULT_ATTRIBUTE_FACTORY public AttributeSource() {
Lucene--简单的写与读
阿肥猪的博客
09-08 747
package com.lucene.demo1; import org.apache.lucene.analysis.Analyzer; import org.apache.lucene.analysis.standard.StandardAnalyzer; import org.apache.lucene.document.Document; import org.apache.lucene
Lucene--AttributeImpl
阿肥猪的博客
09-11 469
AttributeImpl：所有Attributes的基类，Attributes通常用来以动态的，线程安全的方式往一个流的数据源中添加数据 clear()：清除AttributeImpl的值并重置为默认值，如果继承了多个Attribute，讲清除所有 reflectAsString(final boolean prependAttClass)：把attributes转为字符串，prepen
apache. lucene.store.alreadyclosedexception: this indexwriter is closed
最新发布
06-10
这个错误通常发生在使用 Apache Lucene 的 IndexWriter 时，当尝试在 IndexWriter 已经关闭的情况下执行操作时会抛出该异常。 解决这个问题的方法是，在使用 IndexWriter 的时候要确保在所有操作完成之后，调用 ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值