lucene java 实例_LUCENE简单实例

最新推荐文章于 2024-06-20 10:09:55 发布

周君笔

最新推荐文章于 2024-06-20 10:09:55 发布

阅读量332

点赞数

文章标签： lucene java 实例

本文链接：https://blog.csdn.net/weixin_29306011/article/details/114195638

版权

关键字: lucene

说明一下,这一篇文章的用到的lucene,是用2.0版本的,主要在查询的时候2.0版本的lucene与以前的版本有了一些区别.

其实这一些代码都是早几个月写的,自己很懒,所以到今天才写到自己的博客上,高深的文章自己写不了，只能记录下一些简单的记录与点滴，其中的代码算是自娱自乐的，希望高手不要把重构之类的砸下来...

1、在windows系统下的的C盘，建一个名叫s的文件夹,在该文件夹里面随便建三个txt文件，随便起名啦，就叫"1.txt","2.txt"和"3.txt"啦

其中1.txt的内容如下：

代码

中华人民共和国

全国人民

2006年

而"2.txt"和"3.txt"的内容也可以随便写几写，这里懒写，就复制一个和1.txt文件的内容一样吧

2、下载lucene包，放在classpath路径中

建立索引:

代码

packagelighter.javaeye.com;23importjava.io.BufferedReader;4importjava.io.File;5importjava.io.FileInputStream;6importjava.io.IOException;7importjava.io.InputStreamReader;8importjava.util.Date;910importorg.apache.lucene.analysis.Analyzer;11importorg.apache.lucene.analysis.standard.StandardAnalyzer;12importorg.apache.lucene.document.Document;13importorg.apache.lucene.document.Field;14importorg.apache.lucene.index.IndexWriter;1516

/** *//**17 * author lighter date 2006-8-718*/19

publicclassTextFileIndexer{20

publicstaticvoidmain(String[] args)throwsException{21

/**//*指明要索引文件夹的位置,这里是C盘的S文件夹下*/22 File fileDir=newFile("c:\\s");2324

/**//*这里放索引文件的位置*/25 File indexDir=newFile("c:\\index");26 Analyzer luceneAnalyzer=newStandardAnalyzer();27 IndexWriter indexWriter=newIndexWriter(indexDir, luceneAnalyzer,28true);29 File[] textFiles=fileDir.listFiles();30longstartTime=newDate().getTime();3132//增加document到索引去33

for(inti=0; i{34if(textFiles[i].isFile()35

&&textFiles[i].getName().endsWith(".txt")){36 System.out.println("File"+textFiles[i].getCanonicalPath()37+"正在被索引

.");38 String temp=FileReaderAll(textFiles[i].getCanonicalPath(),39"GBK");40 System.out.println(temp);41 Document document=newDocument();42 Field FieldPath=newField("path", textFiles[i].getPath(),43 Field.Store.YES, Field.Index.NO);44 Field FieldBody=newField("body", temp, Field.Store.YES,45 Field.Index.TOKENIZED,46 Field.TermVector.WITH_POSITIONS_OFFSETS);47 document.add(FieldPath);48 document.add(FieldBody);49 indexWriter.addDocument(document);50 }51 }52//optimize()方法是对索引进行优化53indexWriter.optimize();54 indexWriter.close();5556//测试一下索引的时间57longendTime=newDate().getTime();58 System.out59 .println("这花费了"60+(endTime-startTime)61+"毫秒来把文档增加到索引里面去!"62+fileDir.getPath());63 }6465publicstaticString FileReaderAll(String FileName, String charset)66

throwsIOException{67 BufferedReader reader=newBufferedReader(newInputStreamReader(68newFileInputStream(FileName), charset));69 String line=newString();70 String temp=newString();7172

while((line=reader.readLine())!=null){73 temp+=line;74 }75 reader.close();76returntemp;77 }78}

索引的结果：

代码

File C:\s\1.txt正在被索引....

中华人民共和国全国人民2006年

File C:\s\2.txt正在被索引....

中华人民共和国全国人民2006年

File C:\s\3.txt正在被索引....

中华人民共和国全国人民2006年

这花费了297 毫秒来把文档增加到索引里面去!c:\s

3、建立了索引之后，查询啦....

代码

packagelighter.javaeye.com;23importjava.io.IOException;45importorg.apache.lucene.analysis.Analyzer;6importorg.apache.lucene.analysis.standard.StandardAnalyzer;7importorg.apache.lucene.queryParser.ParseException;8importorg.apache.lucene.queryParser.QueryParser;9importorg.apache.lucene.search.Hits;10importorg.apache.lucene.search.IndexSearcher;11importorg.apache.lucene.search.Query;1213

publicclassTestQuery{14

publicstaticvoidmain(String[] args)throwsIOException, ParseException{15 Hits hits=null;16 String queryString="中华";17 Query query=null;18 IndexSearcher searcher=newIndexSearcher("c:\\index");1920 Analyzer analyzer=newStandardAnalyzer();21

try{22 QueryParser qp=newQueryParser("body", analyzer);23 query=qp.parse(queryString);24

}catch(ParseException e){25 }26

if(searcher!=null){27 hits=searcher.search(query);28

if(hits.length()>0){29 System.out.println("找到:"+hits.length()+"个结果!");30 }31 }32 }3334}

lucene简单实例

Lucene 其实很简单的,它最主要就是做两件事:建立索引和进行搜索

来看一些在lucene中使用的术语,这里并不打算作详细的介绍,只是点一下而已----因为这一个世界有一种好东西，叫搜索。

IndexWriter:lucene中最重要的的类之一，它主要是用来将文档加入索引，同时控制索引过程中的一些参数使用。

Analyzer:分析器,主要用于分析搜索引擎遇到的各种文本。常用的有StandardAnalyzer分析器,StopAnalyzer分析器,WhitespaceAnalyzer分析器等。

Directory:索引存放的位置;lucene提供了两种索引存放的位置，一种是磁盘，一种是内存。一般情况将索引放在磁盘上；相应地lucene提供了FSDirectory和RAMDirectory两个类。

Document:文档;Document相当于一个要进行索引的单元，任何可以想要被索引的文件都必须转化为Document对象才能进行索引。

Field：字段。

IndexSearcher:是lucene中最基本的检索工具，所有的检索都会用到IndexSearcher工具;

Query:查询，lucene中支持模糊查询，语义查询，短语查询，组合查询等等,如有TermQuery,BooleanQuery,RangeQuery,WildcardQuery等一些类。

QueryParser: 是一个解析用户输入的工具，可以通过扫描用户输入的字符串，生成Query对象。

Hits:在搜索完成之后，需要把搜索结果返回并显示给用户，只有这样才算是完成搜索的目的。在lucene中，搜索的结果的集合是用Hits类的实例来表示的。

上面作了一大堆名词解释，下面就看几个简单的实例吧:

1、简单的的StandardAnalyzer测试例子

代码

packagelighter.javaeye.com;23importjava.io.IOException;4importjava.io.StringReader;56importorg.apache.lucene.analysis.Analyzer;7importorg.apache.lucene.analysis.Token;8importorg.apache.lucene.analysis.TokenStream;9importorg.apache.lucene.analysis.standard.StandardAnalyzer;1011publicclassStandardAnalyzerTest12

{13//构造函数，14publicStandardAnalyzerTest()15

{16 }17publicstaticvoidmain(String[] args)18

{19//生成一个StandardAnalyzer对象20Analyzer aAnalyzer=newStandardAnalyzer();21//测试字符串22StringReader sr=newStringReader("lighter javaeye com is the are on");23//生成TokenStream对象24TokenStream ts=aAnalyzer.tokenStream("name", sr);25

try{26inti=0;27 Token t=ts.next();28while(t!=null)29

{30//辅助输出时显示行号31i++;32//输出处理后的字符33System.out.println("第"+i+"行:"+t.termText());34//取得下一个字符35t=ts.next();36 }37

}catch(IOException e){38 e.printStackTrace();39 }40 }41}42

显示结果：

引用

第1行:lighter

第2行:javaeye

第3行:com

提示一下：

StandardAnalyzer是lucene中内置的"标准分析器",可以做如下功能:

1、对原有句子按照空格进行了分词

2、所有的大写字母都可以能转换为小写的字母

3、可以去掉一些没有用处的单词，例如"is","the","are"等单词，也删除了所有的标点

查看一下结果与"new StringReader("lighter javaeye com is the are on")"作一个比较就清楚明了。

这里不对其API进行解释了，具体见lucene的官方文档。需要注意一点，这里的代码使用的是lucene2的API，与1.43版有一些明显的差别。

2、看另一个实例,简单地建立索引，进行搜索

代码

packagelighter.javaeye.com;2importorg.apache.lucene.analysis.standard.StandardAnalyzer;3importorg.apache.lucene.document.Document;4importorg.apache.lucene.document.Field;5importorg.apache.lucene.index.IndexWriter;6importorg.apache.lucene.queryParser.QueryParser;7importorg.apache.lucene.search.Hits;8importorg.apache.lucene.search.IndexSearcher;9importorg.apache.lucene.search.Query;10importorg.apache.lucene.store.FSDirectory;1112

publicclassFSDirectoryTest{1314//建立索引的路径15publicstaticfinalString path="c:\\index2";1617

publicstaticvoidmain(String[] args)throwsException{18 Document doc1=newDocument();19 doc1.add(newField("name","lighter javaeye com",Field.Store.YES,Field.Index.TOKENIZED));2021 Document doc2=newDocument();22 doc2.add(newField("name","lighter blog",Field.Store.YES,Field.Index.TOKENIZED));2324 IndexWriter writer=newIndexWriter(FSDirectory.getDirectory(path,true),newStandardAnalyzer(),true);25 writer.setMaxFieldLength(3);26 writer.addDocument(doc1);27 writer.setMaxFieldLength(3);28 writer.addDocument(doc2);29 writer.close();3031 IndexSearcher searcher=newIndexSearcher(path);32 Hits hits=null;33 Query query=null;34 QueryParser qp=newQueryParser("name",newStandardAnalyzer());3536 query=qp.parse("lighter");37 hits=searcher.search(query);38 System.out.println("查找\"lighter\"共"+hits.length()+"个结果");3940 query=qp.parse("javaeye");41 hits=searcher.search(query);42 System.out.println("查找\"javaeye\"共"+hits.length()+"个结果");4344 }4546}47

运行结果：

代码

查找"lighter" 共2个结果

查找"javaeye" 共1个结果

本转自:http://tb.blog.csdn.net/TrackBack.aspx?PostId=1797992

---------------------------------------------------------------------------------------------------------------------------------

说人之短，乃护己之短。夸己之长，乃忌人之长。皆由存心不厚，识量太狭耳。能去此弊，可以进德，可以远怨。

http://www.blogjava.net/szhswl

------------------------------------------------------------------------------------------------------ ----------------- ---------

posted on 2007-12-05 17:04 宋针还阅读(1134) 评论(0) 编辑收藏所属分类: 搜索引擎

周君笔

关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
lucene java 实例_LUCENE简单实例

关键字: lucene说明一下,这一篇文章的用到的lucene,是用2.0版本的,主要在查询的时候2.0版本的lucene与以前的版本有了一些区别.其实这一些代码都是早几个月写的,自己很懒,所以到今天才写到自己的博客上,高深的文章自己写不了，只能记录下一些简单的记录与点滴，其中的代码算是自娱自乐的，希望高手不要把重构之类的砸下来...1、在windows系统下的的C盘，建一个名叫s的文件夹,在...
复制链接

扫一扫