lucene-Nutch分析

分析:Nutch在索引时进行分析所使用的二元语法技术与查询过程中对短语的优化技术结合在一起。

public class NutchExample{

     public static void main(String[] args) throws IOException{

          NutchDocumentAnalyze analyer=new NutchDocumentAnalyzer();

          displayTokenWithDetails(analyzer,"The quick brown fox...");

          net.nutch.searcher.QuerynutchQuery=net.nutch.searcher.Query.parse("/"the quick

         brown/"");

          Query query=QueryTranslator.translate(nutchQuery);

          System.out.println("query="+query);

     }

}

输出为

1:[the:<WORD>][the-quick:gram]

2:[quick:<WORD>]

3:[brown:<WORD>]

4:[fox:<WORD>]

可见th-quick和the处于相同位置,Nutch没有错过停用词,因为很多进修停用词和后面的词一起表达语意

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值