lucene-语汇单元的位置分析

以下程序显示出了语汇单元的位置,

Token[] tokens=tokensFromAnalysis(analyzer,text);

    int position =0;

    for (int i=0;i<tokens.length;i++){

            Token token=tokens[i];

             

            intincrement=token.getPositionIncrement();//得到当前语汇单元增量位置,增量位置是指本单词与上一个单词的间隙,如果中间空有单词(如停用词),则间隙包括停用词。

             

            if (increment>0){

                 position=position+increment;//由增量位置得到当前语汇单元的实际位置

                System.out.println();

                System.out.print(position+":");

            }

            

            System.out.print("["+token.termText()+":"+token.startoffset()

             +"- >"+token.endoffset()+":"+token.type()+"]");

          }

  }

如"the quick brown"使用同义词分析器,则显示的结果是

1:[quick][speedy][fast]

2:[brown]

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值