1.概述 分词器基本分为四类,SimpleAnalyzer,StopAnalyzer,WhitespaceAnalyzer,StandardAnalyzer. 2.Token 这里主要涉及 Tokenizer,TokenFilter Tokenizer: 将一组数据划分为不同的词汇单元 TokenFilter: 数据过滤 类结构图如下