.Net平台高性能的关键字过滤组件

2019独角兽企业重金招聘Python工程师标准>>>

   KFilter是.Net平台高性能的关键字过滤组件，它提供了灵活的过滤机制能自适应大小写，半全角，简繁和分隔符处理等。经测试组件在处理处理6000或更多关键词的情况下单线程每秒可以达到上千万字检索的效能。

   关键字识别

       KFilter的关键字处理是非常灵活，它不紧识别关键字本身，对该关键字的大小写，半全角，简繁和分隔符等都会归纳到识别范围内。

   KFilter在处理数字和英文的时候也做了一些其他方面的工作，主要防止错杀的情况；如ava,java显然不是属于AV这个关键字范围。

使用  

      KFilter使用起来非常方便，只需要创建Keyword对象即可 

Keyword kw = new Keyword();
kw.Add("av");
kw.Matchs("java");

在添加关键字后就可以进行匹配操作，Keyword的主要方法有IsMatch,Match,Matchs和Replace方法。主要满足使用情况的需要

    IsMatch

    用于检测一个字符是存在关键字

    Match

    获取第一个匹配的关键字项Matchs

    获取所有匹配关键字项Replace

    替换所有匹配项，替换字符通过Keywork.ReplaceData设置替换字符。

   Keywork所有方法都是线程安全。

性能

     KFilter虽然存在多样性的匹配模式，但性能也比较出色在E1230V2的CPU下6k关键字每秒可以检索上千万字。检索结构通过树的方式处理，词的每个字符都会拆分到对应节点中。

 

转载于:https://my.oschina.net/lichaoqiang/blog/881223