BBS论坛项目相关-4:发帖模块

BBS论坛项目相关-4:发帖模块

过滤敏感词

前缀树

trie,字典树,查找树
查找效率高,消耗内存大,应用:字符串检索,词频统计,字符串排序等

敏感词过滤器

定义前缀树,根据敏感词,初始化前缀树,编写过滤敏感词的方法

// 前缀树
    private class TrieNode {
   

        // 关键词结束标识
        private boolean isKeywordEnd = false;

        // 子节点(key是下级字符,value是下级节点)
        private Map<Character, TrieNode> subNodes = new HashMap<>();

        public boolean isKeywordEnd() {
   
            return isKeywordEnd;
        }

        public void setKeywordEnd(boolean keywordEnd) {
   
            isKeywordEnd = keywordEnd;
        }

        // 添加子节点
        public void addSubNode(Character c, TrieNode node) {
   
            subNodes.put(c, node);
        }

        // 获取子节点
        public TrieNode getSubNode(Character c) {
   
            return subNodes.get(c);
        }
    }

过滤器:

 // 替换符
    private static final String REPLACEMENT = "***";

    // 根节点
    private TrieNode rootNode = new TrieNode();

    @PostConstruct
    public void init() {
   
        try (
                InputStream is = this.getClass().getClassLoader().getResourceAsStream("sensitive-words.txt");
                BufferedReader reader = new BufferedReader(new InputStreamReader(is));
        ) {
   
            String keyword;
            while ((keyword = reader.readLine()) != null) {
   
                // 添加到前缀树
                this.addKeyword(keyword);
            }
        } catch (IOException e) {
   
            logger.error("加载敏感词文件失败: " + e.getMessage()
  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值