敏感词过滤golang

本文介绍了使用Golang编写的敏感词过滤工具,主要用于检查用户昵称中是否存在敏感词汇,并具备去除转移字符的功能。工具通过将敏感词库存储为map,然后遍历昵称的每个子串与敏感词库进行匹配,实现检测。其时间复杂度为O(len(name)^2)。
摘要由CSDN通过智能技术生成

 用golang写了敏感词过滤的工具,主要用来检测用户昵称中是否存在敏感词,同时提供剔除转移字符的功能。

可以先将敏感词库存放在一个map中,敏感词可以参考这里:https://github.com/fwwdn/sensitive-stop-words

将map和昵称传入,程序会检查昵称的每一个子串,判断是否在map敏感词库中。复杂度O(len(name)^2)

package util

import (
	"github.com/pkg/errors"
	"strings"

)

type filter struct {
	data        string
	maxLimitLen int
}

func NewKeywordFilter(str string, maxLimitLen int) (*filter, error) {
	if len(str) > maxLimitLen {
		return nil, errors.Errorf("长度:%d,不能超过:%d", len(str), maxLimitLen)
	}
	return &filter{
		data:        str,
		maxLimitLen: maxLimitLen,
	}, nil
}

func (f *filter) GetData() string {
	return f.data
}

func (f *filter) FilterKeywords(keywords map[string]bool) (err error) {
	if keywords == nil {
		return
	}
	for i := 0; i < len(f.data); i++ {
		for j
  • 0
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值