AC自动机

AC自动机简介

首先简要介绍一下AC自动机:Aho-Corasick automation,该算法在1975年产生于贝尔实验室,是著名的多模匹配算法之一。一个常见的例子就是给出n个单词,再给出一段包含m个字符的文章,让你找出有多少个单词在文章里出现过。要搞懂AC自动机,先得有字典树Trie和KMP模式匹配算法的基础知识。KMP算法是单模式串的字符匹配算法,AC自动机是多模式串的字符匹配算法。

1.多模式匹配。
例如:求出模式集合{“nihao”,”hao”,”hs”,”hsr”}在给本”sdmfhsgnshejfgnihaofhsrnihao”中所有可能出现的位置。

2.Aho-Corasick算法 
  使用Aho-Corasick算法需要三步:
  1.建立模式的Trie。
  2.给Trie添加失败路径。
  3.根据AC自动机,搜索待处理的文本。
下面说明这三步:

2.1建立多模式集合的Trie树
Trie树也是一种自动机。对于多模式集合{“say”,”she”,”shr”,”he”,”her”},对应的Trie树如下:
这里写图片描述
2.2为多模式集合的Trie树添加失败路径,建立AC自动机
构造失败指针的过程概括起来就一句话:设这个节点上的字母为C,沿着他父亲的失败指针走,直到走到一个节点,他的儿子中也有字母为C的节点。然后把当前节点的失败指针指向那个字母也为C的儿子。如果一直走到了root都没找到,那就把失败指针指向root。
这里写图片描述

2.3根据AC自动机,搜索待处理的文本
构造好Trie和失败指针后,我们就可以对主串进行扫描了。这个过程和KMP算法很类似,但是也有一定的区别,主要是因为AC自动机处理的是多串模式,需要防止遗漏某个单词,所以引入temp指针。
匹配过程分两种情况:(1)当前字符匹配,表示从当前节点沿着树边有一条路径可以到达目标字符,此时只需沿该路径走向下一个节点继续匹配即可,目标字符串指针移向下个字符继续匹配;(2)当前字符不匹配,则去当前节点失败指针所指向的字符继续匹配,匹配过程随着指针指向root结束。重复这2个过程中的任意一个,直到模式串走到结尾为止。
对照上图,看一下模式匹配这个详细的流程,其中模式串为yasherhs。对于i=0,1。Trie中没有对应的路径,故不做任何操作;i=2,3,4时,指针p走到左下节点e。因为节点e的count信息为1,所以cnt+1,并且讲节点e的count值设置为0,表示改单词已经出现过了,防止重复计数,最后temp指向e节点的失败指针所指向的节点继续查找,以此类推,最后temp指向root,退出while循环,这个过程中count增加了2。表示找到了2个单词she和he。当i=5时,程序进入第5行,p指向其失败指针的节点,也就是右边那个e节点,随后在第6行指向r节点,r节点的count值为1,从而count+1,循环直到temp指向root为止。最后i=6,7时,找不到任何匹配,匹配过程结束。

AC自动机的源代码

1.数据结构

typedef struct Tnode
{
    int count;         //每个单词的最后一个字母的coount!=0代表有几个这样的单词
    char ch;
    struct Tnode* fail;  // 该节点的fail指针用于扫描
    struct Tnode* next[26]; //记录该节点的下一个字母的节点
    struct Tnode* parent;   //记录该节点的父节点 在构建fail指针时用到
}TrilNode,*TrilTree;

2.对每个节点的fail域赋值。赋值采用BFS来进行。其中root的fail指针赋为NULL。root的parent指针也赋为root。其他没有找到匹配的节点时将其赋为root.

void buildFail(TrilTree root)
{
    queue<TrilTree> Q;
    TrilNode* t=NULL;
    Q.push(root);
    while(!Q.empty())
    {
        TrilNode* node=Q.front();
        t=node->parent;
        while(t->fail!=NULL)       //给node节点的fail赋值
        {
           if(t->fail->next[node->ch-'a']!=NULL)
           {
               node->fail=t->fail->next[node->ch-'a'];
               break;
           }
           else
            t=t->fail;
        }
        if(t->fail==NULL&&node!=root)
            node->fail=root;
        for(int i=0;i<26;i++)
        {
            if(node->next[i]!=NULL)
                Q.push(node->next[i]);
        }
        Q.pop();
    }
}

3.对目标串进行扫描。

int searchAC(string s,TrilTree root)
{
    int len=s.size();
    int num=0;
    TrilNode* q=NULL;
    TrilNode* p=root;
    for(int i=0;i<len;i++)
    {
        if(p->next[s[i]-'a']==NULL)
        {
            while(p->fail!=NULL)
            {
                p=p->fail;
                if(p->next[s[i]-'a']!=NULL)
                {
                    p=p->next[s[i]-'a'];
                    break;
                }
            }
            if(p==root)
            {
                continue;
            }
        }
        else
        {
            p=p->next[s[i]-'a'];
        }
        if(p->count!=0)
        {
            num+=p->count;
            p->count=0;
            q=p->fail;
            while(q!=NULL)
            {
                if(q->count!=0)
                {
                    num+=q->count;
                    q->count=0;
                }
                q=q->fail;
            }
        }
    }
    return num;
}

最终代码只要在main函数里面分别根据函数的格式进行调用即可。完整代码如下:

#include <iostream>
#include<string>
#include<cstdlib>
#include<queue>
using namespace std;

typedef struct Tnode
{
    int count;         //每个单词的最后一个字母的coount!=0代表有几个这样的单词
    char ch;
    struct Tnode* fail;  // 该节点的fail指针用于扫描
    struct Tnode* next[26]; //记录该节点的下一个字母的节点
    struct Tnode* parent;   //记录该节点的父节点 在构建fail指针时用到
}TrilNode,*TrilTree;

void buildTril(string s,TrilTree root)
{
     TrilNode*p=root;
     int len=s.size();
     for(int i=0;i<len;i++)
     {
         if(p->next[s[i]-'a']==NULL)
         {
             TrilNode* node=(TrilNode*)malloc(sizeof(TrilNode));
             for(int i=0;i<26;i++)
                node->next[i]=NULL;
             node->count=0;
             node->next[s[i]-'a']=NULL;
             node->parent=p;
             node->ch=s[i];
             p->next[s[i]-'a']=node;
         }
         p=p->next[s[i]-'a'];
     }
     p->count++;
}

void buildFail(TrilTree root)
{
    queue<TrilTree> Q;
    TrilNode* t=NULL;
    Q.push(root);
    while(!Q.empty())
    {
        TrilNode* node=Q.front();
        t=node->parent;
        while(t->fail!=NULL)       //给node节点的fail赋值
        {
           if(t->fail->next[node->ch-'a']!=NULL)
           {
               node->fail=t->fail->next[node->ch-'a'];
               break;
           }
           else
            t=t->fail;
        }
        if(t->fail==NULL&&node!=root)
            node->fail=root;
        for(int i=0;i<26;i++)
        {
            if(node->next[i]!=NULL)
                Q.push(node->next[i]);
        }
        Q.pop();
    }
}

int searchAC(string s,TrilTree root)
{
    int len=s.size();
    int num=0;
    TrilNode* q=NULL;
    TrilNode* p=root;
    for(int i=0;i<len;i++)
    {
        if(p->next[s[i]-'a']==NULL)
        {
            while(p->fail!=NULL)
            {
                p=p->fail;
                if(p->next[s[i]-'a']!=NULL)
                {
                    p=p->next[s[i]-'a'];
                    break;
                }
            }
            if(p==root)
            {
                continue;
            }
        }
        else
        {
            p=p->next[s[i]-'a'];
        }
        if(p->count!=0)
        {
            num+=p->count;
            p->count=0;
            q=p->fail;
            while(q!=NULL)
            {
                if(q->count!=0)
                {
                    num+=q->count;
                    q->count=0;
                }
                q=q->fail;
            }
        }
    }
    return num;
}

int main()
{
    int m,n,Num;
    string s,t;
    TrilNode* node=NULL;
    TrilTree root;
    root=(TrilTree)malloc(sizeof(TrilNode));
    root->count=0;
    root->fail=NULL;
    root->parent=root;
    root->ch='#';
    for(int i=0;i<26;i++)
        root->next[i]=NULL;
    cin>>m;
    while(m--)
    {
        cin>>n;
        for(int i=0;i<n;i++)
        {
            cin>>s;
            buildTril(s,root);
        }
        cin>>t;
        buildFail(root);
        Num=searchAC(t,root);
        cout<<Num;
    }
    return 0;
}
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
资源包主要包含以下内容: ASP项目源码:每个资源包中都包含完整的ASP项目源码,这些源码采用了经典的ASP技术开发,结构清晰、注释详细,帮助用户轻松理解整个项目的逻辑和实现方式。通过这些源码,用户可以学习到ASP的基本语法、服务器端脚本编写方法、数据库操作、用户权限管理等关键技术。 数据库设计文件:为了方便用户更好地理解系统的后台逻辑,每个项目中都附带了完整的数据库设计文件。这些文件通常包括数据库结构图、数据表设计文档,以及示例数据SQL脚本。用户可以通过这些文件快速搭建项目所需的数据库环境,并了解各个数据表之间的关系和作用。 详细的开发文档:每个资源包都附有详细的开发文档,文档内容包括项目背景介绍、功能模块说明、系统流程图、用户界面设计以及关键代码解析等。这些文档为用户提供了深入的学习材料,使得即便是从零开始的开发者也能逐步掌握项目开发的全过程。 项目演示与使用指南:为帮助用户更好地理解和使用这些ASP项目,每个资源包中都包含项目的演示文件和使用指南。演示文件通常以视频或图文形式展示项目的主要功能和操作流程,使用指南则详细说明了如何配置开发环境、部署项目以及常见问题的解决方法。 毕业设计参考:对于正在准备毕业设计的学生来说,这些资源包是绝佳的参考材料。每个项目不仅功能完善、结构清晰,还符合常见的毕业设计要求和标准。通过这些项目,学生可以学习到如何从零开始构建一个完整的Web系统,并积累丰富的项目经验。
Python AC自动机是一个用于字符串匹配的算法,它可以高效地在一段文本中查找多个预定义的模式。它的实现可以使用多种库,其中包括ac自动机python和ahocorasick-python。 ac自动机python是一个对标准的ac自动机算法进行了完善和优化的实现,适用于主流的Python发行版,包括Python2和Python3。它提供了更准确的结果,并且可以通过pip进行安装,具体的安装方法可以参考官方文档或者使用pip install命令进行安装。 ahocorasick-python是另一个实现AC自动机的库,它也可以用于Python2和Python3。你可以通过官方网站或者GitHub源码获取更多关于该库的信息和安装指南。 对于AC自动机的使用,一个常见的例子是在一段包含m个字符的文章中查找n个单词出现的次数。要了解AC自动机,需要有关于模式树(字典树)Trie和KMP模式匹配算法的基础知识。AC自动机的算法包括三个步骤:构造一棵Trie树,构造失败指针和模式匹配过程。在构造好AC自动机后,可以使用它来快速地在文本中查找预定义的模式,并统计它们的出现次数。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* [ahocorasick-python:AC自动机python的实现,并进行了优化。 主要修复了 查询不准确的问题](https://download.csdn.net/download/weixin_42122986/18825869)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *2* *3* [Python实现多模匹配——AC自动机](https://blog.csdn.net/zichen_ziqi/article/details/104246446)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值