北方苍鹰算法(NGO)优化长短期记忆神经网络原理及MATLAB代码复现

目录

0 引言

1 数学模型

2 优化方式

3 MATLAB代码

3.1 伪代码

3.2 NGO主函数代码

3.3 NGO-LSTM

0 引言

北方苍鹰算法(Northern Goshawk Optimization,NGO)是MOHAMMAD DEHGHANI等人于2021年基于北方苍鹰的捕食行为提出的群智能算法,该算法模拟苍鹰在狩猎过程中对猎物的识别、猎物的逃生、苍鹰追逐及攻击的行为,作为算法寻优过程全局搜索和局部开发。

1 数学模型

NGO是的数学模型是苍鹰俩个阶段的模型理想化构建,第一阶段是随机识别猎物并进行攻击,第二阶段是猎物试图逃脱和苍鹰的追捕,以此作为模型全局搜索和局部开发,具体见下:

1)初始化:在NGO算法开始时,在搜索空间中随机初始化种群个体位置。具体位置和对应适应度解如下:

式中X为种群位置,F为种群位置对应适应度解,其中N为种群规模,m为问题维度。

2)猎物的识别和攻击(探索):北方苍鹰随机选择识别一个猎物,然后迅速攻击它。由于在搜索空间中对猎物的随机选择,这一阶段增加了算法的全局探索能力。其数学模型如下:

式中P为苍鹰随机识别猎物位置,Fp为猎物的适应度解,k为随机选择整数,用于帮助NGO候选解的随机跳跃,增强多样性;r是0到1的随机数,I是一个随机数,可以是1或2,式(5)新苍鹰位置更新,用于增强模型精度。

3)追逐和逃生操作(开发):在北方的苍鹰攻击猎物后,猎物试图逃跑。则北方苍鹰继续追逐猎物。由于北方苍鹰的高速发展,它们几乎可以在任何情况下追逐猎物并最终捕猎。因此该行为可以增强算法局部开发能力。具体表达式如下:

式中R为苍鹰追捕范围,以攻击猎物为中心的半径,t为当前迭代,T为最大迭代。

2 优化方式

前篇对长短期记忆神经网络(长短期记忆神经网络原理及Matlab代码复现-CSDN博客)原理讲解,从长短期记忆神经网络matlab代码运算过程中,可以看到LSTM受多个超参数影响(隐藏层节点、学习率、分批量、正则化等等)。因此结合上述NGO原理介绍,可以将长短期记忆神经网络的超参数作为北方苍鹰种群位置,每一个种群位置对应长短期记忆神经网络的预测值,将这个预测值作为适应度进行上述北方苍鹰捕食行为,更新更优的苍鹰个体。

3 MATLAB代码

3.1 伪代码

3.2 NGO主函数代码

%% 根据 搜索阶段和开发阶段更新北方苍鹰
    for i=1:Search_Agents
        %搜索阶段:猎物识别
        I=round(1+rand);% I是1或2的随机数2
        k=randperm(Search_Agents,1);
        P=X(k,:); % Eq. (3)
        F_P=fit(k);
        
        if fit(i)> F_P
            X_new(i,:)=X(i,:)+rand(1,dimensions) .* (P-I.*X(i,:)); % Eq. (4)
        else
            X_new(i,:)=X(i,:)+rand(1,dimensions) .* (X(i,:)-P); % Eq. (4)
        end
        X_new(i,:) = max(X_new(i,:),Lowerbound);
        X_new(i,:) = min(X_new(i,:),Upperbound);
        
        % Eq.(5)
        L=X_new(i,:);
        fit_new(i)=SYD(L,net);
        net.trainParam.showWindow = 0;
        if(fit_new(i)<fit(i))
            X(i,:) = X_new(i,:);
            fit(i) = fit_new(i);
        end
        
        % 开发阶段:尾随追逐
        R=0.02*(1-t/Max_iterations); %该狩猎点与攻击位置的半径Eq(7)
        X_new(i,:)= X(i,:)+ (-R+2*R*rand(1,dimensions)).*X(i,:);% Eq.(6)
        
        X_new(i,:) = max(X_new(i,:),Lowerbound);
        X_new(i,:) = min(X_new(i,:),Upperbound);
        
        % Eq (8)
        L=X_new(i,:);
        fit_new(i)=SYD(L,net);
        net.trainParam.showWindow = 0;
        if(fit_new(i)<fit(i))
            X(i,:) = X_new(i,:);
            fit(i) = fit_new(i);
        end       
    end

    best_so_far(t)=fbest; 
    average(t) = mean (fit);
    Score=fbest;
    Best_pos=xbest;
    NGO_curve(t)=Score;
end
end

3.3 NGO-LSTM

单输出回归预测模型、多输出回归预测模型、分类模型和时间序列模型的MATLAB代码复现:

北方苍鹰算法优化长短期记忆神经网络代码(NGO-LSTM)-CSDN博客

北方苍鹰NGO-BP)算法是一种结合了自组织映射(Self-Organizing Map,SOM)技术和改进的误差反向传播(Back Propagation,BP)神经网络技术的故障识别方法。其优化过程主要有以下几个步骤: 1. **预处理和特征提取**:首先对原始故障数据进行预处理,如归一化、降噪等,然后提取出关键特征,减少输入维度,提高算法效率。 2. **初始化NGO-BP网络**:SOM网络作为预训练层,用于发现数据集中的潜在结构。它通过竞争学习机制形成聚类,每个神经元代表一个数据空间中的模式。 3. **SOM训练**:利用原始数据对SOM网络进行训练,使得相邻节点之间的数据相似度高。这个阶段有助于将复杂的数据分布映射到低维空间。 4. **NGO-BP网络构建**:将训练好的SOM映射作为输入层,连接到一个传统的BP神经网络,作为输出层用于分类决策。SOM负责降低噪音和保持局部一致性,BP负责全局调整权重以优化分类精度。 5. **联合训练**:将两者结合起来,先通过SOM确定初始权值,再用BP进行微调。SOM部分固定不变,只更新BP网络的隐藏层权重,以适应从SOM得到的简化的输入特征。 6. **故障识别**:新的输入数据通过预训练的SOM层,再通过BP网络进行分类,输出对应故障类别。 流程总结就是:预处理数据 -> SOM网络初步划分 -> NGO-BP网络结构整合 -> 合成训练与优化 -> 新数据输入进行故障识别。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值