SNN学习日记——安装SpikingJelly

1.安装

注意,SpikingJelly是基于PyTorch的,需要确保环境中已经安装了PyTorch,才能安装SpikingJelly。

奇数版本是开发版,随着GitHub/OpenI不断更新。偶数版本是稳定版,可以从PyPI获取。

 PyPI 安装最新的稳定版本(0.0.0.0.6)

pip install spikingjelly

2.构建第一个SNN网络对Mnist数据集分类

引用spikingjelly..clock_driven里的neuron就可以使用脉冲神经元了,这里以LIF为例:

import torch
import torch.nn as nn
from spikingjelly.clock_driven import neuron

class Net(nn.Module):
    def __init__(self,tau=100.0,v_threshold=1.0,v_reset=0.0):
        super().__init__()
        self.fc = nn.Sequential(
            nn.Flatten(),
            nn.Linear(28*28, 14*14, bias=False),
            neuron.LIFNode(tau=tau, v_threshold=v_threshold, v_reset=v_reset),
            nn.Linear(14*14,10,bias=False),
            neuron.LIFNode(tau=tau, v_threshold=v_threshold, v_reset=v_reset),
        )
    def forward(self,x):
        return self.fc(x)
也可以直接调用包里已经写好的程序来训练:
import spikingjelly.clock_driven.examples.lif_fc_mnist as lif_fc_mnist
lif_fc_mnist.main()

具体实现代码在https://github.com/fangwei123456/spikingjelly/blob/master/spikingjelly/clock_driven/examples/lif_fc_mnist.py

运行代码后会让你选择数据存储路径和训练的一些参数设置:

 之后开始训练:

准确率能到85%:

  • 4
    点赞
  • 26
    收藏
    觉得还不错? 一键收藏
  • 12
    评论
深度强化学习中的SNN神经网络通常用于建模和解决决策问题。以下是使用 PyTorch 框架搭建深度强化学习 SNN 神经网络的示例代码,供您参考: ```python import torch import torch.nn as nn import torch.optim as optim import torch.nn.functional as F class SNN(nn.Module): def __init__(self, input_size, output_size): super(SNN, self).__init__() self.input_size = input_size self.output_size = output_size self.hidden_size = 32 self.fc1 = nn.Linear(input_size, self.hidden_size) self.fc2 = nn.Linear(self.hidden_size, self.output_size) def forward(self, x): x = F.relu(self.fc1(x)) x = self.fc2(x) return x class DQN: def __init__(self, input_size, output_size, gamma): self.gamma = gamma self.model = SNN(input_size, output_size) self.optimizer = optim.Adam(self.model.parameters(), lr=0.001) self.criterion = nn.MSELoss() def update(self, state, action, reward, next_state, done): state = torch.tensor(state, dtype=torch.float32) action = torch.tensor(action, dtype=torch.long) reward = torch.tensor(reward, dtype=torch.float32) next_state = torch.tensor(next_state, dtype=torch.float32) q_values = self.model(state) q_value = q_values.gather(1, action.unsqueeze(1)).squeeze(1) next_q_values = self.model(next_state) max_next_q_value = next_q_values.max(1)[0] expected_q_value = reward + self.gamma * max_next_q_value * (1 - done) loss = self.criterion(q_value, expected_q_value.detach()) self.optimizer.zero_grad() loss.backward() self.optimizer.step() def act(self, state, epsilon): if torch.rand(1) < epsilon: return torch.randint(self.model.output_size, (1,)) else: with torch.no_grad(): state = torch.tensor(state, dtype=torch.float32) q_values = self.model(state) return q_values.max(0)[1].view(1, 1) ``` 在上述代码中,我们首先定义了一个 SNN 类,它包含一个全连接层和一个输出层。我们还定义了一个 DQN 类,它包含了一个 SNN 模型、一个优化器和一个损失函数。在 DQN 类中,我们定义了两个方法:update 和 act。update 方法用于更新模型的参数,act 方法用于根据当前状态选择动作。在 update 方法中,我们首先把状态、动作、奖励和下一个状态转换成张量,然后使用 Q-learning 的公式计算目标 Q 值,最后使用均方误差损失函数计算损失,并使用 Adam 优化器更新模型的参数。在 act 方法中,我们使用贪心策略或 ε-greedy 策略选择动作。 需要注意的是,以上代码仅仅是 DQN 算法使用 SNN 神经网络的一个示例,实际应用中可能需要根据具体情况进行修改。
评论 12
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值