立体神经网络

人的大脑有860亿个神经元,而神经元和其他神经元之间的连接多达上万个。所以有理由相信人类大脑的神经网络的隐藏层神经元节点之间应该是相互连接的。如果隐藏曾节点之间相互连接那么人类大脑的隐藏层就应该是立体的结构,假设一个神经网络第一层有4个节点,第二层也有4个节点


输入X输出是Y,第一层是AEHB,第二层是DFGC。与tensorflow的神经网络相比只是多了AB,BH,HE,EA,DC,CG,GF,FD共8条权重连接,如果把这8条连接去掉和tensorflow的神经网络结构是完全相同的,这里假设神经元起到阀门一样的功能,按照时间或者电压或其他生物指标可以屏蔽这8条连接,这个假设至少用计算机编程的方法可以很容易做到。将这个模型叫做F(X)=Y。
因为是立体结构有理由相信这8个点还可以同时支持别的模型




这个模型的输入是M输出是N,第一层是AEFD,第二层是BHGC。同样如果去掉AE,EF,FD,DA,BH,HG,GC,CB这8条连接这个模型和tensorflow的模型是一样的,并没有区别。按照神经元阀门的假设在输入M的同时将这8条连接屏蔽。经过训练形成模型F(M)=N。
那这两个模型是否可以共存?




这个模型8个节点同时支持两个模型F(X)=Y和F(M)=N,假设神经元阀门在这种多模型状态下仍然可以正常完成屏蔽,则这两个模型其实只有EG,EC,AG,AC这4条连接的权重是相同的,其余的权重值并不受影响。相当于两个tensorflow神经网络共享4个权重。
此时EG,EC,AG,AC这4个权重值用集合cross表示。用JHX表示F(X)=Y产生的权重集合,用JHM表示F(M)=N产生的权重集合。则这个立体的神经网络模型就等同于
F(X)=Y
F(M)=N
JHX  JHM=cross
所以这个立体神经网络模型相当于用一个模型去一部分初始化另一个模型。


  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

黑榆

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值