【深度学习】
lansatiankong
这个作者很懒,什么都没留下…
展开
-
整理——Some basic questions about caffe and deep learning
Rectified Linear Units 摘自http://www.douban.com/note/348196265/ sigmoid 和 tanh 作为神经网络的激活函数已经很熟悉,今天看了一下 ReLU 这种线性激活函数。很显然,线性激活函数的计算开销又大大降低。而且很多工作显示 ReLU 有助于提升效果[1]. sigmoid: g(x) = 1 /(1+exp(-1)).原创 2015-07-15 23:33:50 · 980 阅读 · 0 评论 -
Caffe安装 Ubuntu14.04
Caffe安装基本参考 http://www.linuxidc.com/Linux/2015-07/120449.htm1. 安装开发依赖包sudo apt-get install build-essentialsudo apt-get install vim cmake gitsudo apt-get install libprotobuf-dev libleveldb-原创 2015-09-23 23:29:59 · 556 阅读 · 0 评论 -
Caffe 代码阅读
Caffe代码阅读—卷积部分Caffe卷积部分首先是将图像转换成一个列矩阵,然后把相应的卷积操作转换成了矩阵乘法。 CNN操作分为两步份,一部分是Forward操作,另一个是BP过程,要看懂BP首先得了解一下普通neural network的求导过程,还有在看一下《Notes on convolution networks 》看一下对于卷积网络的求导过程。首先看一下forward过程。 卷积网络原创 2015-10-05 23:39:04 · 2671 阅读 · 0 评论 -
CNN反向求导推导
本文主要是借助参考文献1《Notes on Convolutional Neural Networks》的内容,还博客【2】和【3】里面的内容,对卷积神经网络的推导做个梳理。输出层求导激活函数logistic function σ(x)=11+e−x\sigma(x)=\frac{1}{1+e^{-x}} hyperbolic tangent tanh(x)=e2x−1e2x+1tanh(x)=\原创 2015-11-05 22:48:29 · 6882 阅读 · 1 评论 -
Caffe-----ProtoBuffer ,How to use protobuffer in Ubuntu
Download Protobuffer$wget http://protobuf.googlecode.com/files/protobuf-2.5.0.tar.gz unzip$tar xvzf protobuf-2.5.0.tar.gz intstall$./configure$make$make check$make install$原创 2015-10-01 23:18:31 · 700 阅读 · 0 评论