2016年04月_Wiking__acm

原创 CNN 可视化结果分析

可视化结果分别从以下几个角度做分析：1 看每个卷积层经过激活函数（relu）后的输出图像第一个卷积层的结果（相对比较容易懂）：为了方便人眼观察，对每一幅图的像素值都做了一个放大，做法是除以这幅图的最大像素值然后乘以255。灰度图中越亮的部分，就说明原来的值越大。注意，这样的做法导致，不同的图中比较像素点的相对亮度是没有意义的。原图：

2016-04-28 13:12:34 7342 5

原创 Deep Learning (Ian Goodfellow, Yoshua Bengio and Aaron Courville) 阅读笔记

Ian Goodfellow, Yoshua Bengio and Aaron Courville 合著的《Deep Learning》终于写完了，并且放在网上可以在线免费阅读。网址：http://www.deeplearningbook.org一些笔记整理于此。

2016-04-23 11:15:54 10251

原创 CNN 识别图形验证码

用卷积神经网络预测可变长的验证码，模型用的谷歌的这篇《Multi-digit Number Recognition from Street View Imagery using Deep Convolutional Neural Networks》。代码在github上：https://github.com/xingjian-f/Captcha-hacker.git

2016-04-13 18:34:01 6926

原创《机器学习（周志华）》习题5.5答案

编程实现标准BP算法（sgd）和累积BP算法（fullbatch），在西瓜3.0上训练一个单隐层网络，并进行比较。需要先把字符串转成数字，这里用one-hot。把二分类问题看成多分类问题的特例，然后用softmax。最终模型在训练集上可达到100%准确率，并且在西瓜3.0@上也可以达到100%，与前面的逻辑回归相比，多了一个隐层的非线性变换，模型的表达能力确实强大了很多!经试验，隐层大小至

2016-04-05 20:24:26 3714

原创《机器学习（周志华）》习题3.3答案

编程实现对率回归，并给出西瓜数据集3.0@上的结果。对率回归即逻辑回归，可以看做没有隐藏层的，用sigmoid做激活函数，crossentropy做cost（不加regularization）的神经网络。本题用theano实现，调参时，learning rate 设为1，更大则cost会出现震荡，迭代次数设为10000可收敛，但是，训练效果并不好，最高准确率也只有70%。简单分析，根据前面

2016-04-05 13:59:19 5233 1

原创《机器学习（周志华）》习题10.1 答案

编程实现K邻近分类器，在西瓜数据集3.0@(属性只有密度与含糖率)上，比较其分类边界与决策树分类边界之异同。KNN决策面图如下：

2016-04-03 14:30:01 4968

原创《机器学习（周志华）》习题7.3答案

编程实现拉普拉斯修正的朴素贝叶斯，西瓜3.0训练集，“测1”样本测试。不加拉普拉斯修正跑的数据，部分和书上不一致（P(蜷缩，是)和P（凹陷，是）），经检查是书中错误。代码如下：# coding: utf-8import mathimport numpy as npfile = open('西瓜数据集3.csv'.decode('utf-8'))filedata = [line

2016-04-01 15:41:47 3771

勿忘初衷