Machine Learning - Andrew Ng on Coursera (Week 4)

最新推荐文章于 2018-12-21 16:57:09 发布
最新推荐文章于 2018-12-21 16:57:09 发布
阅读量1.3k 收藏
点赞数
分类专栏： Machine Learning - Andrew Ng

本篇文章将分享Coursera上Andrew Ng的Machine Learning第四周的课程，主要内容有如下，详细内容可以参考文末附件：

动机

为什么要引入神经网络？在分类问题中，特别是在非凸边界函数的情况下，要将用样本训练分类器，假设公式[Math Processing Error]会写的比较复杂，两个变量的问题可能会涉及到三阶以及上的项，特征变量的数量如果随之增加，那么求解的难度会成倍地增加。

特别的，在机器视觉相关问题中，一块图像区域可能包含成千上万个像素点，如果都作为特征变量的话用线性回归或者逻辑回归会使问题变得尤为复杂。通常在图像分类问题中都采用的是神经网络算法，通过提取特定区域的像素值作为特征变量进行训练和识别，可以有效提高正确率和效率。

神经网络算法最早是人们为了发明一种算法来模拟人脑的学习过程，曾经在八十年代以及九十年代早期广泛应用，而在九十年代末期使用热情退却过一段时间，主要是受限于当年计算机的运算速度。而后又因为计算机运算速度突飞猛进而重新被大家重视并广泛应用。

有一些有趣的实验证实，虽然大脑可以完成许多看似不相关的任务，如听、触、看、闻等等，但实际上只用一种算法就可以搞这些任务。其中一个实验是将听觉神经切断，将相应的大脑皮层区域连接到视觉神经上，在这种情况下动物就可以用本该负责听觉的区域用于视觉的学习。另一个类似的实验是将触觉神经切断，让触觉的大脑皮层区域学会“看”。这个发现会有很多的应用，如帮助视觉残疾的人学会用舌头看东西，用声音定位，用磁场感应方向以及用移植的第三只眼学会看东西（现实版的“二郎神”）。

神经网络

前面提到神经网络是人类模仿神经工作方式的一种算法，本节就从神经细胞开始，切入到神经网络模型的表示。神经细胞有树突和轴突，树突作为参数输入的接收部分，将电信号经过“计算”，由轴突转递给下一个神经元，直到最后。

神经网络模型也是一样，可以接受多个参数的输入，由结点经过计算后输出结果。一般用逻辑回归作为激活函数，也就是从输入参数转换为计算结果的计算过程。另外，一般在每一层除了输入以外，还会加一个偏置单元。这个偏置单元的作用主要控制神经元产生正/负激励的难易，参考请戳此处。

一般模型分为三层，分别是输入层、隐藏层和输出层。如果多于三层的话，除了第一层和最后一层，都是隐藏层。[Math Processing Error]表示第[Math Processing Error]层的激励函数，[Math Processing Error]表示第[Math Processing Error]到[Math Processing Error]层的权重矩阵。以下图中三层神经网络模型为例，

三层神经网络模型

[Math Processing Error]

[Math Processing Error]

[Math Processing Error]

[Math Processing Error]

其中，[Math Processing Error]是Sigmod函数。整个传播过程就是由前向后，从输入一直到输出。

应用

本节简述了以神经网络模型实现XOR（异或门）和XNOR（同或门）的例子。从最简单的AND、OR、NOT讲起，深入浅出地将神经网络应用于实际的问题中去。调整的就是各输入变量和偏置单元的权重参数，利用真值表检验结果是否正确。而XOR和XNOR就是利用不同的基础的神经元上进行组合，以得到正确的结果。最后还展示了一个手写数字识别的小Demo，非常有意思。

在利用神经网络模型处理多分类的问题时，采用的是和逻辑回归类似的One-vs-all思想，需要调整的就是将原来只有一个输出结点变为多个，并使不同输出结点互斥。即输出层变为对应[Math Processing Error]类的[Math Processing Error]的列向量，不再用1,2,3,4表示各类。

附本次分享演示文档：ML-Coursera-Week4

beihangzxm123
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Coursera Machine Learning 第四周week4 ex3NeuralNetworks编程全套满分题目+注释
12-06
Coursera Machine Learning 第四周week4 ex3Multi-class Classication and Neural Networks编程全套满分题目+注释
神经网络实现分类matlab代码-MachineLearningIntro-AndrewNg-Coursera:MachineLearning
06-16
Machine Learning Course of 斯坦福大学 Coursera 的 Andrew Ng 硬件的评分结果在“成绩”文件夹中 ##周 01： ##周 02： ##week 03: Logistical Regression FILES ex2.m : 运行 Logistical Regression 练习 X, y 从...
Machine Learning(Andrew)Week4
DanaMeng的专栏
04-05 813
Neural Networks: Representation 1、非线性分类（Non-linear hypotheses） 前面谈到的分类器都是线性的，如果点线性不可分呢？ 如：   我们可以用多项式：   但是，如果特征有100个呢？   多项式就有好多种： 特征组合 hθ(x) 1个 任意2个（有好
Coursera-week 4
christina_h的博客
07-27 190
Explanatory : x = frequency of drinking beer response: y= alcohol dependence   import pandas import numpy import seaborn import matplotlib.pyplot as plt data = pandas.read_csv('nesarc_pds.csv', ...
Andrew Ng's Machine Learning in Coursera(I)
少年，来打昆特牌吗？
08-24 1501
Supervised Learning Part I:Liner Regression   KeyWords:feature,hypothesis,cost  Main methods to actualize: CostFunction,GradientDescent,NormalEquation To the features such as x1,x2 we have a hy
Coursera week4 Programming Assignment 4: 8 Puzzle
sun%moon
12-21 401
题目链接 8 puzzle 题意简介 拼图游戏，该拼图板是一个n*n的方格，但是只放了n*n-1个卡片，有一个空卡片便于我们移动，要求最后把拼图按照从上到下从左到右的顺序放卡片(1~n*n-1)，求最少的步数。 题目解析 1、使用A*搜索算法，其实就是BFS的变体，每次选择优先级最高的节点出队列。我们直接使用老师提供的MinPQ数据结构即可。 2、剪枝。代码中设计了一个数据结构，一个私有类——No...
机器学习课程-AndrewNg：我的第一门机器学习课
03-03
机器学习课程AndrewNg 我的第一门机器学习课 week1：具有一个变量的线性回归； 线性代数复习; week2：具有多个变量的线性回归； Matlab教程； 第3周：逻辑回归； 正规化； 第4周：神经网络及其应用； 第5周：神经...
Andrew Ng's Machine Learning I
08-24
Coursera 上 andrew ng 的机器学习week 1的作业文档
Andrew Ng 's machine learning lecture note (15)
FrostMonarch的博客
06-07 290
Anomaly detectionThis algorithm can help us to realize that whether some data sets are abnormal. We should follow the steps:(1)Choose the features that you think may relate to anomalous examples(2)(3)
Machine Learning - Andrew Ng on Coursera (Week 5)
Leo的博客
03-28 1713
本篇文章将分享Coursera上Andrew Ng的Machine Learning第五周的课程，主要内容有如下，详细内容可以参考文末附件： 代价函数及后向算法 Cost function(代价函数) Backpropagation algorithm(BP算法 or 反向传播算法) 后向算法求解神经网络模型 Implementation note
Andrew Ng(吴恩达)coursera ML课程编程Matlab答案
11-02
Andrew Ng(吴恩达)coursera ML课程编程Matlab答案，个人编程，仅供参考。
Coursera机器学习基石笔记week4
loserChen的博客
11-10 345
Feasibility of Learning Learning is Impossible？ 我们想要在D以外的数据中更接近目标函数似乎是做不到的，只能保证对D有很好的分类结果。机器学习的这种特性被称为没有免费午餐（No Free Lunch）定理。NFL定理表明没有一个学习算法可以在任何领域总是产生最准确的学习器。不管采用何种学习算法，至少存在一个目标函数，能够使得随机猜测算法是更好的算法。 ...
Machine Learning - week 4 - 习题
weixin_30924239的博客
09-06 181
1. 第一个。，是对的。 第二个。结果只会认出是一类，如图：。但这里是为了举例子，实际上不会恰好是 1。而是选择最大概率表示的类别。所以是错误的。 第三个：所有基于 0，1 的逻辑方程都可以使用神经网络来表示。真值表是有限的，所以可以。 第四个：一个两层的神经网络可以用来表示 XOR。将两层合为一层？ 还是有错误 2. 获取真值表，再与选项中的对比，可知为 NAND...
Machine Learning - 神经网络的表示和学习 (Week 4 - 5)
皮皮blog
03-07 5414
http://blog.csdn.net/pipisorry/article/details/44119187机器学习Machine Learning - Andrew NG courses学习笔记Machine Learning - VIII. Neural Networks Representation神经网络的表示 (Week 4)Machine Learning - IX. Neural
Coursera-Deep Learning Specialization 课程之（四）：Convolutional Neural Networks: -weak4编程作业
leaeason的博客
11-14 8487
人脸识别Face Recognition for the Happy Housefrom keras.models import Sequential from keras.layers import Conv2D, ZeroPadding2D, Activation, Input, concatenate from keras.models import Model from keras.laye
coursera deep learning course4 week4
yb564645735的博客
12-25 501
Face recognition face verification vs. face recognition one-shot learning 比如你要为公司设置一个人脸识别，但是一般情况，你不会有太多员工的照片，要是按照以往的做法输入一张图片，然后用softmax输出，效果会很照顾，因为你没有足够的样本。并且当一个新员工加入时，softmax又需要添加一个输出，是难以实现的。
Stanford 机器学习笔记 Week4 Neural Networks: Representation
Baoli1008的专栏
02-21 908
MotivationsNon-linear Hypotheses线性回归不能解决的问题：在分类问题中，分类边界实际上是一个由各个参数构成的多项式。当参数很少时（比如只有x1,x2），多项式还可以构造出来，但是当参数很多（假设有x1….x100），构造出的多项式的项数将非常多。对于n个参数的2次多项式，项数大约是n^2/2个。一个问题：给定一幅图，如何确定是不是一辆汽车？一种方法是把图片的每个像素点作
[Coursera][Stanford] Machine Learning Week 4
Fighting
08-18 1429
时间：8月16日 -- 18 日
[Coursera机器学习]Multi-class Classi cation and Neural Networks WEEK4编程作业
Index.html
10-08 2094
1.3.3 Vectorizing regularized logistic regressionNow modify your code in lrCostFunction.m to account for regularization.Once again, you should not put any loops into your code. 此处参考上一周加入正则化的逻辑回归代码即可。n
coursera-ml-andrewng-notes-master.zip
最新发布
06-27
### 回答1： Coursera-ml-andrewng-notes-master.zip是一个包含Andrew Ng的机器学习课程笔记和代码的压缩包。这门课程是由斯坦福大学提供的计算机科学和人工智能实验室（CSAIL）的教授Andrew Ng教授开设的，旨在通过深入浅出的方式介绍机器学习的基础概念，包括监督学习、无监督学习、逻辑回归、神经网络等等。 这个压缩包中的笔记和代码可以帮助机器学习初学者更好地理解和应用所学的知识。笔记中包含了课程中涉及到的各种公式、算法和概念的详细解释，同时也包括了编程作业的指导和解答。而代码部分包含了课程中使用的MATLAB代码，以及Python代码的实现。 这个压缩包对机器学习爱好者和学生来说是一个非常有用的资源，能够让他们深入了解机器学习的基础，并掌握如何运用这些知识去解决实际问题。此外，这个压缩包还可以作为教师和讲师的教学资源，帮助他们更好地传授机器学习的知识和技能。 ### 回答2： coursera-ml-andrewng-notes-master.zip 是一个 Coursera Machine Learning 课程的笔记和教材的压缩包，由学生或者讲师编写。这个压缩包中包括了 Andrew Ng 教授在 Coursera 上发布的 Machine Learning 课程的全部讲义、练习题和答案等相关学习材料。 Machine Learning 课程是一个介绍机器学习的课程，它包括了许多重要的机器学习算法和理论，例如线性回归、神经网络、决策树、支持向量机等。这个课程的目标是让学生了解机器学习的方法，学习如何使用机器学习来解决实际问题，并最终构建自己的机器学习系统。 这个压缩包中包含的所有学习材料都是免费的，每个人都可以从 Coursera 的网站上免费获取。通过学习这个课程，你将学习到机器学习的基础知识和核心算法，掌握机器学习的实际应用技巧，以及学会如何处理不同种类的数据和问题。 总之，coursera-ml-andrewng-notes-master.zip 是一个非常有用的学习资源，它可以帮助人们更好地学习、理解和掌握机器学习的知识和技能。无论你是机器学习初学者还是资深的机器学习专家，它都将是一个重要的参考工具。 ### 回答3： coursera-ml-andrewng-notes-master.zip是一份具有高价值的文件，其中包含了Andrew Ng在Coursera上开授的机器学习课程的笔记。这份课程笔记可以帮助学习者更好地理解掌握机器学习技术和方法，提高在机器学习领域的实践能力。通过这份文件，学习者可以学习到机器学习的算法、原理和应用，其中包括线性回归、逻辑回归、神经网络、支持向量机、聚类、降维等多个内容。同时，这份笔记还提供了很多代码实现和模板，学习者可以通过这些实例来理解、运用和进一步深入研究机器学习技术。 总的来说，coursera-ml-andrewng-notes-master.zip对于想要深入学习和掌握机器学习技术和方法的学习者来说是一份不可多得的资料，对于企业中从事机器学习相关工作的从业人员来说也是进行技能提升或者知识更新的重要资料。因此，对于机器学习领域的学习者和从业人员来说，学习并掌握coursera-ml-andrewng-notes-master.zip所提供的知识和技能是非常有价值的。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值