UFLDL学习笔记2（Preprocessing: PCA and Whitening）

最新推荐文章于 2020-09-02 15:52:26 发布
最新推荐文章于 2020-09-02 15:52:26 发布
阅读量3k 收藏
点赞数 2
文章标签： 机器学习 machine learning 无监督学习 PCA
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/richard2357/article/details/18145631
版权
本文是作者学习UFLDL教程的心得，重点介绍了PCA（主成分分析）这一降维方法。建议先从2D案例pca_2d.m入手，逐步理解PCA的原理。PCA的目标是实现数据的正交变换，并通过白化和ZCA Whitening调整特征方差，使数据更接近原始形态。代码已调试通过，适合初学者参考。
摘要由CSDN通过智能技术生成

最近在学习UFLDL Tutorial，这是一套关于无监督学习的教程。在此感觉Andrew Ng做的真的是非常认真。下面把我的代码贴出来，方便大家学习调试。所有代码已经过matlab调试通过。


PCA是一种用来降维的方法。个人推荐看Pattern Recognition And Machine Learning的第十二章作为辅助。该书写的极为详细。UFLDL上有两个练习。建议先做pca_2d.m，然后的pca_gen.m只需要把代码稍稍改动就可以了。这两个练习都只需要修改一个.m文件，相比上一节稀疏编码要容易一些。以下贴出了我自己的代码和运行结果。


一、pca_2d.m中的代码

Step 1a，获得正交变换的基，代码：

[dim,sampleN] = size(x);            %维数与样本数
x = x - mea
最低0.47元/天 解锁文章
richard2357
关注
斯坦福cs231n学习笔记（8）------神经网络训练细节（数据预处理、权重初始化）
huplion的专栏
01-21 1万+
神经网络训练细节系列笔记： 神经网络训练细节（激活函数） 神经网络训练细节（Batch Normalization） 神经网络训练细节（训练过程，超参数优化） 这一篇，我们将继续介绍神经网络训练细节。 一、Data Preprocessing（数据预处理） 如图是原始数据，数据矩阵X有三种常见的数据预处理形式，其中我们假定X的大小为[N×D]（N是数据的数量，D是它们的维数）。
PCA-Preprocessing:PCA 作为数据分析的预处理工具
07-03
PCAP预处理 该存储库具有代码、输入数据集和有关在原始数据上使用 PCA 预处理的分析结果，然后再对数据进行进一步操作以进行数据分析或预测分析。
DL四（预处理：主成分分析与白化 Preprocessing PCA and Whitening ）
weixin_33698823的博客
01-08 200
预处理：主成分分析与白化 Preprocessing：PCA and Whitening 一主成分分析 PCA 1.1 基本术语 　 主成分分析 Principal Components Analysis 白化 whitening 亮度 intensity 平均值 mean 方差 variance 协方差矩阵 covariance matrix 基 basis ...
Stanford UFLDL教程 Exercise:PCA and Whitening
GarfieldEr007的专栏
12-06 1309
Exercise:PCA and Whitening Contents [hide] 1 PCA and Whitening on natural images 1.1 Step 0: Prepare data 1.1.1 Step 0a: Load data1.1.2 Step 0b: Zero mean the data 1.2 Step
UFLDL Tutorial_Preprocessing: PCA and Whitening
Kylin-Xu的专栏
12-12 3105
PCA Contents  [hide] 1 Introduction2 Example and Mathematical Background3 Rotating the Data4 Reducing the Data Dimension5 Recovering an Approximation of the Data6 Number
【Deep Learning】2、Preprocessing: PCA and Whitening
极度视界
08-08 2239
预处理 PCA与白化
cs231n听课笔记
liubo7887的博客
11-26 705
最近报了Udacity一节Deep Learning的课，无奈该课重实践而轻理论，做起作业和项目来，颇为吃力，所以从YouTube上找来Stanford今年春天的cs231n（Neural Network and Deep Learning）课来恶补基础知识，并简略记了笔记、补足了涉及到论文的链接，以便以后查阅。其中的Assignment，以后会在github上补齐。
cs231n neural network 笔记
张小彬的专栏
02-15 4088
神经网络里的非线性是很重要且必不可少的。在全连接层之间引入非线性单元，可以让神经网络具有更强的表达能力。一个三层的神经网络可以大概写成这样子的形式，$$s = W_3\max(0, W_2\max(0,W_1x))$$ 中间的隐藏层神经元数量的大小可以自己设置。
深度学习 100 题（转）
weixin_30432179的博客
05-20 7759
深度学习 100 题（转） https://github.com/wizardforcel/data-science-notebook/tree/master/dl/%E6%B7%B1%E5%BA%A6%E5%AD%A6%E4%B9%A0_100_%E9%A2%98 来源：BAT面试1000题 1、梯度下降算法的正确步骤是什么？ a.计算预测值和真实值之间的误差 b.重...
UFLDL Tutorial Exercise Answer 练习题答案—softmax篇
07-29
UFLDL Tutorial 深度学习教程的答案，softmax篇，里面有for循环需要优化，请高人指点
UFLDL Tutorial Exercise Answer 练习题答案—AutoEncoder
07-29
UFLDL Tutorial深度学习的练习题答案，稀疏编码器一节，里面还有一个for循环是效率很低的，实在是不知道怎么改，要是有高人知道，请留言给我~
UFLDL教程之（三）PCA and Whitening exercise
weixin_30737363的博客
08-27 107
Exercise:PCA and Whitening 第0步：数据准备 UFLDL下载的文件中，包含数据集IMAGES_RAW，它是一个512*512*10的矩阵，也就是10幅512*512的图像 （a）载入数据 利用sampleIMAGESRAW函数，从IMAGES_RAW中提取numPatches个图像块儿，每个图像块儿大小为patchSize，并将提取到的图像块儿按列存放，分别存放在...
UFLDL 07 白化 whitening/sphering
bea_tree的博客
05-02 1845
什么是白化 白化是将不同特征去掉相关性，并且将新特征的数据的的方差化为相同。 至于为什么需要白化，文中只说了有些算法需要它作为预处理，quora上的一个问题也许会有帮助。 https://www.quora.com/Computer-Vision-In-sphering-whitening-what-advantage-does-making-the-features-have-the-sam
UFLDL教程答案(3):Exercise:PCA_in_2D&PCA_and_Whitening
JiangV的博客
12-12 2381
数据预处理：PCA及白化。
[机器学习] UFLDL笔记 - PCA and Whitening
WangBo的机器学习乐园
04-07 7483
本文主要整理自UFLDL的“PCA”章节和一些经典教材，同时也参考了网上的一些经典博客，包含了PCA的一些基本概念、推导和代码实现，以及笔者在项目中对PCA的应用经验，供读者参考。
pca 主成分分析_通过主成分分析（PCA）了解您的数据并发现潜在模式
weixin_26713521的博客
09-02 2400
主成分分析pcaSave time, resources and stay healthy with data exploration that goes beyond means, distributions and correlations: Leverage PCA to see through the surface of variables. It saves time and reso...
深度学习UFLDL教程翻译之PCA白化
hunterlew的专栏
08-13 4443
一、引入        主成分分析（PCA）是一种降维算法，能大大加速你的无监督特征学习算法。更重要的是，理解PCA能让我们后面实现白化，这是一个对所有算法适用的重要的预处理步骤。        假设你在图像上训练你的算法。不过输入稍微有点冗余，因为图像中相邻的像素值是高度相关的。具体来说，假设我们在16*16的灰度图像块上训练。那么x∈R256是256维的向量，一个特征xj对应着图像中每个像
UFLDL深度学习编程练习1: 多层神经网络
jalused的专栏
01-10 1809
UFLDL教程多层神经网络练习的原理简单讲解以及实现
Kaggle学习笔记：数据预处理与无效值处理详解
Kaggle学习笔记是关于数据科学竞赛平台Kaggle的学习心得和实践经验总结。在这个笔记中，作者详细介绍了在Kaggle项目中进行数据处理和预处理的关键步骤。首先，他们导入了pandas库来处理数据，通过`pd.read_csv()`...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值