bluesliuf-CSDN博客

原创深度学习框架的对比及分析

本文主要介绍了现在主流的三大深度学习框架Tensorflow、Caffe和Pytorch的组成结构，并对其特点进行了简要分析。TensorflowTensorFlow是一个使用数据流图进行数值计算的开源软件库。图中的节点表示数学运算，而图边表示节点之间传递的多维数据阵列（又称张量）。灵活的体系结构允许使用单个API将计算部署到服务器或移动设备中的某个或多个CPU或GPU。它是一个静态图模型...

2019-03-27 09:15:12 974

原创 2019-2-21-Docker集群使用文档 (tensorflow)

用户管理 (管理员权限)添加docker用户组:sudo groupadd -g 344 docker添加用户到用户组：sudo usermod -a -G 用户组用户从用户组中删除用户gpasswd -d 用户用户组镜像的基本操作列出本地镜像docker images各个选项说明:• REPOSITORY：表示镜像的仓库源（不唯一）• TAG：镜像的标签(...

2019-03-27 09:14:52 256

原创机器学习方法之K-means聚类

聚类(Clustering)，就是将相似的事物聚集在一起，而将不相似的事物划分到不同的类别的过程，是数据分析之中十分重要的一种手段。与此前介绍的决策树，支持向量机等监督学习不同，聚类算法是非监督学习(unsupervised learning )，在数据集中，并不清楚每条数据的具体类别。算法K-means 算法是数据挖掘十大经典算法之一。由于该算法的效率高，所以在对大规模数据进行聚类时被广...

2019-03-27 09:14:32 564

原创回归中的相关度和决定系数

训练集中可能是有若干维度的特征。但有时并不是所有特征都是有用的，有的特征其实和结果并没有关系。因此需要一个能衡量自变量和因变量之间的相关度。皮尔逊相关系数皮尔逊相关系数(Pearson correlation coefficient），是用于度量两个变量 X 和 Y 之间的相关（线性相关），其值介于[-1,1] 之间。有三种相关情况：正向相关: >0负向相关：<0无相关性...

2019-03-27 09:14:11 3245

原创机器学习方法之非线性回归（ Logistic Regression）

非线性回归是线性回归的延伸，其目标预测函数不是线性的。本文主要介绍逻辑回归（Logistic Regression），它是非线性回归的一种，虽然名字中有“回归”二字，但其本质上是一个分类模型。含义我们知道，线性回归的模型是求出输出特征向量Y和输入样本矩阵X之间的线性关系系数θ，满足Y=XθY=XθY=Xθ。此时Y是连续的，所以是回归模型。如果Y是离散的话，如何解决？一个可以想到的办法是，我们...

2019-03-27 09:13:41 10493

原创机器学习方法之线性回归(LR)

线性回归(linear regression)是利用数理统计和归回分析，来确定两种或两种以上变量间相互依赖的定量关系的一种统计分析方法。与之前的分类问题( Classification )不一样的是，分类问题的结果是离散型的；而回归问题中的结果是连续型（数值）的。数据特征数理统计中，常用的描述数据特征的有：**均值（mean）：**又称平均数或平均值，是计算样本中算术平均数：x‾=...

2019-03-27 09:13:21 1326

原创机器学习方法之神经网络（NN）

神经网络算法( Neural Network )是机器学习中非常非常重要的算法。它以人脑中的神经网络为启发，是整个深度学习的核心算法。深度学习就是根据神经网络算法进行的一个延伸。背景神经网络是受神经元启发的，对于神经元的研究由来已久，1904年生物学家就已经知晓了神经元的组成结构。一个神经元通常具有多个树突，主要用来接受传入信息；而轴突只有一条，轴突尾端有许多轴突末梢可以给其他多个神经元传...

2019-03-27 09:12:52 7421

原创机器学习方法之SVM

支持向量机（support vector machine）,简称SVM，最早在1963年，由 Vladimir N. Vapnik 和 Alexey Ya. Chervonenkis 提出。目前的版本(soft margin)是由Corinna Cortes 和 Vapnik在1993年提出，并在1995年发表。背景深度学习（2012）出现之前，SVM被认为机器学习中近十几年来最成功，表现最...

2019-03-26 20:56:08 1000

原创机器学习方法之决策树

决策树是一个类似于流程图的树结构：其中，每个内部结点表示在一个属性上的测试，每个分支代表一个属性输出，而每个树叶结点代表类或类分布。树的最顶层是根结点。上图中是否出去玩取决于天气情况（sunny、overcast、rain）和空气湿度（humidity、windy）这2个属性的值。信息熵决策树算法种类很多，本文主要介绍ID3算法。ID3算法在1970-1980年，由J.Ross. Qui...

2019-03-26 20:52:05 470

原创机器学习方法之KNN

K最近邻(k-Nearest Neighbor，KNN)分类算法，思路是：如果一个样本在特征空间中的k个最相似(即特征空间中最邻近)的样本中的大多数属于某一个类别，则该样本也属于这个类别。实例分析有两类不同的样本数据，分别用蓝色的小正方形和红色的小三角形表示，而图正中间的那个绿色的圆所标示的数据则是待分类的数据。也就是说，现在，我们不知道中间那个绿色的数据是从属于哪一类（蓝色小正方形or红...

2019-03-26 20:48:36 387

原创 Tensorflow入门2

这篇博文主要是TensorFlow的一个简单入门，并介绍了如何实现Softmax Regression模型，来对MNIST数据集中的数字手写体进行识别。然而，由于Softmax Regression模型相对简单，所以最终的识别准确率并不高。下面将针对MNIST数据集构建更加复杂精巧的模型，以进一步提高识别准确率。深度学习模型TensorFlow很适合用来进行大规模的数值计算，其中也包括实...

2019-03-26 20:46:28 308

原创 Tensorflow入门

TensorFlow 简介TensorFlow是Google在2015年11月份开源的人工智能系统（Github项目地址），是之前所开发的深度学习基础架构DistBelief的改进版本，该系统可以被用于语音识别、图片识别等多个领域。官网上对TensorFlow的介绍是，一个使用数据流图(data flow graphs)技术来进行数值计算的开源软件库。数据流图中的节点，代表数值运算；节点节点...

2019-03-26 20:44:21 371

原创深度学习的常见模型GAN

GAN的来源14年Goodfellow提出Generative adversarial nets即生成式对抗网络，它要解决的问题是如何从训练样本中学习出新样本，训练样本是图片就生成新图片，训练样本是文章就输出新文章等等。GANs简单的想法就是用两个模型，一个生成模型，一个判别模型。判别模型用于判断一个给定的图片是不是真实的图片（从数据集里获取的图片），生成模型的任务是去创造一个看起来...

2019-03-26 20:38:41 18175 2

原创深度学习发展

深度学习的发展历程人工智能机器学习深度学习人工智能远在古希腊时期，发明家就梦想着创造能自主思考的机器。当人类第一次构思可编程计算机时，就已经在思考计算机能否变得智能（尽管这距造出第一台计算机还有一百多年）(Lovelace, 1842)。如今，人工智能（artificialintelligence, AI）已经成为一个具有众多实际应用和活跃研究课题的领域，并且正在蓬勃发展。我们期...

2019-03-26 20:32:59 1475

原创深度学习的常见模型CNN

CNN的来源CNN由纽约大学的Yann LeCun于1998年提出。CNN本质上是一个多层感知机，其成功的原因关键在于它所采用的局部连接和共享权值的方式。一方面减少了的权值的数量使得网络易于优化，另一方面降低了过拟合的风险。CNN是神经网络中的一种，它的权值共享网络结构使之更类似于生物神经网络，降低了网络模型的复杂度，减少了权值的数量。权重共享：在卷积神经网络中，卷积层的每一个卷...

2019-03-26 20:29:26 5677

原创集成学习中的Bagging和Boosting

在机器学习和统计学习中, 集成学习(Ensemble Learning)是一种将多种学习算法组合在一起以取得更好表现的一种方法。它本身不是一个单独的机器学习算法，而是通过构建并结合多个机器学习器来完成学习任务。也就是我们常说的“博采众长”。集成学习可以用于分类问题集成，回归问题集成，特征选取集成，异常点检测集成等。集成学习概述什么是集成学习(此处以分类为例)将多个分类方法聚集在一起，以提...

2019-03-26 20:19:42 496

原创数字图像处理的常用方法

layout: post # 使用的布局（不需要改）title: 数字图像处理的常用方法date: 2019-03-25 16:59:56type: categoriesauthor: Liu Fantags:Image processingcategories: Computer visionmathjax: truecatal...

2019-03-26 19:18:13 1660

原创 Windows8.1&&10 安装 Tensorflow 遇到的问题

我是最近才开始学习深度学习的，导师让我把Tensorflow装一下。上网查了一下教程，发现在不同系统下安装tensorflow的情况不一样，由于我的电脑没有分盘，装虚拟机比较麻烦，所以最后还是想直接在Windows下装tensorflow。首先，根据网上的教程，发现要利用docker来安装，我好不容易下好DockerToolbox，一步步安装后，启动Docker Quickstart T

2017-09-16 16:36:15 323