- 博客(5)
- 收藏
- 关注
原创 Hadoop集群搭建教程(详细)
需要的安装包: 1.jdk压缩包 2.hadoop压缩包请前往我的github上下载相关安装包开始搭建hadoop集群一.使用VMvare创建两个虚拟机,我使用的是ubuntu16.04版本的因为默认的虚拟机主机名都是ubuntu,所以为了便于虚拟机的识别,创建完成虚拟机后我们对虚拟机名进行修改,我们把用于主节点的虚拟机名称设为master(按自己的喜好创建),把用于从节点的虚拟机名称...
2018-05-24 00:12:41 214005 64
转载 VMware tools 安装
vmware tools是虚拟机VMware Workstation自带的一款工具,它的作用就是使用户可以从物理主机直接往虚拟机里面拖文件。如果不安装它,我们是无法进行虚拟机和物理机之间的文件传输的,同时还能改善鼠标移动、等性能。 主要步骤: 1.挂载光驱 2.将安装文件拷贝到桌面(其他文件夹都可以)并解压 3.打开终端(Ctrl+Alt+T) 4.切换到安装文件夹所在的目录 5.执行安装命令 需...
2018-05-21 20:37:40 241
原创 MapReduce的基本工作原理
MapReduce的基本模型和处理思想:三个层面上的基本构思1.如果对付大数据处理:分而治之 对相互之间不具有计算依赖关系的大数据,实现并行最自然的办法就是采取分而治之的策略。 2.上升到抽象模型:Mapper与Reduce MPI等并行计算方法缺少高层并行编程模型,程序员需要自行指定存储,计算,分发等任务,为了克服这一缺陷,MapReduce借鉴了Lisp函数式语言中的思想,用M...
2018-05-21 10:24:04 59430 2
转载 蚁群算法原理及其实现(python)
蚁群算法(AG)是一种模拟蚂蚁觅食行为的模拟优化算法,它是由意大利学者Dorigo M等人于1991年首先提出,并首先使用在解决TSP(旅行商问题)上。之后,又系统研究了蚁群算法的基本原理和数学模型.蚁群算法的基本思想:# -*- coding: utf-8 -*-import randomimport copyimport timeimport sysimport mathimpor...
2018-05-20 11:08:23 123348 69
原创 详解BP神经网络
BackPropagation Neuron NetWok BP神经网络学习算法可以说是目前最成功的神经网络学习算法。显示任务中使用神经网络时,大多数是使用BP算法进行训练. 在我看来BP神经网络就是一个”万能的模型+误差修正函数“,每次根据训练得到的结果与预想结果进行误差分析,进而修改权值和阈值,一步一步得到能输出和预想结果一致的模型。举一个例子:比如某厂商生产一种产品,投放到市场之...
2018-05-06 11:30:41 296458 57
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人