Mr_wuliboy的博客

0基础学Python笔记

使用三台虚拟机和Hadoop3.1.0搭建集群

首先要说明一点,一下教程针对hadoop3.1.0,注意不是2.X.X!!!(本人因为版本浪费了将近三天的时间,人生观都差点崩塌了) 虚拟机这里就不过多说了,网上教程一大把,这里使用的是ubuntu系统 1、三台虚拟机启动后修改hostname 使用一下命令 sudo gedit /etc/...

2019-01-03 20:33:22

阅读数 80

评论数 0

使用豆瓣源下载tensorflow或者tensorflow-gpu

pip install --index-url https://pypi.douban.com/simple tensorflow 或者pip install --index-url http://mirrors.aliyun.com/pypi/simple/ tensorflow

2018-12-17 18:50:31

阅读数 75

评论数 0

ES下载安装以及head的下载使用

窗下安装ElasticSearch的头插件 ES5以上版本安装头需要安装节点和咕噜(之前的直接用插件命令即可安装) (一)从地址:https: //nodejs.org/en/download/下载相应系统的msi,双击安装。 (二)安装完成用cmd进入安装目录执行节点-v可查看版本号 (...

2018-11-28 22:41:23

阅读数 16

评论数 0

用Python进行自然语言处理学习笔记一

NLTK是一个高效的Python构建的平台,用来处理人类自然语言数据。它提供了易于使用的接口,通过这些接口可以访问超过50个语料库和词汇资源(如WordNet),还有一套用于分类、标记化、词干标记、解析和语义推理的文本处理库,以及工业级NLP库的封装器和一个活跃的讨论论坛。 搜索文本 来查一下...

2018-09-09 15:32:03

阅读数 38

评论数 0

sk-learn 学习笔记八

感知器 感知器通常用下面的图形表示: x1, 和是输入单元。每个输入单元分别代表一个特征。感知器通常用另外一个输入单元代表一个常用误差项,但是这个输入单元在图形中通常被忽略了。中间的圆圈是一个计算单元,类似神经元的细胞核。连接输入单元和计算单元的边类似于树突。每条边是一个权重,或者是一个参...

2018-09-09 15:31:10

阅读数 33

评论数 0

sk-learn 学习笔记七

用PCA降维 PCA将数据投射到一个低维子空间实现降维。例如,二维数据集降维就是把点投射成一条线,数据集的每个样本都可以用一个值表示,不需要两个值。三维数据集可以降成二维,就是把变量映射成一个平面。一般情况下, 维数据集可以通过映射降成维子空间。 显然,样本映射到虚线的变化比映射到点线的变...

2018-09-09 13:38:00

阅读数 36

评论数 0

sk-learn学习笔记五

决策树——非线性回归与分类 决策树简介 决策树就是做出一个树状决策,就像猜猜看(Twenty Questions)的游戏。一个玩家(先知)选择一种常见物品,但是事先不能透露给其他玩家(提问者)。提问者最多问20个问题,而先知只能回答:是,否,可能三种答案。提问者的提问会根据先知的回答越来越具体...

2018-09-08 10:16:23

阅读数 49

评论数 0

sk-learn学习笔记三

逻辑回归处理二元分类 普通的线性回归假设响应变量呈正态分布,也称为高斯分布(Gaussian distribution )或钟形曲线(bell curve)。正态分布数据是对称的,且均值,中位数和众数(mode)是一样的。 掷一个硬币获取正反两面的概率分布是伯努力分布(Bernoulli di...

2018-09-07 10:05:58

阅读数 71

评论数 0

mahotas API文档翻译

mahotas作为一种计算机视觉方向方面的python库,其不仅包含了上百种视觉方向的机器学习的算法,同时还可以操作python的numpy数组,使得数据处理,很方便。 虽然mahotas作为一种新型的库,其每个月都在更新,但是其接口是很稳定的,我们的学习更加的简单方便。 mahotas.as...

2018-09-05 13:51:05

阅读数 29

评论数 0

sk-learn学习笔记三

通过哈希技巧实现特征向量 哈希技巧是无固定状态的,它把任意的数据块映射到固定数目的位置,并且保证相同的输入一定产生相同的输出,不同的输入尽可能产生不同的输出。scikitlearn提供了HashingVectorizer来实现这个技巧: from sklearn.feature_extract...

2018-09-05 13:50:05

阅读数 29

评论数 0

sk-learn学习笔记二

特征提取与处理 分类变量特征提取 分类变量通常用独热编码(One-of-K or One-Hot Encoding),通过二进制数来表示每个解释变量的特征。 scikit-learn里有DictVectorizer类可以用来表示分类特征: 例如: from sklearn.feature...

2018-09-04 21:05:27

阅读数 85

评论数 0

Latex学习笔记

Latex文档分为导言区与正文区 在导言区可以用\documentclass{class}引入一个文档类,除了文档类还可以有book类report类,letter类 在正文区用\begin和\end输入一个环境,在中间的位置content可以书写内容 导言区主要进行全局设置,例如可以用\ti...

2018-09-04 12:59:46

阅读数 118

评论数 0

sciket

偏差与方差: 偏差描述预测模型的期望与理论模型之间的差距,偏差越大偏离理论值越大。 方差描述的是预测模型得离散程度,方差越大离散程度越大。(表示预测模型各个理论值比较分散) 如下图所示: 其中Low Bias表示的是低偏差Low Variance 表示的是低方差。 方差的表达式为 ...

2018-09-03 15:20:11

阅读数 28

评论数 0

pandas基础

Pandas 常用的数据结构有两种:Series 和 DataFrame 首先介绍下Series:       Series 是一个带有 名称 和索引的一维数组,既然是数组,肯定要说到的就是数组中的元素类型,在 Series 中包含的数据类型可以是整数、浮点、字符串、Python对象等。 例...

2018-08-06 12:00:04

阅读数 32

评论数 0

numpy基础

今天难得有闲暇时间,对numpy的基础进行以下梳理。 NumPy系统是Python的一种开源的数值计算扩展。这种工具可用来存储和处理大型矩阵。 创建数组: 使用列表创建数组,a=['a','b','c']                                 x = numpy....

2018-08-03 15:13:52

阅读数 61

评论数 0

python3对excel文件进行操作

对excel操作从主体上来分类无外乎读写两类,分别对应两个模块:xlrd和xlwt 首先介绍下读操作: workbook= xlrd.open_workbook('IPO数据库(1).xlsx')#选择要读取的excel文件 table = workbook.sheets()[0]#选择...

2018-07-24 16:33:35

阅读数 308

评论数 1

python3中将数据存入Mysql数据库

  近期自己练习爬取知乎评论数据,本来打算将数据存入ES,但是因为ES我之前也从来没有接触过,所以决定现将数据存入到Mysql数据库中,网上有很多帖子,但是很多都是适用于python2.x版本,python3中没有mysqldb,需要使用pymysql,使用如下语句来链接数据库: db = p...

2018-07-24 16:23:11

阅读数 1116

评论数 0

级联相关网络

文章转自https://blog.csdn.net/xc_xc_xc/article/details/53163478介绍一般的神经网络是固定好拓扑结构,然后训练权重和阈值。级联相关神经网络是从一个小网络开始,自动训练和添加隐含单元,最终形成一个多层的结构。级联相关神经网络具有以下优点:学习速度快...

2018-06-11 19:52:46

阅读数 821

评论数 0

ART神经网络与SOM神经网络

        今天学习了两个神经网络,分别是自适应谐振(ART)神经网络与自组织映射(SOM)神经网络。整体感觉不是很难,只不过一些最基础的概念容易理解不清。        首先ART神经网络是竞争学习的一个代表,竞争型学习是一种常用的无监督学习策略,在使用改策略时,网络的输出神经元相互竞争,每...

2018-06-11 19:13:12

阅读数 1280

评论数 2

RBF(径向基函数)神经网络

今天学习了RBF神经网络,里面有一些概念个人觉得不是很好理解。RBF神经网络是一种单隐层前馈神经网络,如下所示RBF        RBF神经网络一共分为三层,第一层为输入层即Input Layer,由信号源节点组成;第二层为隐藏层即图中中间的黄球,隐藏层中神经元的变换函数即径向基函数是对中心点径...

2018-06-10 21:30:58

阅读数 604

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭