![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
读书笔记
Luzichang
三天打鱼,三十天晒网。
展开
-
《从机器学习到深度学习》第1到5章阅读笔记
分类与回归最小二乘:通过最小化样本值与预测值之间的方差和来计算W(回归系数)。梯度下降:一种因为计算机存储及运算能力限制而不得不启用的逐步逼近、迭代求解的方法;沿梯度下降的方向求解极小值。似然:描述已知随机变量输出结果时,未知参数的可能取值。在贝叶斯公式中,似然度就是P(B|A),最大似然估计就是P(B|A)最大时A的值后验概率例:穿裤子的是女生 1.高斯朴...原创 2019-06-05 13:13:41 · 497 阅读 · 0 评论 -
递归神经网络的认识
递归神经网络(recursive neural network)是具有树状阶层结构且网络节点按其连接顺序对输入信息进行递归的人工神经网络,是深度学习算法之一。 递归神经网络提出于1990年,被视为循环神经网络(recurrent neural network)的推广。当递归神经网络的每个父节点都仅与一个子节点连接时,其结构等价于全连接的循环神经网络。递归神经网络可以引...转载 2019-06-08 14:41:38 · 8461 阅读 · 2 评论 -
自然语言处理学习笔记和部分Python代码
自然语言处理(NLP)1.文本建模:基于词袋模型的文章关键词提取、相似度分析等;2.词汇处理:中文分词、用Word2vec寻找近义词等;3.主题模型:比较NMF、LSA、PLSA、LDA技术,建立“文档-主题-单词”的三层模型。文本建模处理对象——整段文本或整篇文章问题:如何将自然语言文本输入机器学习模型中?解决方法:文本数字向量化。方法1:词袋模型——对于每一个...原创 2019-06-26 18:39:00 · 471 阅读 · 0 评论 -
viterbi算法实例及python实现
Python中hmmlearn给出了三种HMM模型:MultiomialHMM,GaussianHMM,GMMHMM。本文以MultiomialHMM为例,使用《从机器学习到深度学习》中第六章的活动/天气模型进行推算。 假设有这样一个问题,远在另一个城市上大学的儿子每天通过邮件向你汇报他今天做的最多事情是什么,这些事情可能是这三项之一:打球、读书、访友。那么在这种场景下,如何推测儿...原创 2019-06-10 12:42:05 · 4835 阅读 · 2 评论 -
隐马尔可夫链HMM学习
隐马尔可夫模型以贝叶斯网络为数据框架,用Baum-Welch算法进行无监督训练,通过Viterbi算法计算隐含状态。用于对“在一定程度上相关,却又不绝对相关的两种事件”进行建模分析。HMM(两层模型) 可见层 普通状态结点 推测隐藏层马尔可夫状态链中各结状态 隐藏层 马尔可夫状态链 各结点不直接可见 理解隐马尔可夫模型的关键如下:1、显示层的结点状态是...原创 2019-06-11 22:18:19 · 1083 阅读 · 0 评论 -
贝叶斯网络(BN)的理解
贝叶斯网络:用点表示事件的条件概率,用边表示事件依赖关系的有向无环图(DAG)。1.在贝叶斯往来中描述概率的方式是每个节点上的条件概率分布(CPD);2.贝叶斯网络的实质是对联合概率的描述。事件状态 可枚举值 二项分布or多项分布 连续变量 连续变量离散化后进行多项式分布 在CPD中引入连续分布,如高斯分布N() 以典型贝叶斯问题为例:天气影响小林与女朋友...转载 2019-06-17 20:19:53 · 5578 阅读 · 0 评论 -
sklearn自带的逻辑回归和多项式朴素贝叶斯分类比较
Python代码如下 (参考:https://blog.csdn.net/weixin_43439673/article/details/84142628)# -*- coding: UTF-8 -*-import numpy as np import pandas as pd from sklearn import metricsfrom sklearn.linear_model...原创 2019-09-08 16:43:43 · 542 阅读 · 0 评论 -
逻辑回归和支持向量机的分类比较 python
逻辑回归和支持向量机都是机器学习中的二分类算法,却都可以拓展为多分类,程序中SVM采用了多项式核。#!/usr/bin/python# -*- coding:utf-8 -*-import numpy as npfrom numpy import matfrom sklearn import svmfrom sklearn.linear_model imp...原创 2019-09-09 16:43:31 · 1251 阅读 · 0 评论