- 博客(5)
- 收藏
- 关注
原创 西瓜书/南瓜书第5章学习笔记
由于单个神经元分类能力有限,如感知机只能分类线性可分的数据集,但多个神经元构成的神经网络能够分类线性不可分的数据集(异或问题),且有理论证明(通用近似定理):只需一个包含足够多神经元的隐层,多层前馈网络就能以任意精度逼近任意复杂度的连续函数(相当于能够自己完成特征工程)。因此神经网络既能做回归,也能做分类,且无需复杂的特征工程。亟待解决的问题:具体场景下的神经网络深度、宽度、结构设计、输出结果的解释。
2023-09-24 22:30:11
28
原创 西瓜书第3章学习笔记
其直观想法为:使得观测样本出现概率最大的分布就是待求分布,即使得联合概率(似然函数)L(根据半正定矩阵的判定定理之一:若实对称矩阵的所有顺序主子式均为非负,则该矩阵为半正定矩阵。)变化趋势相同,存在相同的最大值点,并且通过对数函数的性质可以化简L(上二阶连续可微,如果f(x)的Hessian(海塞)矩阵(注4)在。是凸函数,且f(x)一阶连续可微,则x'是全局解的充分必要条件是。是关于w和b的凸函数,然后根据凸函数求最值的思路求解出w和b。为函数f(x)在x处的二阶导数或Hessian(海塞)矩阵。
2023-09-18 22:33:49
58
原创 西瓜书/南瓜书 第1、2章笔记总结
what:什么是机器学习?机器学习是研究关于“”(一类能从数据中得出其背后潜在规律的算法)的一类学科why:为什么要学习机器学习从事机器学习理论的研究、系统的开发,将其中算法迁移到自己从事的研究领域,从事AI研究how:怎样学机器学习?本书只涉及基础的理论研究内容。当前机器学习尚处于工程领先理论阶段,还有很多的未解之谜。也称为“(instance)”,是关于是个事件或对象的描述。一般来说,带有标记的称为样本,不带标记的称为示例= (青绿;蜷缩;清脆)向量中的各个维度称为“
2023-09-12 20:30:51
83
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人