机器学习
文章平均质量分 93
……Riesling
爬坑骚年
展开
-
【机器学习算法原理及其实现剖析】SVM篇
往往我们只是知道了简单的证明,应付了考试,但是却没有把所学的东西,真正的去实践和应用一番,又可能苦于代码或理论难理解,而选择直接放弃。本主题【机器学习算法原理及其实现剖析】就是,把常用的机器学习算法的原理实现和对应理论支撑相结合,希望能提供一种不同的学习思路。SVM如果想明白一个东西,第一步就是知道它用来干什么的?也就是解决了什么问题。1、解决什么问题?最基本的应用是数据分类,特别是对于非线性不可分数据集。支持向量机不仅能对非线性可分数据集进行分类,对于非线性不可分数据集的也可以分类(这也是SVM原创 2021-04-11 20:34:20 · 381 阅读 · 0 评论 -
Teacher-Forcing, Student-Forcing, Schedual sampling , Teacher-Recommended and Professor-Forcing训练策略
「Teacher forcing」如果我们能够在每一步的预测时,让老师来指导一下,即提示一下上一个词的正确答案,decoder就可以快速步入正轨,训练过程也可以更快收敛。因此大家把这种方法称为teacher forcing。所以,这种操作的目的就是为了使得训练过程更容易。缺点:(1)预测(inference stage)时我们没有老师给你做标记了!纯靠自己很可能挂掉。(2)对于NMT任务来说,不可能保证某种语言中的每一个词在另一种语言中都有对应的词语 【1】。(3)强制词语对应消除了语义相似的其原创 2020-12-10 20:23:02 · 3833 阅读 · 1 评论 -
机器学习-标准化(standardization)、归一化(normalization)、正则化(regularization)以及规范化
规范化:针对数据库:规范化把关系满足的规范要求分为几级,满足要求最低的是第一范式(1NF),再来是第二范式、第三范式、BC范式和4NF、5NF等等,范数的等级越高,满足的约束集条件越严格。针对数据:数据的规范化包括归一化/标准化/正则化,是一个统称(也有人把标准化作为统称)。数据规范化是数据挖掘中的数据变换的一种方式,数据变换将数据变换或统一成适合于数据挖掘的形式,将被挖掘对象的属性数据...原创 2019-04-16 15:51:40 · 2684 阅读 · 0 评论 -
机器学习-监督,无监督,半监督,弱监督,多示例,迁移学习 and 元学习、少样本学习、零样本学习
1、几种监督方式(现有理解)监督,无监督,半监督,弱监督,多示例,迁移学习!监督学习:多是分类问题,数据与标记有一一对应的关系半监督学习:大量未标记数据和少量标签数据,弱监督学习:不完全监督:只有一部分训练数据具备标签;不确切监督:训练数据只具备粗粒度标签;例如,在药物活性预测 [40] 的问题中,其目标是建立一个模型学习已知分子的知识,来预测一个新的分子是否适合制造一种特定药物。一...原创 2019-04-15 12:30:11 · 5911 阅读 · 0 评论 -
深入理解机器学习的拟合问题和泛化问题
深入理解拟合问题和泛化问题:从数学角度:偏差是指我们忽略了多少数据,而方差是指我们的模型对数据的依赖程度。(1)方差是模型响应训练数据而变化的程度。由于我们只是记忆训练集,我们的模型具有很大的差异:它高度依赖于训练数据。(2)偏差是方差的另一面,因为它代表了我们对数据做出的假设的强度。(3)过拟合:过分依赖训练数据欠拟合:未能学习训练数据中的关系高方差:模型根据训练...原创 2019-04-29 19:00:30 · 2201 阅读 · 0 评论 -
区分multitask(多任务)、multilabel(多标签)、multiclass(多类别)
特征是描述属性标签用于分类,比如用(xi{x_i}xi,yi{y_i}yi)表示第i个样本,yi{y_i}yi就是标记/标签在属性/特征中,属性值包含于——>属性空间,样本空间,输入空间一个示例、样本称为特征向量,举例:D={x1{x_1}x1,x2{x_2}x2,x3{x_3}x3,…,xm{x_m}xm}表示m个示例每个示例由d个属性描述:xi{x_i}xi...原创 2019-06-19 20:10:55 · 3643 阅读 · 0 评论 -
程序调试——python实战篇(pycharm安装和远程配置、目录设置)
Part1:安装pycharm安装Professional:链接:link.之后注册邮箱(在校学生或者老师),如果没有就需要自己购买了。英文Professional才提供全套的远程debug。以下介绍邮箱的申请:step 1 注册account,使用任意一个邮箱registration.step 2 按流程关联自己的学生/老师邮箱即可Part 2 pycharm的远程配置ste...原创 2019-10-03 11:37:39 · 388 阅读 · 0 评论