决策树
文章平均质量分 89
wang6254978
这个作者很懒,什么都没留下…
展开
-
决策树(一)ID3
定义 分类树(决策树)是一种十分常用的分类方法。他是一种监管学习,所谓监管学习就是给定一堆样本,每个样本都有一组属性和一个类别,这些类别是事先确定的,那么通过学习得到一个分类器,这个分类器能够对新出现的对象给出正确的分类。这样的机器学习就被称之为监督学习。 决策树学习通常包括3个步骤:特征选择,决策树的生成和决策树的修剪。这些决策树学习的思想主要来源于由Quinlan在...原创 2018-07-10 14:40:09 · 159 阅读 · 0 评论 -
信息熵
让我们说人话!好的数学概念都应该是通俗易懂的。 信息熵,信息熵,怎么看怎么觉得这个“熵”字不顺眼,那就先不看。我们起码知道这个概念跟信息有关系。而它又是个数学模型里面的概念,一般而言是可以量化的。所以,第一个问题来了:信息是不是可以量化? 起码直觉上而言是可以的,不然怎么可能我们觉得有些人说的废话特别多,“没什么信息量”,有些人一语中的,一句话就传达了很大的信息量。 为什么有的信息量大...转载 2018-07-19 15:13:29 · 210 阅读 · 0 评论