1、Logisti回归的基本概念
首先logistic回归是一个分类算法,大家不要被名称所诱惑,这一点非常重要!然后logistic回归属于是利用了一个叫做sigmoid函数的映射,简称S函数,S函数的定义如下:
函数图像是这样的:
分类的模型使用的是将上面的的S函数的分母的e的幂次换掉。然后直接判断函数的值就可以判断出类别属于1的概率。在判断二分类的时候,只需要和0.5进行比较,大于0.5时候就是正类,小于0.5时候就是负类。
2、logistic回归的步骤
2.1、确定使用S函数
其实决策函数为什么使用S函数呢,这个是因为S函数是一个凸函数,此外还有很多好用的性质,最主要的是能够很好的表示类别出现的概率。
2.2、将训练数据和S函数结合
因为我们要预测是在某些特征下样本是属于哪一类的,假如f(x)=-(wx+b),
然后进行结合就可以得到下面的式子: