逻辑回归已经在各大银行和公司都实际运用于业务,已经有很多前辈写过逻辑回归。本文将从我实际应用的角度阐述逻辑回归原理,致力于让逻辑回归变得清晰、易懂。逻辑回归又叫对数几率回归,是一种广义的线性回归分析模型。虽然名字里有回归,但其实是分类模型,常用于二分类。
这篇文章是逻辑回归三部曲中的第二部,介绍逻辑回归的原理。如果想更深刻地探索逻辑回归的数学推导,可以去看逻辑回归的由来一文,数学基础好的可以自己跟着文章推导一遍。
文章目录
一、什么是逻辑回归?
由于逻辑回归的原理是用逻辑函数把线性回归的结果(-∞,∞)映射到(0,1),故先介绍线性回归函数和逻辑函数,在本节的第三部分介绍逻辑回归函数。
1. 线性回归函数
线性回归函数的数学表达式:
其中xi是自变量,y是因变量,y的值域为(-∞,∞),θ0是常数项,θi(i=1,2,…,n)是待求系数,不同的权重θi反映了自变量对因变量不同的贡献程度。我们初中学过的一元一次方程:y=a+bx,这种只包括一