逻辑回归算法-推导学习详细

逻辑回归（Logistic regression）

用于分类，是经典的而二分类算法

---

Sigmoid函数：

决策边界（Decision boundary）：

• 线性 决策边界（Linear decision boundary）
  
• 非线性 决策边界（Non - linear decision boundary）
  
  损失函数（Cost function）：
  
  上图可以看出，因为有sigmoid函数，就会导致 J（θ）函数不平滑，这样就会很难确保下降到最低点，得到一个最优解，因此需要更换新的损失函数。
  
  似然函数与对数似然：
  
  整理：
  
  到这里，之后的操作就和线性回归很相似了，如果你不清楚，可以看看我写的关于线性回归的讲解，或许对你有所帮助。（似然函数我也在线性回归中讲解了）线性回归算法-案例推导学习详细