机器学习课程笔记（第三周）逻辑回归

课程链接https://www.coursera.org/learn/machine-learning

逻辑函数
 "Sigmoid Function," also called the "Logistic Function":




逻辑回归logistic regression
成本函数cost function与线性回归不一样：



成本函数的简化：


梯度下降Gradient Descent
这个算法与线性回归时相同，

过拟合：
过度拟合或高方差是由假设函数引起的，该函数非常适合现有数据，但不能很好地概括以预测新数据。它通常是由一个复杂的函数造成的，它会产生许多与数据无关的不必要的曲线和角度。
解决过拟合问题：
1) 减少特征数量: 手动选择保留哪些特征。或使用一个模型选择算法(学习后面的课程)。
2) 正则化：保留所有特征,但是减少θj的大小 .


λ是正则化参数

合并后