逻辑回归梯度下降法

1、逻辑回归的公式为：


其中：

则：

叫做预测函数，一般表示结果取1的概率，那么对于单条样本分类1和0的概率分别为：

可以整理成如下格式：

2、构造损失函数(cost函数)：
利用最大似然估计推导损失函数，最大似然估计就是利用已知的样本结果，反推能导致这样结果最大概率的一组参数值。举例：假设一个袋子中只装有未知数的黑球和白球，现在有放回的随机抽取球，做了一次测试，这次测试中抽取了