机器学习基础算法（逻辑回归、k-means、模型的保存与加载）

逻辑回归

• 用来解决二分类问题：
  • 是否为垃圾邮件？
  • 肿瘤、癌症诊断
  • 是否是金融诈骗？
• 给定一些输入，输出结果是离散值

逻辑回归公式

首先逻辑回归的模型与线性回归基本相同，w为待求的参数：

与线性回归不同的地方在于，logistic回归通过函数S将w^Tx对应到了另一个状态p = S(w^Tx)，然后根据p的大小决定因变量的值。
这里的S函数就是Sigmoid函数：

通过函数S的作用，我们可以将输出的值限制在区间[0,1]上；p(x)则可以用来表示概率p(y=1|x)，即当一个x发生时，y被分到1的那一组的概率。
我们最终得到的y的值是在[0, 1]这个区间上的一个数，然后我们可以选择一个阈值，通常是0.5，当y>0.5时，就将这个x归