python机器学习 二分类 混淆矩阵_读书笔记（11）Logistic 回归分类算法及应用

设想这样一些场景：电商企业想要判断用户是否会选择某种支付方式；金融企业想要将用户划分为不同的信用等级；某件商品在接下来的一个月内是否被销售；根据人体内的某个肿瘤特征，判断其是否为恶性肿瘤等此类二分类问题，我们应该如何解决呢？前面我们已经介绍过无监督学习的K-means算法，在K-means算法中，数据并不被特别标识，学习模型是为了推断出数据的一些结构，相比较无监督学习，监督式学习的常见应用场景就包括分类问题和回归问题，常见算法有Logistic回归分类和反向传递神经网络法。本文将要介绍的就是典型的用于研究二分类或多分类观察结果之间关系的多变量分析方法：Logistic回归分类法。Logistic回归分类法具有典型的监督式学习的特征：即输入数据被称为“训练数据”，每组训练数据有一个明确的标识或结果，如防垃圾邮件系统中“垃圾邮件”“非垃圾邮件”，手写数字识别中的“1”，“2”，“3”，“4”等。在建立预测模型的时候，监督式学习建立一个学习过程，将预测结果与“训练数据”的实际结果进行比较，不断的调整预测模型，直到模型的预测结果达到一个预期的准确率。

Logistic回归

Logistic 回归为概率型非线性回归模型，Logistic 回归虽然名字叫“回归”，但却是 一种分类学习方法。使用场景大概有两个：第一用来预测，第二寻找因变量的影响因素，是 研究二分类或多分类观察结果之间关系的一种多变量分析方法。Logistic 回归法是一种广 义的线性回归分析模型，常用于数据挖掘，疾病自动诊断，经济预测等领域，因此了解其原 理及实现较为重要。本文章将通过极大似然法与梯度上升法对logistic 回归进行推导，并 利用python 进行代码实现，最后通过一个运动状态实例进行操作。

一、Logistic回归原理

二、二分类模型评价指标

 在机器学习中，当我们