Python机器学习随笔之非线性分类的logistic回归拟合及正则化

01 非线性决策边界的logistic回归拟合

常规的logistic回归在解决分类问题时，通常是用于线性决策边界的分类（如下图-左图），因为logistic回归可以视为线性回归的一种转化，其回归模型为 (sigmoid函数)：

式中的z=θTx(i)就是不同x的线性表达式f(x) = g(w0+w1x1+w2x2)。那么，对于线性决策边界的分类，如何用logistic回归预测、拟合呢？这时候就需要将f(x) = g(w0+w1x1+w2x2)的线性函数式转化成多项式：f(x) = g(w0+w1x1+w2x2+w3x12+w4x22+w5x1x2)去拟合（如下图-中图）。

这里还是要推荐下小编的Python学习群:483546416，不管你是小白还是大牛，小编我都欢迎，不定期分享干货，包括小编自己整理的一份2017最新的Python资料和0基础入门教程，欢迎初学和进阶中的小伙伴。在不忙的时间我会给大家解惑。

但是，这种处理方式相比较于线性函数表达式会产生很多的项数，因而其变量（特征）也比较多，如果我们没有足够