1. 梯度下降法、牛顿法 2. 最大似然估计法 3 . 最小二乘法 4. 线性回归(基本思想是用梯度下降法对最小二乘法形式的误差函数进行优化) 5. K最近邻分类算法(KNN) 6. 决策树(ID3、C4.5算法、迭代决策树(GBRT)、随机森林)