【笔记】机器学习所涉及到的“微积分”知识

前言，建议大家如果有打算把数学这块儿搞明白，最好把考研的时候用的数三的三大本书（高等数学，概率论与数理统计、线性代数三本书）买过来，再研究下各个结论是如何证明的，学过的东西再拾起来很容易的。
本文主要内容：

极限
复习极限记号，无穷大无穷小阶数
微分学
复习函数求导，泰勒级数逼近
牛顿法与梯度下降法
Jensen不等式
复习凸函数，Jensen不等式重点内容的证明

常用的数学记号：

极限：

极限：如何比较无穷小？

极限：无穷小阶数
如果f(x) 为n阶以上无穷小，那么说明f(x)趋于0的速度比分母还快。

弧长公式:弧长=θ*r,θ是弧度r是半径