切线、法线、梯度之间的关系

     一直以来都有一颗写博客的梦，要么是没有时间，要么是懒。今天强迫自己完成首作。
     为什么会想到写这个标题，因为最近回过头来看KKT条件的时候，发现推导过程中提到等高线切线的方向、梯度方向、法向量方向等。不知道大家有没有和我一样的困惑，当很多概念混在一起的时候，脑子瞬间浆糊，感觉意识都模糊了，下面就静下心来理一理。
备注：下面均是个人拙见，仅供参考。

一、方向

    方向，这里特指两个内容：直线方向、向量方向。
    直线方向，如：切线方向、法线方向。主要指的是斜率，即切线的斜率，法线的斜率。切线斜率大家好理解，经常求解。但是法线的斜率是什么？因为法线很少被提及，大多时候都在说法向量，那么这里法线的方向就就转为法向量的方向。
    二维平面内任一个向量$\overrightarrow{n}=(a,b)$，二维平面向量表达形式都是二维坐标点，它是如何确定一个向量的？实际操作中，默认向量起点为坐标原点$(0,0)$，终点为$(a,b)$，由这两个点就可以获取到向量的方向：$\frac{b-0}{a-0}=\frac{b}{a}$。故：对于一个向量的方向就是$\frac{纵坐标}{横坐标}$。

二、切线

    二维平面上比较常见的曲线，如：抛物线、双曲线、直线(可以看成特殊的曲线)等等。

2.1 切线是什么呢？

    切线形象一点说就是你拿一条直线，保持倾斜程度(斜率)不变，水平移动，能刚好碰触到曲线上的某一点$P_0$，则这条直线即为过$P_0$点的切线。下以以抛物线$y=x^2$为例：

2.2 切线与斜率

    我们经常会提到切线的方向，实际上就是斜率。实际的含义就是切线与$X$轴正方向形成夹角$\alpha$的正切值：$tan(\alpha )$。

上面举例，我们主要是以曲线来说明。现在回过头来想想直线，其实斜率这个词最早出现在平面直线的场景。直线的一般方程为：$y=kx+b$，斜率为：$k$。直线的斜率说明直线倾斜程度，即直线与$X$轴正方向形成夹角的正切值。直线斜率的计算一般都是借助直线上任意两点$(x_0,y_0),(x_1,y_1)$，则$k=\frac{y_1-y_0}{x_1-x_0}=\frac{dy}{dx}$。有个比较自然的提问，直线的切线是什么？回答就是：直线上每一点的切线都是它自己。

三、法向量与梯度、切线

3.1 法向量与梯度

    $F(x,y)=x^2+y^2$是二维平面的一个曲面，当限制$F(x,y)=c$时，即可确定一条曲线(常称为等高线)，当$c=0$时，就是我们常见的平面上过原点的圆$x^2+y^2=0$。

    一方面，在大学的解析几何课程中，我们求解平面$F(x,y)$的法向量为：
$$(\frac{\partial F}{\partial x},\frac{\partial F}{\partial y})=(2x,2y)$$
    另一方面，令$z=F(x,y)=x^2+y^2$，我们分别做$z$对$x,y$的偏导后，获得描述$z$值的梯度：
$$(\frac{\partial z}{\partial x},\frac{\partial z}{\partial x})=(F_x,F_y)=(2x,2y)$$
已知梯度是一个向量：它的模长用于描述变化率(决定于x方向上变换一个单位和y方向上变换一个单位时，$z$值范围变化多少)；它的方向表示变化方向。
综上，不难发现，法向