向量的导数

向量的导数

1、向量的导数

设A为$m\times n$的矩阵，$x$为$n$维列向量，则$Ax$为$m$维列向量。记$y=Ax$,则有：

$$\frac{\partial y}{\partial x} =\frac{\partial Ax}{\partial x}=A^T$$
$$\frac{\partial Ax}{\partial x^T}=A$$
$$\frac{\partial (x^TA)}{\partial x}=A$$

2、标量对向量的导数

设A为$n\times n$的矩阵，$x$为$n$维列向量。记$y=x^TAx$,则有：

$$\frac{\partial y}{\partial x_j} =\frac{\partial (x^TAx)}{\partial x_j}$$
$$=(\sum_{j=1}^{n}a_{ij}x_j)+(\sum_{j=1}^{n}a_{ji}x_j)$$
$$=\sum_{j=1}^{n}(a_{ij} + a_{ji})x_j$$
于是有：
$$\frac{\partial y}{\partial x}=(A^T+A)x$$

若A为对称阵，则有

$$\frac{\partial (x^TAx)}{\partial x}=2Ax$$