线性与非线性

叠加性

当多输入系统共同作用于系统时产生的效果，与各个输入作用于系统产生的效果和，相同。用方程刻画如下。例如，物理学中，物体的加速度等于作用于该物体的合力产生的加速度，但是也等于各个分力产生的加速度和。

f(x)+ f(y) = f(x+y)

齐次性

       即满足如下方程。

f(ax) = a*f(x)

线性系统与非线性系统

所谓线性系统即指满足叠加性与齐次性的系统，反之即为非线性系统。例如直线方程就是一个典型的线性系统。另外，线性系统其实是一种极其特殊的系统，现实中很多问题用线性系统去表述探索，并不能百分百的还原真相。但是很多问题可以归类于线性问题，因为只有线性系统，才可以确定，能够相对简单地能得到解析解，所以其实研究线性问题是从简单出发研究复杂问题的一个初始过程。

线性运算

即满足以下交换律、结合律、分配律定律的加法和数量乘法。交换律：a + b = b + a；结合律：(a + b) +c = a + (b + c)；分配律：(a+b)c = ac + bc。

线性相关

       即一组向量a1,a2,a3…an如果任意一个向量都可以用其它向量表示，那么这组向量是线性相关的。例如三维空间中，（1，0，0）、（0，1，0）与（0，0，1）是线性无关的，而（1，0，0）（2，3，4）和（3，3，4）则是线性相关的。用数学方程角度表达则是，若存在一组不全为零的数 k₁, k₂, ···,k_m , 使

       则称这组向量是线性相关的。

       因此判断一组向量是否相关，可转换为求上式是否有一组不全为零的解。

线性算子与线性变换

       线性算子即为线性映射的数学表达。所谓线性映射，即在线性空间V中的向量经过线性算子的转换之后 ，仍然保持线性（即仍然满足叠加和齐次性）（即映射后的空间仍然是一个线性空间）。

线性滤波与非线性滤波

       线性滤波即输出图像的每个像素值是由输入图像每个像素值经过一个线性算子得到。而非线性滤波所使用的算子则是一个非线性算子。常见的线性滤波器，如均值滤波器，高斯滤波器等。而常见的非线性滤波则包括了统计滤波里的，最大值滤波，最小值滤波，中值滤波等等。