定义
范数,是具有“长度”概念的函数。在线性代数、泛函分析及相关的数学领域,范数是一个函数,是矢量空间内的所有矢量赋予非零的正长度或大小。半范数可以为非零的矢量赋予零长度。
简单说就是: 向量,矩阵,函数的相似度(ps概率分布的相识度用 H ( a , b ) H(a,b) H(a,b) cross entropy 交叉熵来表示)
- 向量范数
1-范数:
∣ ∣ x ∣ ∣ 1 = ∑ i = 1 N ∣ x i ∣ ||x||_1 = \sum_{i=1}^N|x_i| ∣∣x∣∣1=∑i=1N∣xi∣ ,即向量元素绝对值之和,matlab调用函数norm(x, 1) 。
2-范数:
∣ ∣ x ∣ ∣ 2 = ∑ i = 1 N x i 2 ||\textbf{x}||_2 =\sqrt{\sum_{i=1}^Nx_i^2} ∣∣x∣∣2