机器学习数学基础-单调性和凹凸性

函数的单调性和凹凸性

在微积分中，单调性和凹凸性是分析函数形态的两个重要特性，它们揭示了函数在某些区间内是如何变化的，分别描述了函数是否“持续增长”或“持续下降”，以及函数曲线是否“弯向上”或“弯向下”。

1. 函数的单调性

函数的单调性描述了函数在某一区间内是否始终保持增大或减小。具体地，函数的单调性可以通过其导数来判定。

(1) 单调递增函数（Monotonically Increasing Function）

如果对于某个区间 ( I ) 上的任意 ( x_1, x_2 \in I )，当 ( x_1 < x_2 ) 时，满足 ( f(x_1) \leq f(x_2) )，则函数 ( f(x) ) 在该区间内是单调递增的。

等式成立时，称为严格单调递增，即 ( f(x_1) < f(x_2) )。

判断准则：

• 如果 ( f’(x) > 0 ) 对于区间 ( I ) 内的所有 ( x ) 都成立，那么函数 ( f(x) ) 在区间 ( I ) 上是单调递增的。
• 如果 ( f’(x) \geq 0 ) 且 ( f’(x) = 0 ) 时，函数的值不变，也可以认为是单调递增。

(2) 单调递减函数（Monotonically Decreasing Function）

如果对于某个区间 ( I ) 上的任意 ( x_1, x_2 \in I )，当 ( x_1 < x_2 ) 时，满足 ( f(x_1) \geq f(x_2) )，则函数 ( f(x) ) 在该区间内是单调递减的。

等式成立时，称为严格单调递减，即 ( f(x_1) > f(x_2) )。

判断准则：

• 如果 ( f’(x) < 0 ) 对于区间 ( I ) 内的所有 ( x ) 都成立，那么函数 ( f(x) ) 在区间 ( I ) 上是单调递减的。
• 如果 ( f’(x) \leq 0 ) 且 ( f’(x) = 0 ) 时，函数的值不变，也可以认为是单调递减。

(3) 单调性的例题

例题1：判断函数 ( f(x) = x^2 ) 在区间 ( (-\infty, 0) ) 和 ( (0, \infty) ) 上的单调性。

解答：
计算 ( f’(x) = 2x )。

• 在区间 ( (-\infty, 0) )，( f’(x) = 2x < 0 )，所以 ( f(x) ) 在该区间内是单调递减的。
• 在区间 ( (0, \infty) )，( f’(x) = 2x > 0 )，所以 ( f(x) ) 在该区间内是单调递增的。

2. 函数的凹凸性

函数的凹凸性描述了函数图像的弯曲方向。具体地，函数的凹凸性可以通过其二阶导数来判定。

(1) 凹函数（Concave Function）

如果对于某个区间 ( I ) 上的任意 ( x_1, x_2 \in I )，并且 ( \lambda \in [0, 1] )，满足：

$$f(\lambda x_1+(1-\lambda )x_2)\ge \lambda f(x_1)+(1-\lambda )f(x_2)$$

则函数 ( f(x) ) 在该区间内是凹函数。

判断准则：

• 如果 ( f’'(x) \leq 0 ) 对于区间 ( I ) 内的所有 ( x ) 都成立，那么函数 ( f(x) ) 在区间 ( I ) 上是凹的。

(2) 凸函数（Convex Function）

如果对于某个区间 ( I ) 上的任意 ( x_1, x_2 \in I )，并且 ( \lambda \in [0, 1] )，满足：

$$f(\lambda x_1+(1-\lambda )x_2)\le \lambda f(x_1)+(1-\lambda )f(x_2)$$

则函数 ( f(x) ) 在该区间内是凸函数。

判断准则：

• 如果 ( f’'(x) \geq 0 ) 对于区间 ( I ) 内的所有 ( x ) 都成立，那么函数 ( f(x) ) 在区间 ( I ) 上是凸的。

(3) 凹凸性的例题

例题2：判断函数 ( f(x) = x^3 - 3x ) 的凹凸性。

解答：
首先，计算一阶导数和二阶导数：

• ( f’(x) = 3x^2 - 3 )

• ( f’'(x) = 6x )

• 当 ( x > 0 )，( f’'(x) = 6x > 0 )，所以 ( f(x) ) 在 ( (0, \infty) ) 上是凸的。

• 当 ( x < 0 )，( f’'(x) = 6x < 0 )，所以 ( f(x) ) 在 ( (-\infty, 0) ) 上是凹的。

3. 单调性与凹凸性的关系

• 函数的单调性与凹凸性之间存在某些联系。若函数 ( f(x) ) 是严格单调递增且凸的，则它的图像会在向右时“逐渐变陡”。
• 若函数 ( f(x) ) 是严格单调递增且凹的，则它的图像会在向右时“逐渐变缓”。

例如，凸函数往往表现为“向上开口”，凹函数则表现为“向下开口”，而单调性则决定了这些函数在图像上的位置变化。

4. 总结

• 单调性：通过导数判断函数在某个区间内是否始终增大或减小。
  • ( f’(x) > 0 ) 时，函数递增；( f’(x) < 0 ) 时，函数递减。
• 凹凸性：通过二阶导数判断函数图像的弯曲方向。
  • ( f’‘(x) > 0 ) 时，函数凸；( f’'(x) < 0 ) 时，函数凹。

这些特性在数学分析、优化问题和应用数学中都有着广泛的应用，可以帮助我们更好地理解函数的形态和行为。