【机器学习】Metrics: 衡量算法性能的关键指标

---

🌈个人主页: 鑫宝Code
🔥热门专栏: 闲话杂谈｜ 炫酷HTML | JavaScript基础
​💫个人格言: "如无必要，勿增实体"

---

Metrics: 衡量算法性能的关键指标

引言

在算法开发和机器学习项目中，选择正确的评估指标（metrics）至关重要。它们不仅帮助我们理解模型的性能，还指导我们如何优化模型以达到预期的目标。本文将探讨几种常用的评估指标，并解释它们在不同场景下的应用。

1. 分类任务的评估指标

1.1 准确率 (Accuracy)

准确率是最直观的指标，计算的是预测正确的样本数占总样本数的比例。然而，在类别不平衡的数据集上，准确率可能会产生误导。

$$\text{Accuracy}=\frac{\text{TP + TN}}{\text{TP + TN + FP + FN}}$$

• TP (True Positive): 真实正例。当一个实例实际上是正例，并且模型也预测它是正例时，这样的预测就被称为“真实正例”。例如，在疾病检测中，如果某人确实有病，而我们的测试也显示他们有病，这就是一个TP。
• TN (True Negative): 真实负例。当一个实例实际上是负例，并且模型也预测它是负例时，这样的预测被称为“真实负例”。例如，如果某人实际上没有某种疾病，而我们的测试也显示他们没有病，这就是一个TN。
• FP (False Positive): 假正例，也称为I型错误。当一个实例实际上是负例，但模型错误地预测它是正例时，这样的预测被称为“假正例”。例如，如果某人实际上没有病，但我们的测试错误地显示他们有病，这就是一个FP。
• FN (False Negative): 假负例，也称为II型错误。当一个实例实际上是正例，但模型错误地预测它是负例时，这样的预测被称为“假负例”。例如，如果某人实际上有病，但我们的测试错误地显示他们没有病，这就是一个FN。

这些概念通常用于构建混淆矩阵（Confusion Matrix），并且基于它们可以计算出各种性能指标，如准确率（Accuracy）、精确率（Precision）、召回率（Recall）和F1分数等。这些指标可以帮助我们全面评估分类器的性能。

1.2 精确率与召回率 (Precision & Recall)

精确率衡量的是被模型预测为正例的样本中，真正是正例的比例；
$$\text{Precision}=\frac{\text{TP}}{\text{TP + FP}}$$