Huber Robust loss

Huber Loss(Huber损失)是一种用于回归任务的损失函数,它结合了均方误差(MSE)和绝对误差(MAE)的优点,在一定程度上抵抗了异常值的影响。Huber Loss 的数学表达式如下所示:
在这里插入图片描述
其中,y 是真实值,yhat 是预测值,δ 是 Huber Loss 的阈值。当预测值和真实值之间的绝对差小于等于阈值 δ 时,使用的是均方误差;当绝对差大于阈值 δ 时,使用的是绝对误差与阈值 δ 的线性组合。

Huber Loss 的主要特点和优势包括:

对异常值具有鲁棒性:由于 Huber Loss 在绝对误差较小时采用的是均方误差,而在绝对误差较大时采用的是绝对误差,因此对于异常值的影响相对较小,具有一定的鲁棒性。

兼具 MSE 和 MAE 的优点:Huber Loss 同时考虑了均方误差和绝对误差的优点,因此在一定程度上能够平衡二者的影响,既能够保留 MSE 对于近似正态分布的数据的有效性,又能够在一定程度上抵抗异常值的干扰,具有更广泛的适用性。

可调节的参数:Huber Loss 中的阈值参数 \deltaδ 可以根据具体问题的需求进行调节,使得损失函数更适应不同的数据分布和任务需求。

总的来说,Huber Loss 是一种常用的用于回归任务的损失函数,具有对异常值鲁棒、结合了均方误差和绝对误差的优点,可以有效地应对不同类型的数据和任务。

  • 5
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值