一种计算标准差的高效方法:Welford迭代法

标准差(Standard Deviation)是概率统计学上非常重要的概念,它被用来描述一组数据的离散程度。
根据标准差的定义,总体标准差σ表示为:总体标准差而样本标准差S表示为:样本标准差
总体标准差还有另外一种表示方式:总体标准差2

以上的两种总体标准差计算方法都有三个明显的问题:

  1. 代码实现时需要用一个数组来保存所有要计算的数据,如果数据比较大,那么会耗费非常大的空间。
  2. 计算时需要对数组总体进行两次遍历,一次计算平均值,一次计算平方,数据较多时耗时也非常大。
  3. 对于数据整体差距不大的情况,由于对接近0的浮点数做了平方计算,在数据非常多时累计损失的精度会较大,最终导致计算错误。

针对以上的3个问题,一个叫Welford的大神提出了一种迭代计算标准差的方法:
首先,将均值和方差初始化为0:M1 = x1,S1 = 0,
然后通过以下迭代公式计算每次来新的数据后的均值和标准差:
Mk = Mk-1+ (xk – Mk-1)/k
Sk = Sk-1 + (xk – Mk-1)*(xk – Mk)。
前k个数据的标准差为:s2 &#

  • 5
    点赞
  • 16
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值