点击上方“小白学视觉”,选择加"星标"或“置顶”
重磅干货,第一时间送达
1从基础卡尔曼滤波到互补卡尔曼滤波
卡尔曼滤波自从1960被Kalman发明并应用到阿波罗登月计划之后一直经久不衰,直到现在也被机器人、自动驾驶、飞行控制等领域应用。基础卡尔曼滤波只能对线性系统建模;扩展卡尔曼滤波对非线性方程做线性近似以便将卡尔曼滤波应用到非线性系统。后来研究者发现将系统状态分成主要成分和误差,并将卡尔曼滤波用来预测误差,会使得系统的近似程度更高,效果更好。在姿态解算任务中,研究者们用辅助传感器如加速度计和磁力计来修正角速度计的积分结果,得到互补卡尔曼滤波的形式。
卡尔曼滤波是一种工具,对实际问题的不同建模方式会得到不同形式的卡尔曼滤波器。这导致了对于初学者不知道从何看起是好。另外也似乎很少有文章对基础卡尔曼滤波到各种形式的滤波形式做总结说明,于是便有了这篇文章。本文会从以下几个方面分析和讲解多种卡尔曼滤波器形式:
基础卡尔曼滤波——对线性系统的预测
扩展卡尔曼滤波——基础卡尔曼滤波在非线性系统的扩展
基于四元素的卡尔曼滤波器——基于实际问题的讲解
状态误差卡尔曼滤波——将状态误差引入状态向量
互补卡尔曼滤波——一种只使用角度误差和角速度误差作为状态向量和测量向量的滤波器形式
2符号定义
小写字母为变量;加粗小写字母为向量;大写和加粗大写为矩阵
3基础卡尔曼滤波器
宏观认识
卡尔曼滤波包含两个步骤
预测(prediction)—— Dynamic model
更新(correction/measurment update)—— Observation model
所谓预测,就是用一个数学模型,根据当前的传感器输入,直接计算此时系统的状态。可以理解为一个方程的计算就行。
所谓的更新,就是在某些时刻或者每一时刻,获取一些系统的其他状态输入(我们将这个值叫做测量值),比较此刻预测的系统状态和测量的系统状态,对预测出的系统状态进行修正,因此也叫测量更新(measurment update)。
整体框架如下图所示
状态方程及测量方程
其中是系统状态向量,是测量向量。分别是过程噪声和观测噪声,且满足高斯分布
预测过程
其中,是先验状态的误差协方差矩阵
更新过程
详细公式推导
本文作为一篇概述性文章,为了不使篇幅过于冗长,不进行基础卡尔曼滤波器公式的推导。想完全理解基础卡尔曼滤波器可以参考下面这几篇资料:
卡尔曼滤波基础知识及公式推导——较为形象化地讲解预测和更新这两个过程之间地概率分布关系
wiki Kalman Filter——准确的公式化推导
如何理解卡尔曼滤波器?
从概率分布的角度
卡尔曼滤波器将系统状态的变化中的过程噪声假设为均值为0的高斯噪声,使得状态向量也变为一个符合高斯分布的随机向量。同时对观测过程的噪声也假设为均值为0的高斯噪声。通过测量方程,即公式(1-2)得到将状态向量映射到测量向量的函数。于是,当得到测量值的时候,可以利用测量值与状态向量之间的关系得出另外一个对状态向量的估计。利用测量值得出的状态估计和状态方程计算的状态均符合高斯分布,两个高斯分布的联合概率分布依旧保持高斯特性。进一步推导可以得到公式(1-5)到公式(1-7)。关于这个角度的理解可以阅读上面推荐的第一篇文章。
从最小化误差的角度
卡尔曼滤波的最终输出是,真实的状态为,令
对误差的平方求最小值,同样可以推导出公式(1-5)到公式(1-7)。因此卡尔曼滤波器也是系统状态的最优估计。关于这个角度的理解和推导可以参考上面推荐的第二篇文章。
4扩展卡尔曼滤波
非线性方程的线性近似
卡尔曼滤波器建立在线性的状态方程和测量方程也就是公式(1-1)和公式(1-2)。但是在实际应用中,更多的关系是非线形关系,比如如何从连续的角速度计算出车辆当前的姿态角等。为了能够利用基本卡尔曼滤波器的预测和更新过程,对于非线性的状态方程和观测方程,我们利用一阶的泰勒展开,将非线性公式近似为线性公式。
状态方程及测量方程
公式(2-1,2-2)可以类比基础卡尔曼滤波器中的公式(1-1,1-2)
一阶泰勒展开
我们先假设已知时刻滤波器的输出,也就是时刻的状态后验,以及对应的协方差矩阵为
同时,我们令的先验为
对公式(2-1)在这一点做展开,并只保留一次项
同时,对公式(2-2)在这一点做泰勒展开,并只保留一次项
在公式(2-4)和公式(2-5)中:
预测方程及状态协方差矩阵
其中,公式(2-7)中的第二项,因为在线性近似方程(2-4)中,噪声项满足分布
更新方程及卡尔曼增益
5基础卡尔曼滤波器 && 扩展卡尔曼滤波器总结
6基于四元数的拓展卡尔曼滤波器
从实际问题讲起
在运动物体的姿态估计,比如车辆的姿态计算中,常常利用IMU(Inertial Meseasurment Unit)惯性测量单元计算物体的姿态。为了方便叙述,这里的姿态估计意味着我们希望解算车辆在每一时刻与起始坐标系之间三个轴的偏转角,通常用roll、pitch、yaw表示。
IMU(惯性测量单元)
现在的IMU一般是六轴或者九轴。六轴IMU可以输出三个轴的加速度(acc)和角速度(gyro);九轴则在六轴的基础上增加了磁力计(Magnetometer),测量三轴的磁场方向。为了简化问题,我们用六轴IMU作为示例。
相关定义
在姿态估计的各个领域中,通常使用四元数来表示一个旋转。四元数比欧拉角表达拥有更好的特性,同时相比于旋转矩阵又更加紧凑。定义四元数如下
为了估计系统的姿态,通常的做法是使用惯性测量单元IMU跟踪角速度,我们另每一时刻的角速度为
另外,我们需要知道IMU的输出频率。假设IMU的输出时间间隔为
四元素乘积的导数
这部分是为了后面推导扩展卡尔曼滤波的状态方程中的雅各比矩阵准备
我们令时刻的旋转为.时刻的旋转为。则的旋转是时刻的旋转经过的变化得到的,即
其中等于在时间间隔内的角度变化量。在极短的时间间隔内,我们认为角度的变化是匀速的,也就是。我们令在这个时间间隔内,角度的旋转轴为,旋转角度为,则
根据四元数的基础知识,我们可以得到
扩展卡尔曼滤波的重点之一在于求状态方程相对于状态的偏导;我们虽然可以从三轴角速度的输出得出角度积分的离散形式公式(1),但是我们其实不能对其直接对求偏导。至于为什么不能直接求导,下面说得挺好:
求导的定义是函数值的微增量关于自变量的微增量的极限。表示旋转的单位四元数作差后,其不再是单位四元数,也就不是旋转四元数了
为了能够对公式(1)求出偏导数,我们先求旋转相对时间的导数。然后利用泰勒展开,将公式(1)展开为线性方程,并只取一次项,这样就可以得到
我们令
则
有了角度相对于时间的导数之后,我们可以将公式(1)用泰勒展开
只保留到一次项,则我们可以得到
状态向量及控制输入
我们直接将车辆的姿态角以四元数形式表达作为系统状态向量
同时,将每一时刻IMU的三轴角速度作为控制输入
状态方程及其雅各比矩阵
有了上一部分关于四元素导数的推导,我们可以直接写出状态方程如下
其中是随机噪声,其协方差矩阵为
预测方程
由于在上面的推导中已经求出雅各比矩阵,所以预测方程可以直接根据拓展卡尔曼滤波公式写出来
测量更新
前文我们使用了角速度计的输出作为控制输入,并构建了状态方程和预测方程。IMU通常都会有加速度计输出,这部分输出可以用来作为测量量,并对预测的状态进行测量更新。我们先回顾测量更新中状态向量的更新过程。
令加速度计的输出为测量向量:
测量模型
现在我们已经确定好了状态向量为姿态角的四元数表达,测量向量为加速度计三个轴的输出,那么函数要采用什么形式可以将姿态角转成三轴加速度呢?
其中的关键联系就是,当车辆静止时,加速度的合向量是重力加速度,垂直向下!
上图中,假设坐标系是起始坐标系,是小车移动后的坐标系。在起始时,小车静止,小车的重力加速度的输出是垂直向下的,即
我们采用归一化的形式,也就是将重力加速度当作一个单位。
则当小车运动后,重力加速度在坐标系下的表达为
和是重力加速度在两个不同坐标系下的表达,同时,这两个坐标系之间的旋转是此时的状态向量,因此
其中,
是将四元数转成旋转矩阵的表达,旋转矩阵左乘一个三位的列向量表示将该向量进行三维旋转。即下面的形式(是我们之前定义过的)
雅各比矩阵
从公式(3-7)我们可以得到测量模型中的转换函数的雅各比矩阵
更新方程
7状态误差卡尔曼滤波器(ErKF : Error-state Kalman Filter)
概述
在使用卡尔曼滤波器做姿态估计(Attitude Estimation)中,很大一部分都采用不是直接将系统姿态角作为卡尔曼滤波的状态,而是将姿态角的积分误差和角速度计的误差作为系统状态。将角速度计的输出弥补上估计出的角速度计误差,然后对其积分,得到姿态角的估计,再弥补上姿态角的误差估计。整个的流程图大概如下面的图,引用自Intertial Head-Tracker Sensor Fusion by a Complementary Separate-Bias Kalman Filter
PS: 要强调的是,各种卡尔曼滤波的形式多种多样,同时各种符号的定义也都并不完全一致,这也是入门卡尔曼滤波比较难的地方,有时候找资料都不知道怎么找。这也是写这篇文章的目的,提供一个基础的脉络给卡尔曼滤波的初学者。因此这里给出的ErKF只是形式之一,主要是引用自论文Extended Kalman Filter vs. Error State Kalman Filter for Aircraft Attitude Estimation
状态误差的递推公式
首先,我们令表示时间连续形式的状态向量。其相对于时间的导数为
在等号的右边输入里加入微小扰动,同时,根据泰勒展开将函数展开
则
将上式使用离散形式表达
即
于是,有了状态误差的递推公式,我们就可以像卡尔曼滤波一样推导预测和更新过程
预测过程
与直接对系统状态做卡尔曼滤波稍有不同,使用误差状态的卡尔曼滤波在计算姿态角的时候可以看成三步:
在卡尔曼滤波系统外使用积分算出此时的系统状态
使用卡尔曼滤波算出此时系统状态的误差
将积分出来的系统状态弥补上卡尔曼滤波计算出误差
系统状态计算
上式只是一个公式化表达,其实就是将上一时刻的状态,在加上这一时间段状态的变化量。姿态估计中,状态的变化量通常是角速度计的输出乘以时间间隔。
状态误差方程及预测方程
状态误差方程
由公式(4-1)可以得到状态误差的方程为
其中,是过程噪声,协方差矩阵为
预测方程
类似于普通卡尔曼滤波,预测方程为
测量方程及更新方程
这里我们直接将使用其余传感器如加速度计、磁力计计算出的姿态作为系统的测量量。在这里先记得,加速度计根据输出的夹角可以计算出、角,由磁力计可以计算出角即可。当然,也可以采用其他能够直接输出系统姿态角的传感器作为测量值。
测量方程
其中,是测量噪声,协方差矩阵为
更新方程
这里要执行两步更新
先更新对状态误差的估计
更新状态的估计(即把状态误差弥补到)
补充
在上面的推导中,将我们的目标变量,即系统的姿态角作为外部一个单独的积分计算,但是实际上更多的做法是将姿态角和角速度的偏差直接放在状态向量中进行计算。然后对每一时刻的角速度偏差应用到角速度计的输出,再将其作为系统输入应用到状态方程。也就是像概述中的图示那样。但是其实各种卡尔曼滤波的建模方式都不一样,Error-state Kalman Filter和Complimentarty Kalman Filter也没有严格的定义。所以索性这一章节当作对状态误差的理解和推导,在下面的互补卡尔曼滤波给出一种似乎是应用更广泛的卡尔曼滤波器。
8互补卡尔曼滤波
前言
正如前文所说,卡尔曼滤波器的建模形式多种多样,而且很多研究也是在上世纪,对于误差状态卡尔曼滤波(Error-state Kalman Filter)和互补卡尔曼滤波(Comlimentary Kalman Filter)其实没有严格的定义。这里的互补卡尔曼滤波其实也可以看成上文ErKF的另一种形式。主要采用自论文Inertial head-tracker sensor fusion by a complementary separate-bias Kalman filter。卡尔曼滤波的工作太多,博客和论文也五花八门,看起来十分不易。这篇论文从引用、论文叙述、符号标识看起来都很不错,很适合想要将卡尔曼滤波应用到姿态估计的工程师阅读。甚至有一些工作,直接使用普通卡尔曼滤波输出,然后利用互补滤波器的概念,在多种姿态输出之间做加权平均,也叫互补卡尔曼滤波器,比如这篇专利:一种基于互补卡尔曼滤波算法计算融合姿态角度的方法
互补的概念
其实只要有了角速度计(Gyroscope)我们就可以根据其输出,并在时间上做积分解算出车辆的姿态角、、。但是由于任何传感器都是带噪声的,同时,直接用积分解算,误差会随机时间推移而累积,最终的姿态解算精度就非常差。除了使用角速度计进行积分可以得到姿态角之外,用加速度计(Accelerometer)和磁力计(Magnatometer)也可以计算出动态系统的姿态。其中,加速度计使用重力加速度作为锚定量,测量静止状态下三轴加速度之间的夹角,可以计算出、角;磁力计(或叫地磁计)利用地球磁场北极作为锚定量,可以计算出角。使用这两者对角速度计进行补充,可以得出更加准确的姿态估计。
从加速度计计算姿态角roll、pitch
加速度计(Accelerometer)可以输出三个轴的加速度,在静止的情况下,三个轴的合向量就是重力加速度。因此,我们可以利用三个轴加速度之间的关系计算静止状态下的俯仰角(pitch)和翻滚角(roll)
关于如何推导从三个轴的加速度计算roll和pitch,可以看这篇文章
最后得出的形式也非常简单:
从磁力计计算姿态角yaw
磁力计的三轴合向量会指向地磁北极,利用这一特性,可以从磁力计的输出获得与地磁北极的偏转角。利用这一点,可以计算出相对于起始位置的角
具体的计算公式可以看这篇博客
从加速度计算的姿态弥补
从加速度计可以计算出roll角和pitch角,因此,可以将这个结果和角速度的积分结果结合起来,得到一个更好的估计姿态。不过要注意的是,从加速度计算的姿态弥补有两个局限:
加速度计只能计算出Roll角和Pitch角,因此yaw角无法得到互补信息
当车辆处于较大的加速度运动状态时,三轴加速度的合向量跟重力加速度会有偏差,因此互补结果应该根据这个偏差的大小做改变。
互补滤波器
互补滤波器使用角速度的积分结果和加速度与磁力计的计算结果进行插值,得到更好的结果
其中,是对角速度积分得出的姿态(用四元素表达);是使用加速度计和磁力计计算出的姿态。
互补卡尔曼滤波器
互补卡尔曼滤波器将姿态角的误差、角速度的误差当作状态向量;并利用其余传感器如加速度计和磁力计计算出的姿态角与估计的姿态角之间的差作为测量量。通过以下步骤得到系统的姿态角:
卡尔曼滤波器输出姿态角的误差和角速度的误差
将当前时刻角速度的输出加上角速度的误差,并利用积分公式算出姿态角
将步骤2算出的姿态角加上步骤1输出的姿态角误差
状态向量和测量向量
状态向量
其中是系统的、、角;是三轴角速度。
测量向量
其中,是使用加速度计和磁力计计算出的系统、、角
状态方程
我们可以推导出姿态角对于时间的导数,通常这个导数是姿态角和角速度的函数,即
从公式(4-1)的推导过程,以及泰勒展开,我们可以得到的递推公式
我们直接假设角速度的误差是一个常量误差,即
则我们可以将上面两式写成矩阵形式
测量方程
预测&&更新过程
有了上面状态方程和测量方程的推导,剩下的就是按照公式(4-3)到公式(4-10)的过程代入。这里唯一不同的就是卡尔曼滤波输出的向量是角速度的误差和姿态的误差。在计算姿态的时候先将角速度的误差应用到角速度计的数据,对角度积分,将角度的误差应用到角度积分结果,得到最终的角度输出。整个框架如下图
9后话
卡尔曼滤波是一个很古老的算法,但同时又是被广泛应用的算法。即使在今天姿态解算中很多用了因子图,但是对IMU的预积分依旧要使用卡尔曼滤波。但是卡尔曼滤波算法只是一个工具,不同的系统建模方式会产生不同形式的卡尔曼滤波器,这也导致了初学者不知道从哪里入手。
在查资料的过程中发现,卡尔曼滤波的一些变种如Error-State Kalman Filter和Complimentary Kalman Filter其实并不是严格定义的。
笔者对卡尔曼滤波并没有很丰富的应用经验,本身也不是专门做运动控制和姿态解算的。本文的叙述在追求通俗易懂之外尽力保证公式和符号定义的准确。但无法保证没有错误。
对于卡尔曼滤波器中各个变量的初始值设置是门学问,论文中都会有独立的章节讲述初始值如何设置。这方面可能得结合实际应用和效果得出最优的方案。
10Reference
[1] Roll and Pitch Angles From Accelerometer Sensors
[2] 四元数、欧拉角、旋转矩阵转换
[3] 四元素乘积求导
[4] 一种基于互补卡尔曼滤波算法计算融合姿态角度的方法
[5] Inertial head-tracker sensor fusion by a complementary separate-bias Kalman filter
[6] Extended Kalman Filter vs. Error State Kalman Filter for Aircraft Attitude Estimation
[7] Kalman Filter的原始论文
[8] 卡尔曼滤波基础知识及公式推导
[9] AHRS: Attitude and Heading Reference Systems
下载1:OpenCV-Contrib扩展模块中文版教程
在「小白学视觉」公众号后台回复:扩展模块中文教程,即可下载全网第一份OpenCV扩展模块教程中文版,涵盖扩展模块安装、SFM算法、立体视觉、目标跟踪、生物视觉、超分辨率处理等二十多章内容。
下载2:Python视觉实战项目52讲
在「小白学视觉」公众号后台回复:Python视觉实战项目,即可下载包括图像分割、口罩检测、车道线检测、车辆计数、添加眼线、车牌识别、字符识别、情绪检测、文本内容提取、面部识别等31个视觉实战项目,助力快速学校计算机视觉。
下载3:OpenCV实战项目20讲
在「小白学视觉」公众号后台回复:OpenCV实战项目20讲,即可下载含有20个基于OpenCV实现20个实战项目,实现OpenCV学习进阶。
交流群
欢迎加入公众号读者群一起和同行交流,目前有SLAM、三维视觉、传感器、自动驾驶、计算摄影、检测、分割、识别、医学影像、GAN、算法竞赛等微信群(以后会逐渐细分),请扫描下面微信号加群,备注:”昵称+学校/公司+研究方向“,例如:”张三 + 上海交大 + 视觉SLAM“。请按照格式备注,否则不予通过。添加成功后会根据研究方向邀请进入相关微信群。请勿在群内发送广告,否则会请出群,谢谢理解~