CLM 系列代码实现考虑

Saragih 在 Face alignment through subspace constrained mean-shift 统一了asm/clm之类的算法,都称之为基于局部模型的算法(CLM)。Saragih主要考虑了

(1) 如何对局部特征检测器响应进行拟合近似。

(2)如何对近似后的响应,联合shape约束,进行最优求解。


对局部特征检测器响应的建模可以用二次拟合,高斯模型(ASM),多高斯模型,KDE 核密度估计。

进行最优求解时,需要注意两个坐标系的转换关系,

训练时:

对于PDM建模,都是shape对齐以后,因此 s = mean_s + pb. 这里的shap 坐标都是在模型坐标系空间定义的。

对于图像中的目标shape,一般使用在全局坐标系空间的坐标。

        如下式子中,(Xi,Yi)假设为图片中目标shape的坐标,那么为了计算得到bj,即模型坐标系空间中的shape 投影到PCA后的参数信息。 需要将(Xi,Yi)对齐到mean_s,对齐后,计算得到 d(Xi,Yi),即variation,再投影得到参数信 息,看是否违背shape 约束。

        f(s) = sum(Ri(Xi,Yi)) - sum(bj*bj/lamda_j)

        为了将(Xi, Yi)对齐到mean_s,目前经常使用的是最小二乘法,对齐过程中,只假设(scale,angle,Tx,Ty)四个参数,假设similar transform.


对齐时:

(1)一般先要获得初始位置估计,得到startshape.

(2) 在startshape附近寻找局部特征位置

(3) 联合局部特征总体响应和shape约束进行优化,此处需要将图像坐标系shape映射到模型坐标系,以求解和约束b参数。

(4)最优化得到shape,未收敛则进入下一次迭代。



  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值