相机成像坐标系转换的运算过程

前言

相机系统可以把现实世界中的三维点对应到成像平面系统上的二维点，通常的体系描述下，这个过程涉及到四个坐标系和三次变化。本文单纯地详细的介绍下计算的过程和结果，会有一些概念上的延申，不涉及相机标定的详细说明，也不涉及畸变介绍，可作为图形学的基础知识浏览。

四个坐标系

1. 世界坐标系：记录点在真实世界中的具体位置，是一个三维坐标。坐标系的安放方式原则上随意随意，但实际上会为了减少计算量做一些特殊安排（比如相机标定中放在标靶的左上角）。图中及此文中记为$(X_w,Y_w,Z_w)$

2. 相机坐标系：简单来说是从相机的角度来观察现实世界中的位置信息，基于这一点，相机坐标系的安放不再那么随意，需要满足

   1. 相机坐标系的一个轴（通常为$Z$轴和相机的光轴重合）
   2. 坐标系的原点$O_c$位于相机的光心

   相机坐标系仍然是三维坐标，这点显然，图中及此文中记为$(X_c,Y_c,Z_c)$

3. 图像坐标系：图像坐标系可以理解为我们实际的成像平面（探测器平面）重合的二维坐标系，他的尺度是距离尺度，之所以要强调这一点，是为了和后面的像素坐标系做区分。另外，成像平面的坐标系一般原则上会：

   1. 把原点$o$放在光轴上（与$Z_c$重合）
   2. $xy$坐标轴和相机坐标系对应平行

   图中及此文中记为$(x,y)$

4. 像素坐标系：基本和图像坐标系的实际含义相同知识尺度是像素的尺度，也就是离散的像素做坐标。通常情况下此文中记为$(u,v)$

总结如下：

名称	坐标	维度	含义
世界坐标系	$(X_w,Y_w,Z_w)$	3	物体在真实世界中的坐标
相机坐标系	$(X_c,Y_c,Z_c)$	3	在相机视角下的物体坐标
图像坐标系	$(x,y)$	2	成像平面上的距离尺度坐标
像素坐标系	$(u,v)$	2	成像平面上的像素尺度坐标

三次变换

1. 世界坐标系->相机坐标系：作为三维坐标系之间的变换，实际上是完全基于坐标转换的数学变换，变换前后都是三维坐标，只不过观测基准变了
2. 相机坐标系->图像坐标系：三维转换为二维的关键一步，结合高斯成像公式，具有切实的物理意义
3. 图像坐标系->像素坐标系：单纯的尺度转换，非常的简单

世界坐标系->相机坐标系

平移

平移相对来说比较简单，只需要加上一个平移偏移量即可

$$(X_c,Y_c,Z_c{)}^T=(X_w,Y_w,Z_w{)}^T+(t_x,t_y,t_z{)}^T$$

旋转

旋转的影响主要涉及三个转动角度，我们先只考虑绕$Z$轴旋转的情况：对于点$(X_w,Y_w,Z_w)$

，将其绕相机坐标系下的$Z$轴旋转$\theta$，求新点坐标。

我们先把向量$(X_w,Y_w)$分解到对应坐标轴上，变成$(X_w,0)$和$(0,Y_w)$

旋转$\theta$之后：
$$\begin{gathered} (X_w,0)=>(X_{w}cos\theta ,X_{w}sin\theta ) \\ (0,Y_w)=>(-Y_{w}sin\theta ,Y_{w}cos\theta ) \end{gathered}$$

则有：
$$\left[\begin{array}{c}{X}_c\\ Y_c\end{array}\right]=\left[\begin{array}{cc}cos{\theta }_z& -sin{\theta }_z\\ sin{\theta }_z& ycos{\theta }_z\end{array}\right]\cdot \left[\begin{array}{c}{X}_w\\ Y_w\end{array}\right]$$

补齐$Z$维度：
[