标题相机标定（Camera calibration）原理和步骤

为什么要相机标定？
在图像测量过程和机器视觉应用中，为确定空间物体表面某点的三维几何位置与其在图像中对应点之间的相互关系，必须建立相机成像的几何模型，这些几何模型参数就是相机参数。
【1】进行摄像机标定的目的：求出相机的内，外参数，以及畸变参数。
【2】标定相机后通常是想做两件事：一个是由于每个镜头的畸变程度各不相同，通过相机标定可以矫正这种镜头畸变，生成矫正后的图像；另一个是根据获得的图像重构三维场景。
摄像机标定过程，可以简单描述为，通过标定板，可以得到n个对应的世界坐标三维点Xi和对应的图像坐标二位点xi，这些三维点的转换都可以通过上面提到的相机内参K，相机外参R和t，以及畸变参数D，经过一系列的矩阵变换得到。
什么叫相机标定？
在大多数推荐下，这些参数必须通过实验与计算机才能得到，这个求解参数的过程就称为相机标定（或摄像机标定）。
为何相机标定很重要？
无论是在图像测量，或者机器视觉应用中，相机参数的标定都是非常关键的环节，其标定结果的精度及算法的稳定性直接影响相机工作产生结果的准确性。因此，做好相机标定是做好后续工作的前提，提高标定精度是科研工作的重点所在。
相机标定方法有哪些？
相机标定方法有：传统相机标定法，主动视觉标定法，相机自标定法。
传统相机标定法需要使用尺寸已知的标定物，通过建立标定物上坐标已知的点与其图像点之间的对应，利用一定的算法获得相机模型的内外参数。根据标定物的不同分为三维标定物和平面标定物。三维标定物可由单幅图像进行标定，标定精度较高，但高精密三维标定物的加工和维护较困难。平面型标定物比三维标定物制作简单，精度易保证，但标定时必须采用两幅或两幅以上的图像。传统相机标定法在标定过程中始终需要标定物，且标定物的制作精度会影响标定结果。同时，有些场合不适合放置标定物，也限定了传统相机标定法的应用。
目前出现的自标注算法中，主要是利用相机运动的约束。相机的运动约束条件太强，因此，使得其在实际中并不实用。利用场景约束，主要是利用场景中的一些平行或者正交的信息。其中，空间平行线在相机图像平面上的交点被称为消失点，它是射影几何中的一个非常重要的特征，所以，很多学者研究了基于消失点的相机标定方法。自标定方法灵活性强，可对相机进行在线标定。但由于它是基于绝对二次曲线或曲面的方法，其算法鲁棒性差。
基于主动视觉的相机标定法是指，已知相机的某些运动信息，对相机进行标定。该方法不需要标定物，但需要口罩相机做某些特殊运动，利用这种运动的特殊性，可以计算出相机内部参数。基于主动视觉的相机标定法的优点是，算法简单，往往能够获得线性解，鲁棒性较高，缺点是，系统的成本高，试验设备昂贵，实验条件要求高，而且不适合于运动参数未知或无法控制的场合。
常用术语
内参矩阵：Intrinsic Matrix
焦距：Focal Length
主点：Pincipal Point
径向畸变：Radial Distortion
切向畸变：Tangential Distortion
旋转矩阵：Rotation Matrics
平移向量：Translation Vectors
平均重投影误差：Mean Reprojection Errors
重投影点：Reprojected Points
相机成像原理

摄像头标定（Camera calibration）原理和步骤

为什么要相机标定？

在图像测量过程和机器视觉应用中，为确定空间物体表面某点的三维几何位置与其在图像中对应点之间的相互关系，必须建立相机成像的几何模型，这些几何模型参数就是相机参数。

【1】进行摄像机标定的目的：求出相机的内，外参数，以及畸变参数。

【2】标定相机后通常是想做两件事：一个是由于每个镜头的畸变程度各不相同，通过相机标定可以矫正这种镜头畸变，生成矫正后的图像；另一个是根据获得的图像重构三维场景。

摄像机标定过程，可以简单描述为，通过标定板，可以得到n个对应的世界坐标三维点Xi和对应的图像坐标二位点xi，这些三维点的转换都可以通过上面提到的相机内参K，相机外参R和t，以及畸变参数D，经过一系列的矩阵变换得到。

什么叫相机标定？

在大多数推荐下，这些参数必须通过实验与计算机才能得到，这个求解参数的过程就称为相机标定（或摄像机标定）。

为何相机标定很重要？

无论是在图像测量，或者机器视觉应用中，相机参数的标定都是非常关键的环节，其标定结果的精度及算法的稳定性直接影响相机工作产生结果的准确性。因此，做好相机标定是做好后续工作的前提，提高标定精度是科研工作的重点所在。

相机标定方法有哪些？

相机标定方法有：传统相机标定法，主动视觉标定法，相机自标定法。

传统相机标定法需要使用尺寸已知的标定物，通过建立标定物上坐标已知的点与其图像点之间的对应，利用一定的算法获得相机模型的内外参数。根据标定物的不同分为三维标定物和平面标定物。三维标定物可由单幅图像进行标定，标定精度较高，但高精密三维标定物的加工和维护较困难。平面型标定物比三维标定物制作简单，精度易保证，但标定时必须采用两幅或两幅以上的图像。传统相机标定法在标定过程中始终需要标定物，且标定物的制作精度会影响标定结果。同时，有些场合不适合放置标定物，也限定了传统相机标定法的应用。

目前出现的自标注算法中，主要是利用相机运动的约束。相机的运动约束条件太强，因此，使得其在实际中并不实用。利用场景约束，主要是利用场景中的一些平行或者正交的信息。其中，空间平行线在相机图像平面上的交点被称为消失点，它是射影几何中的一个非常重要的特征，所以，很多学者研究了基于消失点的相机标定方法。自标定方法灵活性强，可对相机进行在线标定。但由于它是基于绝对二次曲线或曲面的方法，其算法鲁棒性差。

基于主动视觉的相机标定法是指，已知相机的某些运动信息，对相机进行标定。该方法不需要标定物，但需要口罩相机做某些特殊运动，利用这种运动的特殊性，可以计算出相机内部参数。基于主动视觉的相机标定法的优点是，算法简单，往往能够获得线性解，鲁棒性较高，缺点是，系统的成本高，试验设备昂贵，实验条件要求高，而且不适合于运动参数未知或无法控制的场合。

常用术语

内参矩阵：Intrinsic Matrix

焦距：Focal Length

主点：Pincipal Point

径向畸变：Radial Distortion

切向畸变：Tangential Distortion

旋转矩阵：Rotation Matrics

平移向量：Translation Vectors

平均重投影误差：Mean Reprojection
Errors

重投影点：Reprojected Points

相机成像原理

6.1 世界坐标系

世界坐标系（world coordinate），也称为测量坐标系。是一个三维坐标系，以其为基准，可以描述相机和待测物体的空间位置。世界坐标系的位置可以根据实际情况自由确定。

6.2 相机坐标系

相机坐标系（camera coordinate），也是一个三维直角坐标系，原点位于镜头光心处，x，y轴分别与相面的两边平行，z轴为镜头光轴，与像平面垂直。

6.3 相机坐标系转换为世界坐标系

转换方程为：

其中33的旋转矩阵，是31的平移矢量，是相机坐标系和世界坐标系的齐次坐标。

具体方法为：

图6.3.1

图6.3.2

图6.3.3

6.4 像素坐标系，图像坐标系

图6.4.1

像素坐标系（pixel coordinate）

图6.4.1，像素坐标系是一个二维直角坐标系，反映了相机CCD/CMOS芯片中像素的排列情况。原点位于图像的左上角，轴，轴分别与像素的两边平行。像素坐标系中坐标轴的单位是像素（整数）。

像素坐标系不利于坐标变换，因此，需要建立图像坐标系，其坐标轴的单位通常为毫米（mm），原点是相机光轴与相面的交点（称为主点），即图像的中心点，轴，轴分别与轴，轴平行。故两个坐标系实际上是平移关系，即通过平移得到。

6.5 像素坐标系转换为图像坐标系

其中，变量包含dx，dy物理尺寸和主点（图像原点）坐标。（这里=dx）
6.6 相机坐标系转换为图像坐标系

针孔成像原理

如图中，空间任意一点与其图像点之间的关系，p与相机光心的连线op，与像面的交点即为空间点在图像平面上的投影。此为透视变换，由上图矩阵表示。

其中，Zc为比列因子（Zc不为0），为有效焦距（光心到图像平面的距离），是空间点在相机坐标系中的齐次坐标，是像点在图像坐标系中的齐次坐标。

6.7 世界坐标系转换为像素坐标系

上面的式子也等于：MXw其中M成为投影矩阵，是相机内参矩阵和相机外参矩阵的乘积。

其中，f为摄像机的焦距，单位一般是mm，dx，dy为像素尺寸；U0，V0为图像中心。fx=f/dx，fy=f/dy，分别称为x轴和y轴的归一化焦距。

为便于理解，举例：

现以Nikon D700相机为例，求解其内参数矩阵：

就算大家身边没有这款相机也无所谓，可以在网上百度一下，很方便的就知道其一些参数。

焦距f=35mm，最高分辨率：42562832，传感器尺寸：36.023.9mm。

根据以上定义，有：

u0= 4256/2 = 2128 v0= 2832/2 = 1416 dx =
36.0/4256 dy = 23.9/2832

fx = f/dx =
4137.8 fy = f/dy = 4147.3

其中，相机的内参和外参可以通过张正友标定获取。通过最终的转换关系，一个三维自标点，的确可以在图像中找到一个对应的像素点。反过来，通过图像中的一个点，找到它在三维中对应点就成了一个问题，因为不知道等式左边的Zc值。