第五章摄像机标定PPT讲稿.ppt
《第五章摄像机标定PPT讲稿.ppt》由会员分享,可在线阅读,更多相关《第五章摄像机标定PPT讲稿.ppt(81页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、第五章摄像机标定第1页,共81页,编辑于2022年,星期三摄像机标定的目的:三维重建摄像机标定的目的:三维重建三维重建:摄像机标定的主要目的,也是计算机视觉的最主三维重建:摄像机标定的主要目的,也是计算机视觉的最主要的研究方向要的研究方向.(Marr 1982),所谓三维重建就是指从图象出发,所谓三维重建就是指从图象出发恢复出空间点三维坐标的过程。恢复出空间点三维坐标的过程。摄像机标定:建立摄像机图像像素位置与场景点位置之间的关系,其摄像机标定:建立摄像机图像像素位置与场景点位置之间的关系,其途径是根据摄像机模型,由已知特征点的图像坐标求解摄像机的模型途径是根据摄像机模型,由已知特征点的图像坐
2、标求解摄像机的模型参数。参数。三维重建的三个关键步骤三维重建的三个关键步骤摄像机标定:单个像机摄像机标定:单个像机图象对应点的确定:双目图象对应点的确定:双目二图象间摄像机运动参数的确定:单个像机运动二图象间摄像机运动参数的确定:单个像机运动1、引言、引言第2页,共81页,编辑于2022年,星期三O Ou u摄像机坐标系摄像机坐标系摄像机坐标系摄像机坐标系x xy yv v图像坐标系图像坐标系图像坐标系图像坐标系世界坐标系世界坐标系世界坐标系世界坐标系1 1 1 1、世界坐标系:、世界坐标系:、世界坐标系:、世界坐标系:2 2 2 2、摄像机坐标系:、摄像机坐标系:、摄像机坐标系:、摄像机坐标
3、系:3 3 3 3、图像坐标系、图像坐标系、图像坐标系、图像坐标系:坐标系坐标系第3页,共81页,编辑于2022年,星期三 在在 中的坐标为中的坐标为 象素在轴上的物理尺寸象素在轴上的物理尺寸为 Affine Transformation:Affine Transformation:Affine Transformation:Affine Transformation:图像数字化图像数字化U U U UC C C CV V V V齐次坐标形式齐次坐标形式:其中其中第4页,共81页,编辑于2022年,星期三摄像机的内参数矩阵摄像机的内参数矩阵 K第5页,共81页,编辑于2022年,星期三传统摄像
4、机标定方法基于交比不变的摄像机畸变系数标定2、摄相机标定方法分类、摄相机标定方法分类第6页,共81页,编辑于2022年,星期三1)传统的摄像机标定方法)传统的摄像机标定方法特点特点利用已知的景物结构信息。常用到标定块。利用已知的景物结构信息。常用到标定块。第7页,共81页,编辑于2022年,星期三1)传统的摄像机标定方法)传统的摄像机标定方法优点优点 可以使用于任意的摄像机模型,标定精度高可以使用于任意的摄像机模型,标定精度高不足不足 标定过程复杂,需要高精度的已知结构信息。标定过程复杂,需要高精度的已知结构信息。在实际应用中很多情况下无法使用标定块。在实际应用中很多情况下无法使用标定块。第8
5、页,共81页,编辑于2022年,星期三2)基于交比不变的摄像机畸变系数标定特点:将畸变参数单独进行标定优点:算法简单,与其它内外部参数分离缺点:误差受样本点的影响第9页,共81页,编辑于2022年,星期三3、摄像机传统标定方法、摄像机传统标定方法3.1、DLT方法方法3.2、RAC方法方法3.3、张正友的平面标定方法、张正友的平面标定方法(ICCV,1999)第10页,共81页,编辑于2022年,星期三Abdal-AzizAbdal-Aziz和和KararaKarara于于7070年代初提出了直接线性变换像机定标年代初提出了直接线性变换像机定标的方法,他们从摄影测量学的角度深入的研究了像机图像
6、和环的方法,他们从摄影测量学的角度深入的研究了像机图像和环境物体之间的关系,建立了像机成像几何的线性模型,这种线境物体之间的关系,建立了像机成像几何的线性模型,这种线性模型参数的估计完全可以由线性方程的求解来实现。性模型参数的估计完全可以由线性方程的求解来实现。3.1、直接线性变换(、直接线性变换(DLT变换)变换)第11页,共81页,编辑于2022年,星期三直接线性变换是将像点和物点的成像几何关系在齐次坐标下写成直接线性变换是将像点和物点的成像几何关系在齐次坐标下写成透视投影矩阵的形式:透视投影矩阵的形式:DLTDLT变换变换其中其中 为图像坐标系下的点的齐次坐标,为图像坐标系下的点的齐次坐
7、标,为为世界坐标系下的空间点的欧氏坐标,世界坐标系下的空间点的欧氏坐标,为为 的透视投影矩的透视投影矩阵,阵,为未知尺度因子。为未知尺度因子。第12页,共81页,编辑于2022年,星期三DLTDLT变换变换消去消去 ,可以得到方程组,可以得到方程组:第13页,共81页,编辑于2022年,星期三当已知当已知 个空间点和对应的图像上的点时,可以得到一个含有个空间点和对应的图像上的点时,可以得到一个含有2*2*个方程的方程组:个方程的方程组:DLTDLT变换变换其中其中 为为 的矩阵,的矩阵,为透视投影矩阵元素组成的为透视投影矩阵元素组成的向量向量 。第14页,共81页,编辑于2022年,星期三DL
8、TDLT变换变换 像机定标的任务就是寻找合适的像机定标的任务就是寻找合适的 ,使得,使得 为为最小,即最小,即 给出约束:给出约束:为为 的前的前1111个元素组成的向量,个元素组成的向量,为为 前前1111列组成的矩列组成的矩阵,阵,为为 第第1212列组成的向量。列组成的向量。向量的比例有意义向量的比例有意义第15页,共81页,编辑于2022年,星期三摄像机内外参数求解摄像机内外参数求解是正交单位矩阵的第三是正交单位矩阵的第三行,行列式为行,行列式为1第16页,共81页,编辑于2022年,星期三摄像机内外参数求解摄像机内外参数求解第17页,共81页,编辑于2022年,星期三DLTDLT变换
9、变换是否合理?是否合理?约束约束 不具有旋转和平移的不变性不具有旋转和平移的不变性,解将随着世解将随着世界坐标系的选取不同而变化界坐标系的选取不同而变化.证明:证明:世界坐标系作刚性坐标变换世界坐标系作刚性坐标变换则则显然在一般的情况下显然在一般的情况下第18页,共81页,编辑于2022年,星期三另一个约束另一个约束 具有旋转和平移的不变性具有旋转和平移的不变性DLTDLT变换变换由向量向量 ,是两两是两两垂直的单位向量垂直的单位向量第19页,共81页,编辑于2022年,星期三3.2、R.Tsai 的的 RAC的定标算法的定标算法 80 80年代中期年代中期TsaiTsai提出的基于提出的基于
10、RACRAC的定标方法是计算的定标方法是计算机视觉像机定标方面的一项重要工作,该方法的核心是机视觉像机定标方面的一项重要工作,该方法的核心是利用径向一致约束来求解除利用径向一致约束来求解除 (像机光轴方向的平移)(像机光轴方向的平移)外的其它像机外参数,然后再求解像机的其它参数。基外的其它像机外参数,然后再求解像机的其它参数。基于于RACRAC方法的最大好处是它所使用的大部分方程是线性方法的最大好处是它所使用的大部分方程是线性方程,从而降低了参数求解的复杂性,因此其定标过程方程,从而降低了参数求解的复杂性,因此其定标过程快捷,准确。快捷,准确。像机模型 径向一致约束 定标算法 第20页,共81
11、页,编辑于2022年,星期三理想图像坐标到数字图像坐标的变换理想图像坐标到数字图像坐标的变换(只考虑径向偏差)(只考虑径向偏差)像机模型(ud,vd)为一个点的数字化实际坐标,(为一个点的数字化实际坐标,(u,v)为)为理想的数字化坐标,(理想的数字化坐标,(u0,v0)为畸变中心)为畸变中心(u0,v0)(ud,vd)(u,v)第21页,共81页,编辑于2022年,星期三径向一致约束 在图像平面上,点在图像平面上,点 ,共线,与共线,与直线直线 平行或斜率相等平行或斜率相等.理想透视投影成像坐标理想透视投影成像坐标真实透视投影成像坐标真实透视投影成像坐标摄像机中坐标摄像机中坐标第22页,共8
12、1页,编辑于2022年,星期三世界坐标系和摄像机坐标系的关系世界坐标系和摄像机坐标系的关系像机模型uv由径向约束由径向约束第23页,共81页,编辑于2022年,星期三移项得:移项得:同除以同除以 得:得:写成矢量形式得:写成矢量形式得:第24页,共81页,编辑于2022年,星期三定标算法 1.利用径向一致约束来求解利用径向一致约束来求解 和和 定标步骤定标步骤:2.求解有效焦距求解有效焦距 、方向上的平移方向上的平移T T3 3 和畸变参数和畸变参数 第25页,共81页,编辑于2022年,星期三定标算法步骤一1.1.求解像机外参数旋转矩阵求解像机外参数旋转矩阵 和和 、方向上的平移和方向上的平
13、移和(1)(2)第26页,共81页,编辑于2022年,星期三(3)(4)第27页,共81页,编辑于2022年,星期三(5)确定确定 的符号并得到的符号并得到假定假定 为正,在标定点中任意选取一个点,进行如下计算为正,在标定点中任意选取一个点,进行如下计算若若计算计算第28页,共81页,编辑于2022年,星期三定标算法步骤二2.求解求解Tz,f,k(1)(2)第29页,共81页,编辑于2022年,星期三3.3、基于交比不变的摄像机畸变系数标定、基于交比不变的摄像机畸变系数标定 对于空间中同一直线上的四个点:对于空间中同一直线上的四个点:交比:交比:空间点透视空间点透视关系:关系:第30页,共81
14、页,编辑于2022年,星期三对于空间四个点对应的理想图像点为:对于空间四个点对应的理想图像点为:对于空间四个点对应的实际图像点为:对于空间四个点对应的实际图像点为:第31页,共81页,编辑于2022年,星期三第32页,共81页,编辑于2022年,星期三张正友方法 3.4、张正友的平面标定方法、张正友的平面标定方法第33页,共81页,编辑于2022年,星期三张正友方法基本原理:基本原理:在这里假定模板平面在世界坐标系在这里假定模板平面在世界坐标系 的平面上的平面上 其中,其中,为摄像机的内参数矩阵,为摄像机的内参数矩阵,为模板平为模板平面上点的齐次坐标,面上点的齐次坐标,为模板平面上点投影到图为
15、模板平面上点投影到图象平面上对应点的齐次坐标,象平面上对应点的齐次坐标,和和 分别是摄像机分别是摄像机坐标系相对于世界坐标系的旋转矩阵和平移向量坐标系相对于世界坐标系的旋转矩阵和平移向量H第34页,共81页,编辑于2022年,星期三根据旋转矩阵的性质,即根据旋转矩阵的性质,即 和和 ,每幅,每幅图象可以获得以下两个对内参数矩阵的基本约束图象可以获得以下两个对内参数矩阵的基本约束由于摄像机有由于摄像机有5个未知内参数,所以当所摄取得的图象数目大于等于个未知内参数,所以当所摄取得的图象数目大于等于3时,就可以线性唯一求解出时,就可以线性唯一求解出张正友方法第35页,共81页,编辑于2022年,星期
16、三张正友方法所用的平面模板张正友方法第36页,共81页,编辑于2022年,星期三算法描述张正友方法1.打印一张模板并贴在一个平面上2.从不同角度拍摄若干张模板图象3.检测出图象中的特征点4.求出摄像机的内参数和外参数5.求出畸变系数6.优化求精第37页,共81页,编辑于2022年,星期三张正友方法张正友方法张正友的平面标定方法是介于传统标定方法和自标定方法之间的一种方张正友的平面标定方法是介于传统标定方法和自标定方法之间的一种方法。它既避免了传统方法设备要求高,操作繁琐等缺点,又较自标定方法。它既避免了传统方法设备要求高,操作繁琐等缺点,又较自标定方法精度高,符合办公、家庭使用的桌面视觉系统法
17、精度高,符合办公、家庭使用的桌面视觉系统(DVS)(DVS)的标定要求。的标定要求。张的方法是需要确定模板上点阵的物理坐标以及图像和模板之间张的方法是需要确定模板上点阵的物理坐标以及图像和模板之间的点的匹配,这给不熟悉计算机视觉的使用者带来了不便。的点的匹配,这给不熟悉计算机视觉的使用者带来了不便。第38页,共81页,编辑于2022年,星期三孟胡方法所用的模版3.5、孟晓桥、胡占义的圆标定方法、孟晓桥、胡占义的圆标定方法第39页,共81页,编辑于2022年,星期三孟胡方法 从至少三个不同方位拍摄模板图象,根据射影从至少三个不同方位拍摄模板图象,根据射影不变性计算出每幅图象上的圆环点像的坐标,不
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 第五 摄像机 标定 PPT 讲稿
限制150内