立体视觉基础ppt课件.ppt
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_05.gif)
《立体视觉基础ppt课件.ppt》由会员分享,可在线阅读,更多相关《立体视觉基础ppt课件.ppt(236页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。主要内容一.立体视觉的概念二.立体视觉的基本原理三.射影几何中的基本概念四.基本的成像模型五.单视几何学的基本原理六.双视几何学的基本原理七.摄像机标定的基本原理严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。一.立体视觉的概念1.计算机视觉的概念2.立体视觉的概念1.计算机视觉的概念什么是计算机视觉?模拟人眼接收客观世界中可见光信息,并由大脑解释可视信息的过程,使用算法对真实图像或视频中的内容给予有效的解释。入口数据:
2、图像、视频(可视信息)出口数据:对可视内容的某种解释(非可视信息)严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。1.计算机视觉的概念应用实例:汽车牌照识别车辆形状识别人脸识别拍摄场景中的人数统计动态目标分割、定位、跟踪、行为分析严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。1.计算机视觉的概念相关领域:计算机图形学数字图像处理严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。计算机图形学使用图形生成管道
3、(一组有序执行的算法),由计算机内部的虚拟几何图形表述生成虚拟可视像素图形的过程。入口数据:虚拟二维或三维场景描述(几何图形,非可视数据)出口数据:经图形管道处理后得到的虚拟的、像素化图形(可视数据)严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。数字图像处理使用算法对数字图像中的像素信息实施处理,使图像中内容的可视化质量得以提高的过程。入口数据:图像(可视)出口数据:图像(可视)严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。2.立体视觉的概念模仿人眼的立体视觉过程
4、,基于一帧或多帧具有共同拍摄场景的图像,由其中的二维形状信息恢复原始场景中三维形状信息的视觉过程。严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。二.立体视觉的基本原理1.单视几何原理2.双视几何原理3.多视几何原理4.立体视觉的一般处理过程严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。1.单视几何原理单视几何:针对平面物体的形状恢复严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。2.双视几何原理双视几
5、何:基于标定摄像机的三维表面重建严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。3.多视几何原理多视几何:基于未标定摄像机的三维表面重建严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。4.立体视觉的一般处理过程plprPOlOrXlXrPlPrflfrZlYlZrYrR,T入口数据:单帧或多帧图像为了最终恢复三维信息,需要基于入口数据进一步获取哪些数据?严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。4.
6、立体视觉的一般处理过程问题:如何知道不同图像中的匹配信息?如何知道不同拍摄方位的相对放置(外部参数)?如何知道摄像机的内部参数?严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。4.立体视觉的一般处理过程(1)图像配准(2)摄像机标定(确定内部参数)(3)确定摄像机相对放置(确定外部参数)(4)三维表面重建严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。(1)图像配准1)基于像素的图像配准方法两帧图像中所有具有同一原像的像素对都应建立匹配关系。2)基于特征的图像配准方法
7、仅针对两帧图像中的具有同一原像的点、线、区域特征对建立匹配关系。严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。(1)图像配准两类方法具有一定的联系,并且,基于特征的图像配准效率更高,在其基础上可简化像素级配准。由于各类特征均可以转换为点特征,因此,基于特征点的配准方法成为研究的重点。例如,直线段特征可转换为直线段的两两交点,区域特征可转换为区域的重心。严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。2)基于特征点的图像配准a)数字图像中的特征点提取示例:角点提取b)
8、基于特征点的图像配准仿射图像配准、透视图像配准、基于外极几何约束的图像配准严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。a)角点提取示例:基于独立性的角点提取方法两个像素窗口的关联系数:像素的独立性:1 234 567 89123456789x与与y 小于指定整数,且不同时为零小于指定整数,且不同时为零严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。a)角点提取独立性示例:亮度越强的像素位置独立性越强严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时
9、发现、制止、汇报并处理各类违纪行为或突发事件。a)角点提取处理流程:1.从图像中提取边缘像素集2.将边缘像素按照独立性降序排序3.对于当前独立性最大的像素,若其独立性大于指定阈值,则将其输出到角点集,否则结束处理流程4.对于剩余的边缘像素集,将其独立性乘以H,转第2步严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。a)角点提取其中,di为第i个剩余边缘像素与输出角点间的像素距离;D为相对距离定义,由它规定距离远、近的概念。严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件
10、。b)基于特征点的图像配准图像配准的目的:在两帧图像间建立一个映射关系,该映射能够将其中一帧图像上的特征点坐标映射为另一帧图像中匹配特征点的坐标。严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。b)基于特征点的图像配准问题:两帧图像中的特征点数量一定相等吗?是否所有特征点都存在对应的匹配特征点?两帧图象存在差异,内容不会完全一致,因此特征点数量也不一定相等两帧图象存在差异,某特征点可能在左图像中出现,但却可能在右图像中未出现严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事
11、件。b)基于特征点的图像配准特征点坐标间的映射可理解为坐标变换,可使用矩阵来表示。矩阵类型与图像间几何变换的关系:1.二维仿射矩阵与图像平面内的二维旋转、平移、放缩变换对应2.二维透视矩阵除包含二维变换外,还包含摄像机绕光心的旋转变换3.基础矩阵包含二维变换、摄像机旋转、摄像机平移等变换严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。b)基于特征点的图像配准二维仿射变换:两帧图像间的变化可由二维图像平面上的二维旋转、放缩、平移来描述;r、l 分别表示左右图像中特征点坐标,i、j 表示特征点序号若已知左、右图像中的3个匹配特征点对,
12、则能求解该变换严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。b)基于特征点的图像配准二维透视变换:两帧图像间的变化包括二维图像平面上的二维旋转、放缩、平移、摄像机成像平面在三维空间中绕光心旋转;r、l 分别表示左右图像中特征点坐标,i、j 表示特征点序号若已知左、右图像中的4个匹配特征点对,则能求解该变换严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。b)基于特征点的图像配准仿射配准的处理流程:1.假设左图像与右图像的特征点集分别为P、Q,从P、Q中选择一个未尝试的
13、三点对,若已无三点对可以选择,则认为配准失败,并结束处理流程2.使用相似三角形约束判断三点对的合理性,若不合理,则转第一步严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。b)基于特征点的图像配准相似三角形约束:p、q分别表示P、Q中的特征点,相同脚标表示具有匹配关系,为很小的值严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。b)基于特征点的图像配准3.使用三点对解方程组,求解仿射变换的6个未知系数,确定变换矩阵4.使用得到的变换矩阵,求P中所有特征点在Q中满足容忍度D
14、(误差,以像素为单位)的匹配特征点5.若特征点数量足够大,则认为配准成功,保存匹配点对信息,结束处理流程;否则,转第1步严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。b)基于特征点的图像配准仿射配准示例:由于实际的几何变换包含仿射配准示例:由于实际的几何变换包含摄像机绕光心旋转、平移等三维变换,因摄像机绕光心旋转、平移等三维变换,因此导致部分点对失配此导致部分点对失配严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。三.射影几何中的基本概念1.矩阵与向量间的关系2.几
15、何变换与逆变换3.对偶与对偶变换4.欧氏几何、同射几何、仿射几何、射影几何的概念以及相互间的关系严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。1.矩阵与向量间的关系向量的几何概念:具有长度、方向的几何元素向量表述的几何元素:点、线、面、乃至于N维空间中的线性几何元素向量的具体形式:一组坐标值严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。向量坐标的本质向量坐标的本质:在N维空间中,在给定基向量集的基础上,任意向量在各基向量上的投影给定向量,求坐标:向各基向量投影给定
16、坐标,求向量:以坐标为系数对基向量做线性组合严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。向量坐标的本质oXY矩阵行、列均理解为基向量集严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。矩阵的本质-以旋转为例YXYXOVVXVYVXVY思考:行、列向量组的含义是什么?逆变换逆变换严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。矩阵的本质-以旋转为例YXYXO(x,y)严格执行突发事件上报制度、校外活动报批
17、制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。矩阵的本质-以旋转为例YXYXO(x,y)严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。矩阵的本质仅考虑N阶方阵,因为一般矩阵可通过添加零向量(行或列)扩展为方阵。任意N阶方阵的行、列向量组分别对应N维空间中两个不同的基向量集(不一定线性无关),即N维空间中的两个坐标系。严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。矩阵的本质方阵的行向量组为行坐标系基向量在列坐标系下的坐标;列向量组为列坐标
18、系基向量在行坐标系下的坐标。严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。矩阵的本质N阶方阵的本质是N维空间中两个坐标系间的坐标变换。若N阶方阵不是满秩矩阵,即行、列向量组中存在线性相关,则坐标变换中存在降维变换。N阶单位阵的行、列坐标系为同一坐标系,其中无坐标变换。严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。向量变换与坐标系变换YXYYXXOOO等价变换等价变换严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为
19、或突发事件。向量变换与坐标系变换对任意一种向量变换,可以找到一种等价的坐标系变换与之对应;反之亦然。严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。2.几何变换与逆变换(1)旋转变换与逆变换(2)放缩变换与逆变换(3)平移变换与逆变换(4)射影变换与逆变换(5)变换与逆变换基向量组间关系严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。(1)旋转变换与逆变换旋转变换一一对应于单位正交阵,也称为旋转矩阵,其逆变换即为旋转矩阵的转置。解释:V由R的列坐标系变换到行坐标系,再
20、由行坐标系变换到列坐标系;列坐标系自己向自己投影,即无坐标变换。严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。(2)放缩变换与逆变换YXOYXOYXO等价变换等价变换沿坐标轴放缩沿坐标轴放缩严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。沿坐标轴放缩对于沿坐标轴的放缩,变换矩阵为对角阵,对角线上各元素对应各坐标轴分别的放缩因子。行坐标系与列坐标系相互的坐标描述完全一致。思考:试从投影与线性组合两个角度来解释放缩变换。严格执行突发事件上报制度、校外活动报批制度等相关规
21、章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。沿坐标轴放缩-逆变换严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。(2)放缩变换与逆变换YXOYXOppXpYOXYypxpxpyp等价变换等价变换沿任意方向放缩沿任意方向放缩列坐标系变换:列坐标系变换:变换矩阵为对称阵变换矩阵为对称阵放缩变换可能改变几何形状(夹角),但不会改变平行性严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。沿任意方向的放缩对于沿任意方向的放缩,其变换矩阵为对称阵,其含义是先将坐标
22、系旋转到放缩方向,再实施向量放缩,最后再将坐标系旋转回原处。任意对称阵总可以拆分为RTKR的形式。行坐标系与列坐标系相互的坐标描述完全一致。思考:试从投影与线性组合两个角度来解释放缩变换严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。沿任意方向的放缩-逆变换可见,逆变换的可见,逆变换的放缩方向并无变化放缩方向并无变化,仅将放缩因子变为倒数仅将放缩因子变为倒数严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。线性变换N维向量空间中的旋转、放缩变换统称为线性变换。N维空间中
23、的线性变换与N阶方阵一一对应。任一N阶矩阵对应的线性变换均可分解为旋转、放缩两种变换。严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。N阶方阵的特征值分解(SVD)M为任意N阶矩阵,R表示旋转,RTKR表示任意方向上的放缩严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。(3)平移变换与逆变换在N维向量空间中,平移变换是通过向量加法来实现的,而非矩阵实现的线性变换。如果使用矩阵来实现平移,则必须引入齐次坐标系,将N维向量空间扩展为N+1 维空间,称为N维射影空间。为了区
24、分所讨论的向量空间,将N维常规空间称为IRN,将N维射影空间称为IPN。严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。二维射影空间IP2YXOW(0,0,1)(x,y,w)(x/w,y/w,1)Plane:w=1在IP2 中,对任意过原点的直线,其上所有点等价,每条过原点直线对应平面w=1上一个点。虽然是3维坐标,但自由度仍为2IR2在IP2中对应于平面w=1严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。三维射影空间IP34维空间中每条过原点的直线等价于w=1这个
25、3维超平面中的一个点虽然是4维坐标,但自由度仍为3严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。三维射影空间IP3如果要针对IP3作图,则必须在4维空间作图,无法实现。但应理解,IR3中的每一点均为IP3中过原点直线在w=1的3维超频面上投影而成的。注:直线(1维)、平面(2维)、3维超平面、乃至N维超平面并没有本质区别,区别仅在于维度。严格执行突发事件上报制度、校外活动报批制度等相关规章制度。做到及时发现、制止、汇报并处理各类违纪行为或突发事件。XYW二维平移变换XYWXYW通过IP2中的线性变换实现了IR2中的平移变换严格执
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 立体 视觉 基础 ppt 课件
![提示](https://www.taowenge.com/images/bang_tan.gif)
限制150内