2022年运动目标识别方汇编 .pdf
《2022年运动目标识别方汇编 .pdf》由会员分享,可在线阅读,更多相关《2022年运动目标识别方汇编 .pdf(30页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、071021-I-CP-ZAB 说明书摘要本发明公开了一种运动目标识别方法,该方法在场景模型提供的先验知识辅助下,从视频序列中识别出感兴趣的目标(例如,人和车),并描述其静态和运动信息(区域、轮廓、纹理、类别、运动轨迹、速度等等)。所述运动目标识别方法包括:目标检测、目标跟踪和目标分类。其中,目标检测用于从视频图5 像中提取感兴趣的区域;目标跟踪用于建立帧与帧之间所提取区域之间的关联性和一致性,形成目标; 目标分类对区域和目标进行分类(如人和车),分类器包括区域分类器和目标分类器。根据本发明提供的方案,实现了运动目标的检测、跟踪和分类,解决了图像抖动、亮度变化、阴影、树叶摆动等问题。10 名师
2、资料总结 - - -精品资料欢迎下载 - - - - - - - - - - - - - - - - - - 名师精心整理 - - - - - - - 第 1 页,共 30 页 - - - - - - - - - 071021-I-CP-ZAB 摘要附图视频目标检测目标跟踪目标分类目标10 20 30 名师资料总结 - - -精品资料欢迎下载 - - - - - - - - - - - - - - - - - - 名师精心整理 - - - - - - - 第 2 页,共 30 页 - - - - - - - - - 071021-I-CP-ZAB 1权利要求书1、一种运动目标分类方法,其特征在
3、于,该方法包括:A、目标检测,用于从视频图像中提取感兴趣的区域;B、目标跟踪,用于建立帧与帧之间所提取区域之间的关联性和一致性,形成目标;5 C、目标分类,对区域和目标进行分类(如人和车),分类器包括区域分类器和目标分类器。2、根据权利要求1 所述的方法,其特征在于,步骤A 中所述目标检测进一步包括:视频获取,获取视频内容,以得到场景图像;10 图像预处理,用于消除其对背景模型的影响;区域标记,用于对背景模型进行前景分割,并标记出一个一个连通区域;系统状态维护,用于判定检测器模块当前所处的状态,做出相应处理,并且在必要时做异常检测;区域增强,用于剔除阴影、高亮和树叶摆动等虚假区域;15 区域分
4、裂与合并,用于解决目标过分割和目标相互遮挡问题。3、根据权利要求 2 所述的方法,其特征在于,所述图像预处理包括:滤波处理和全局运动补偿。所述滤波处理是指对图像做噪声过滤、平滑等处理。滤波处理可以通过多种图像去噪、图像平滑处理方法实现。20 所述全局运动补偿是指补偿由于相机轻微摆动而引起的图像全局运动。在全局运动补偿中,运动模型基本上就是反映摄像机的各种运动,包括平移、旋转、变焦等。4、根据权利要求2所述的方法,其特征在于,所述区域标记进一步包括:前景分割;形态学处理;连通区域标记。25 所述前景分割是指基于背景模型对场景图像进行分割,以得到前景的二值图像。名师资料总结 - - -精品资料欢迎
5、下载 - - - - - - - - - - - - - - - - - - 名师精心整理 - - - - - - - 第 3 页,共 30 页 - - - - - - - - - 071021-I-CP-ZAB 2所述形态学处理是指使用数学形态学的方法处理所述的二值图像,以去除面积较小的虚假区域,并填充面积较大的区域。数学形态学的方法可以通过先腐蚀后膨胀的方法实现。所述连通区域标记是指用连通域的方法标记同一场景中的不同区域,以区别不同的目标区域。连通区域标记方法可以通过四连通域方法、八连通域方法5 实现。5、根据权利要求 2 所述的方法,其特征在于,所述系统状态维护包括:状态判定和异常检测所
6、述状态判定用于判定当前所处的状态,并做出相应处理。该方法主要是通过场景稳定时间、 场景改变时间来判定的。 当场景稳定时间超过此时间阈值,10 系统由初始化状态进入工作状态;当场景改变时间超过此时间阈值,系统由工作状态进入初始化状态。当处于所述工作状态时,继续执行下一操作,背景模型不变。当处于所述初始化状态时,重新建立背景模型,并在必要时做出异常检测。所述重新建立背景模型可以通过帧间差分法实现。15 所述异常检测,是在必要时执行,包括视频信号干扰严重,有人为的遮挡相机等情况。6、 根据权利要求2所述的方法,其特征在于,所述区域增强使用差分图像、边缘图像、区域形状纹理等特征以及跟踪器反馈数据,剔除
7、阴影、高亮和树叶摆动等虚假区域,其包括:图像差分、边缘检测、阴影检测、高亮检测、树滤20 波。7、 根据权利要求6所述的方法,其特征在于,所述图像差分用于前景图像,可以通过帧间差分法或背景差分法实现。所述帧间差分法是利用相邻两帧之间的差来获得差分图像。8、根据权利要求 6 所述的方法, 其特征在于,所述边缘检测的基本思想是25 先检测前景图像中的边缘点,再按一定策略连接成轮廓,从而构成边缘图像。所述边缘检测可以通过灰度阈值法、跟踪法以及小波变换法实现。名师资料总结 - - -精品资料欢迎下载 - - - - - - - - - - - - - - - - - - 名师精心整理 - - - -
8、- - - 第 4 页,共 30 页 - - - - - - - - - 071021-I-CP-ZAB 39、根据权利要求 6 所述的方法, 其特征在于,所述阴影检测用于检测前景图像中的阴影区域,包括人、车的阴影,并将检测到的阴影区域滤除。所述阴影检测的思想是针对每个连通区域,分别计算该连通区域内的亮度的平均值,并将该平均值作为阈值,判定该区域的阴影区域,然后将阴影区域滤除。阴影判定规则如下:若亮度值小于所述阈值,则判定为阴影。5 10、根据权利要求6 所述的方法,其特征在于,所述高亮检测用于检测图像是否处于高亮状态,若是则进行亮度补偿。11、根据权利要求6 所述的方法,其特征在于,所述树检
9、测用于检测图像中的摆动的树叶及其阴影,并将其从前景图像中滤除。所述摆动树叶的检测是根据以下两个特征判定实现的:(1)运动轨迹跟踪,10 若某一目标的运动轨迹符合某一规律,则认为该目标是摆动树叶;(2)质心运动的振幅, 若某一目标的质心运动的振幅是突变的,则认为该目标是摆动树叶。所述摆动树叶阴影的检测是通过检测区域内点的密集度来实现的,其思想是:分别计算膨胀操作前后区域内的点,并计算它们的比率,若该比率小于某一阈值,则认为该区域是摆动树叶的阴影区域。15 12、根据权利要求2 所述的方法,其特征在于,所述区域分裂与合并使用场景模型提供的约束以及人和车模型等先验知识对区域进行合并和分裂处理,以解决
10、目标过分割和目标相互遮挡问题。13、根据权利要求1所述的方法,其特征在于,步骤B 中所述目标跟踪进一步包括:20 目标预测,用于估计目标的下一帧运动;目标匹配,用于跟踪匹配的稳定目标,并滤除一些虚假目标;目标更新,用于当前帧中稳定目标的模板更新。14、根据权利要求13所述的方法,其特征在于,所述目标预测的思想是:根据目标运动的累加位移及其相应的累加时间,计算该目标运动的平均速度,25 并根据该速度预测目标的下一次位移。15、根据权利要求13所述的方法, 其特征在于,所述累加位移、 累加时间名师资料总结 - - -精品资料欢迎下载 - - - - - - - - - - - - - - - -
11、- - 名师精心整理 - - - - - - - 第 5 页,共 30 页 - - - - - - - - - 071021-I-CP-ZAB 4及平均运动速度的关系为:vs t其中,s为目标质心稳定运动多帧后的位移,t为目标运动多帧所需的时间,v为该目标稳定运动的平均速度。根据所述平均速度v预测的下一次位移为:5 svt其中,t为预测的目标时间,s为目标质心稳定运动t时间后的位移。16、根据权利要求12所述的方法, 其特征在于,所述目标匹配包括:跟踪匹配的稳定目标;滤除虚假目标。17、根据权利要求 16所述的方法,其特征在于,所述跟踪匹配的稳定目标10 的核心是判定检测区域与跟踪目标是否匹配
12、。所述匹配的判定准则包括:1)最小面积比率, 要求检测区域与目标匹配成功的面积比率大于设定的最小面积比率;2)最小距离比率, 要求检测区域与目标匹配成功的距离大于设定的最小距离比率;15 3)运动区域的最大匹配距离阈值,运动区域的匹配距离阈值(像素单位)小于设定的最大匹配距离阈值;4)静止区域的最大匹配距离阈值,静止区域的匹配距离阈值(像素单位)小于设定的最大匹配距离阈值;5)跟踪目标与检测区域的最小匹配系数阈值,要求跟踪目标与检测区域的20 匹配系数大于此阈值。18、根据权利要求17所述的方法,其特征在于,所述判定准则5)中目标与区域的匹配用了距离、面积和直方图三个度量,这三个参数是计算最后
13、的匹配系数时三者的权重比例,一般来说, 距离匹配的权重要大于等于0.5,但权重之和须为 1。25 19、根据权利要求17和 18 所述的方法,其特征在于,当同时满足所述判定规则 1) 5)中的条件时,才判定跟踪目标与检测区域匹配成功。名师资料总结 - - -精品资料欢迎下载 - - - - - - - - - - - - - - - - - - 名师精心整理 - - - - - - - 第 6 页,共 30 页 - - - - - - - - - 071021-I-CP-ZAB 520、根据权利要求 16所述的方法,其特征在于,所述滤除虚假目标的思想是:通过目标运动的轨迹分析,以滤除一些虚假区
14、域。21、根据权利要求 20所述的方法,其特征在于,所述轨迹分析包括轨迹的平稳性分析和平滑性分析。其中,平稳性分析主要用于分析目标运动轨迹的波形;平滑性分析主要用于分析目标运动轨迹的方向性。5 所述轨迹分析需结合实际目标的特性判断。22、根据权利要求 13所述的方法,其特征在于,所述目标更新根据目标匹配后的稳定目标,实时的更新跟踪目标的模型。23、根据权利要求122 所述的方法,其特征在于,所述目标检测从每帧视频图像中提取感兴趣区域,提供给目标跟踪做目标跟踪用途,同时目标跟踪10 反馈的目标数据辅助目标检测的算法操作。24、根据权利要求1所述的方法,其特征在于,步骤C 中所述目标分类进一步包括
15、:特征提取,用以提取目标的空间特征和时间特征;类型判定,用以判定目标的类型。15 25、根据权利要求 24所述的方法,其特征在于,所述特征包括空间特征和时间特征两种。所述空间特征包括: 区域轮廓拟合椭圆的长轴、 区域轮廓拟合椭圆的短轴、拟合短轴与水平方向夹角、区域轮廓的类圆性、区域的紧集度、区域的面积、区域的上与下部分面积比。20 所述时间特征包括:目标的速度特征、目标的周期运动特征、及目标的历史分类信息。26、根据权利要求 25所述的方法,其特征在于,所述拟合短轴与水平方向夹角中的拟合短轴即为所述的区域轮廓拟合椭圆的短轴。区域轮廓拟合椭圆的长轴、区域轮廓拟合椭圆的短轴及拟合短轴与水平方25
16、向夹角用于区分单个人和车。所述的区域轮廓拟合椭圆的思想是:根据区域轮廓上的数据点,找一个椭圆使得数据点到这个椭圆的距离和最小。其核心是优名师资料总结 - - -精品资料欢迎下载 - - - - - - - - - - - - - - - - - - 名师精心整理 - - - - - - - 第 7 页,共 30 页 - - - - - - - - - 071021-I-CP-ZAB 6化距离和。27、根据权利要求 25所述的方法,其特征在于,所述区域轮廓的类圆性也用来区分单个人和车。所述的区域的类圆性是指拟合目标区域的周长与面积的关系。所述拟合目标区域的周长与面积的关系为:5 3cs其中,c为
17、拟合目标区域的周长,s为拟合目标区域的面积,为拟合目标区域的类圆性。28、根据权利要求 25所述的方法,其特征在于,所述的区域的紧集度指的是目标与目标区域的面积比。10 29、根据权利要求 25所述的方法,其特征在于,所述的区域的上与下部分面积比即为:区域上半部分面积与小半部分面积之比。30、根据权利要求 25所述的方法,其特征在于,所述历史分类信息是指目标出现的每个场景中的分类信息。所述的历史分类信息要根据区域轮廓拟合椭圆的长轴、区域轮廓拟合椭圆的短轴、拟合短轴与水平方向夹角、区域轮廓的15 类圆性、区域的紧集度、区域的面积、区域的上与下部分面积比、及目标的速度特征、目标的周期运动特征获得。
18、31、 根据权利要求24所述的方法,其特征在于,所述类型判定进一步包括:每帧分类;整体分类。所述每帧分类为:根据区域轮廓拟合椭圆的长轴、区域轮廓拟合椭圆的短20 轴、拟合短轴与水平方向夹角、区域轮廓的类圆性、区域的紧集度、区域的面积、区域的上与下部分面积比、及目标的速度特征、目标的周期运动特征,通过概率分类器进行每帧分类,以获得目标的历史分类信息。所述类型根据目标的历史分类信息进行分类,以判定目标的类型。其思想是:根据目标的历史分类信息中分类的叠加数判定目标类别。例如,若目标的25 历史分类信息中车的叠加数大于人的叠加数,则该目标判为车类型;反之,判名师资料总结 - - -精品资料欢迎下载 -
19、 - - - - - - - - - - - - - - - - - 名师精心整理 - - - - - - - 第 8 页,共 30 页 - - - - - - - - - 071021-I-CP-ZAB 7为人类型。32、 根据权利要求31所述的方法,其特征在于,所述概率分类器的思想是:分别按照人、人群、车、车群、小动物等类型,赋予区域轮廓拟合椭圆的长轴、区域轮廓拟合椭圆的短轴、拟合短轴与水平方向夹角、区域轮廓的类圆性、区域的紧集度、区域的面积、区域的上与下部分面积比、及目标的速度特征、目5 标的周期运动特征等特征不同的权值;然后分别计算人、人群、车、车群、小动物等类型的特征概率值,并选择概
20、率值最大的那一类型为目标的当前帧分类信息。名师资料总结 - - -精品资料欢迎下载 - - - - - - - - - - - - - - - - - - 名师精心整理 - - - - - - - 第 9 页,共 30 页 - - - - - - - - - 071021-I-CP-ZAB 1说明书运动目标识别方法技术领域本发明涉及视频监控技术,特别是指一种智能视频监控系统中的运动目标识别方法。5 背景技术运动目标识别是智能视频监控系统的关键模块,其直接影响着后续处理。通常运动目标识别包括:检测、跟踪、分类。检测的目的是将视频场景中的运动目标区域从背景中分割出来。由于光照的变化、背景混乱运动的
21、干扰、运动目标的影子、摄像机的抖动以及运动目标10 的自遮挡和互遮挡现象的存在,给运动目标的正确检测带来了极大的挑战。为了实现运动目标检测,可以使用光流法和帧间差分法。光流法检测采用了目标随时间变化的光流特性,可以通过计算位移向量光流场来初始化目标的轮廓,从而使基于轮廓的跟踪算法有效地检测和跟踪目标。这种方法的缺点是大多数光流计算方法相当复杂,且抗噪性能差,如果没有特别的硬件装置,很难应用15 于场景图像的实时性操作。帧间差分法是检测相邻两帧图像之间变化的最简单方法,是直接比较两帧图像对象像素点灰度值的不同,然后通过阈值来提取场景图像中的运动目标区域。这种方法的缺点是一般不能完全提取所有相关的
22、特征像素点,在运动实体内部容易产生空洞现象,对基于区域的运动目标跟踪的鲁棒性不强,而且无法检测出静止的车辆,对于运动目标的速度有所限制。20 跟踪的目的是在正确检测出运动目标的基础上,确定同一目标在不同场景图像中位置的过程。为了实现跟踪,可以使用图像匹配方法,如区域匹配、模型匹配。区域匹配是把参考图像的某一块整体与实时图像所有可能位置上进行叠加,然后计算某种图像相似性度量的相应值,其最大相似性相对应的位置就名师资料总结 - - -精品资料欢迎下载 - - - - - - - - - - - - - - - - - - 名师精心整理 - - - - - - - 第 10 页,共 30 页 - -
23、 - - - - - - - 071021-I-CP-ZAB 2是目标的位置。这种方法的缺点是计算量大,难以达到实时性要求。模型匹配是根据模板来匹配场景图像中的目标。这种方法的缺点是计算分析复杂,运算速度慢,模型的更新较为复杂,实时性较差。分类的目的是区分目标,如人和车。为了实现运动目标分类,可以使用贝叶斯算法和神经网络算法。贝叶斯算法是一类利用概率统计知识进行分类的算5 法,可以运用到大型数据库中,且方法简单、分类准确率高、速度快。这种方法的缺点是由于贝叶斯定理假设一个属性值对给定类的影响独立于其它属性的值,而此假设在实际情况中经常是不成立的,因此其分类准确率可能会下降。神经网络算法能够模拟
24、人类大脑的机构和功能,采用各种学习算法从训练样本中学习,并将获取的知识存储在网络各单元之间的连接权中,能够准确的分类10 目标。神经网络算法在1998年提出后,又出现许多变形, 包括替换的误差函数、网络拓扑的动态调整、学习率和要素参数的动态调整。近年来,从神经网络中提取规则受到越来越多的关注。 这种方法的缺点是由于要使用大量的训练样本,且在实际应用中要不断地更新样本信息,因此运算量极大。综上所述,目前迫切需要提出更为有效的运动目标识别方案。15 发明内容有鉴于此,本发明的主要目的在于提供一个运动目标识别方法。该方法在场景模型提供的先验知识辅助下,从视频序列中识别出感兴趣的目标(例如,人和车),
25、并描述其静态和运动信息(区域、轮廓、纹理、类别、运动轨迹、速度等等)。20 本发明的目的在于提供一个运动目标检测方法,该方法解决了光照的变化、背景混乱运动的干扰、运动目标的影子、摄像机的抖动以及运动目标的自遮挡和互遮挡现象的存在等带来的问题,实现了复杂场景下的运动目标检测。本发明的目的还在于提供一个运动目标跟踪方法,其可以根据目标检测结果进行预测、匹配、更新等操作,以滤除虚假运动目标,实现运动目标的准确25 跟踪。名师资料总结 - - -精品资料欢迎下载 - - - - - - - - - - - - - - - - - - 名师精心整理 - - - - - - - 第 11 页,共 30 页
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 2022年运动目标识别方汇编 2022 运动 目标 识别 汇编
限制150内