图像特征提取与分析.pptx
《图像特征提取与分析.pptx》由会员分享,可在线阅读,更多相关《图像特征提取与分析.pptx(142页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、第第4章章 图像特征提取与分析图像特征提取与分析本章重点:M图像特征及特征提取的基本概念。M常见的图像特征提取与描述方法,如 颜色特征、纹理特征和几何形状特征 提取与描述方法。第1页/共142页4.1 4.1 引言引言 4.2 4.2 颜色特征的提取与表示颜色特征的提取与表示 4.3 4.3 纹理特征的提取与表示纹理特征的提取与表示 4.4 4.4 形状特征的提取与表示形状特征的提取与表示 4.5 4.5 小结小结第第4章章 图像特征提取与分析图像特征提取与分析第2页/共142页4.1 引 言 4.1.1基本概念特征 从广义上讲,图像的特征包括基于文本的特征(如关键字、注释等)和视觉特征(如色
2、彩、纹理、形状、对象表面等)两类。视觉特征分类:颜色(color)、形状(shape)、纹理(texture)等 第3页/共142页特征形成根据待识别的图像,通过计算产生一组原始特征,称之为特征形成。特征提取原始特征的数量很大,或者说原始样本处于一个高维空间中,通过映射或变换的方法可以将高维空间中的特征描述用低维空间的特征来描述,这个过程就叫特征提取。4.1.1基本概念第4页/共142页特征选择从一组特征中挑选出一些最有效的特征以达到降低特征空间维数的目的,这个过程就叫特征选择。选取的特征应具有如下特点:可区别性可靠性独立性好数量少4.1.1基本概念第5页/共142页特征选择和提取的基本任务如
3、何从众多特征中找出最有效的特征。图像特征提取的方法低层次:形状、纹理、颜色、轮廓等图像某一方面的特征。中层次:高层次:在图像中层次特征基础上的再一次抽象,赋予图像一定的语义信息。4.1.1基本概念第6页/共142页4.1.2应用基于内容的图像检索(CBIR,Content-Based Image Retrieval)M研究背景:FCBIR是目前多媒体、信息检索、人工智能、数据库等领域共同关注的一个重要研究领域;F源于改进基于文本的图像检索技术(text-basedimageretrieval)的不足;第7页/共142页4.1.2应用M研究内容:F图像的内容是指物体、背景、构成、颜色等;F是一种
4、基于图像固有属性的机械匹配;M步骤特征提取图像匹配结果输出特征调整 第8页/共142页4.1.2应用M体系结构 系统的核心是图像特征数据库。第9页/共142页M研究现状 目前CBIR技术主要集中在颜色、纹理、形状等低层物理特征提取的基础上。基于高层语义的检索正有待研究。4.1.2应用M方法分类基于颜色特征的检索基于纹理特征的检索基于形状特征的检索第10页/共142页第11页/共142页4.2 4.2 颜色特征的提取与表示颜色特征的提取与表示 4.2.1 4.2.1 引言引言4.2.2 4.2.2 颜色直方图颜色直方图 4.2.3 4.2.3 颜色矩颜色矩4.2.4 4.2.4 颜色集颜色集4.
5、2.5 4.2.5 颜色聚合向量颜色聚合向量4.2.6 4.2.6 颜色相关图颜色相关图 第12页/共142页4.2.1引言u颜色特征的特点颜色与图像中包含的物体或场景关系密切;颜色特征对图像尺寸、方向、视角等的依赖性小;u需要解决的两个问题选择合适的颜色空间计算颜色特征选择合适的方法将颜色特征量化u表示的主要方法 颜色直方图、主色调、颜色矩、颜色集、聚类 第13页/共142页4.2.2 4.2.2 颜色直方图颜色直方图 J设设一一幅幅图图像像包包含含M个个像像素素,图图像像的的颜颜色色空空间间被被量量化化成成N个个不不同同颜颜色色。颜颜色色直直方方图图H定义为:定义为:hi为第为第i种颜色在
6、整幅图像中具有的像素数。种颜色在整幅图像中具有的像素数。J归一化为:归一化为:(1)(1)概念概念第14页/共142页(2)特点4.2.2颜色直方图|包含了图像中的颜色信息;|描述的是不同颜色在整幅图像中所占的比例,而不关心每种颜色的空间位置;|通过对图像中的像素进行遍历即可建立;|对于平移、旋转、尺度的变化和部分遮挡情况具有不变性;第15页/共142页4.2.2颜色直方图(3)建立J选择合适的颜色空间 由于RGB颜色空间与人的视觉不一致,可将RGB空间转换到视觉一致性空间。除了HSI空间外,还可以采用一种更简单的颜色空间:这里,max=255。第16页/共142页4.2.2颜色直方图J颜色量
7、化:F将颜色空间划分为若干个小的颜色区间,每个小区间成为直方图的一个bin(柱状图中每个柱所在的区间);F方法:向量量化、聚类方法、神经网络方法等;J计算落在每个小区间内像素的数量,得到颜色直方图。(3)建立第17页/共142页4.2.2颜色直方图(4)区分颜色直方图和灰度直方图灰度直方图示例第18页/共142页4.2.2颜色直方图(5)小结J优点:计算简单,对平移和旋转不敏感,能简单描述一幅图像中颜色的全局分布。J缺点:无法捕捉颜色组成之间的空间关系,丢失了图像的空间信息。第19页/共142页4.2.3 4.2.3 颜色矩颜色矩 颜色矩是以数学方法为基础的,通过计算矩来描述颜色的分布。颜色矩
8、是以数学方法为基础的,通过计算矩来描述颜色的分布。颜色矩通常直接在颜色矩通常直接在RGB空间计算。空间计算。颜色分布的前三阶矩表示为:颜色分布的前三阶矩表示为:第20页/共142页4.2.3颜色矩特点n图像的颜色矩有九个分量(3个颜色分量,每个分量上3个低阶矩);n与其它颜色特征相比非常简洁;n分辨力较弱;n颜色矩一般和其它特征结合使用,起到缩小范围的作用。第21页/共142页定义:设BM是M维的二值空间,在BM空间的每个轴对应唯一的索引m。一个颜色集就是BM二值空间中的一个二维矢量,它对应着对颜色m的选择,即颜色m出现时,cm=1,否则,cm=0。4.2.4颜色集第22页/共142页4.2.
9、4颜色集实现步骤:对于RGB空间中任意图像,它的每个像素可以表示为一个矢量 。变换T将其变换到另一与人视觉一致的颜色空间 ,即 。采用量化器QM对 重新量化,使得视觉上明显不同的颜色对应着不同的颜色集,并将颜色集映射成索引m。第23页/共142页与颜色直方图的关系:颜色集可以通过对颜色直方图设置阈值直接生成。如对于一颜色m,给定阈值m,颜色集与直方图的关系如下:因此,颜色集表示为一个二进制向量。4.2.4颜色集第24页/共142页4.2.4 4.2.4 颜色集颜色集 颜色集同时考虑了颜色空间的选择和颜色 空间的划分。使用颜色集表示颜色信息时,通常采用 HSI颜色空间。第25页/共142页4.2
10、.5颜色聚合向量颜色直方图的一种演变,核心思想是将属于直方图每个颜色区间的像素分为两部分,如果该区间中的某些像素所占据的连续区域面积大于给定的阈值,则该区域内的像素作为聚合像素,否则为非聚合像素。表示为:其中i与i分别代表直方图的第i个bin中聚合像素和非聚合像素的数量。第26页/共142页4.2.6 4.2.6 颜色相关图颜色相关图|不仅刻画了某一种颜色的像素占整个图像的比例,还反映了不同颜色对之间的空间相关性;|颜色相关图可以看作是一张用颜色对索引的 表,其中的第k个分量表示颜色为c(i)的像素和 颜色为c(j)的像素之间的距离小于k的概率;第27页/共142页4.2.6颜色相关图 设I表
11、示整张图像的全部像素,Ic(i)则表示颜色为c(i)的所有像素。颜色相关图可以表达为:其中 i,j 1,2,N,k 1,2,d,|p1 p2|表示像素p1和p2之间的距离。第28页/共142页4.3 4.3 图像的纹理分析技术图像的纹理分析技术 纹理纹理 纹理纹理指的是图像像素指的是图像像素灰度灰度或或颜色颜色的某种变化。的某种变化。4.3.1引言 Texture tells us information about spatial arrangement of the colors or intensities in an image.具有周期性;不依赖于颜色或亮度;第29页/共142页4.
12、3.1引言几种纹理图像第30页/共142页4.3.1引言包含多个纹理区域的图像第31页/共142页一些典型的纹理图像一些典型的纹理图像4.3.1引言第32页/共142页纹理特征纹理特征F纹理特征是从图像中计算出来的一个值,对纹理特征是从图像中计算出来的一个值,对区域区域内部内部灰度级变化的特征灰度级变化的特征进行量化。进行量化。F是一种是一种全局特征全局特征,仅利用纹理特征无法获得高层次图,仅利用纹理特征无法获得高层次图像内容。像内容。F不是基于像素点的特征,需要在包含多个像素点的不是基于像素点的特征,需要在包含多个像素点的区区域域中进行统计计算。中进行统计计算。F具有具有旋转不变性旋转不变性
13、,且对噪声有较强的抵抗能力。,且对噪声有较强的抵抗能力。F当图像分辨率变化的时候,计算出来的纹理可能会有当图像分辨率变化的时候,计算出来的纹理可能会有较大偏差。较大偏差。F适用于检索具有粗细、疏密等方面较大差别的纹理图适用于检索具有粗细、疏密等方面较大差别的纹理图像。像。4.3.1引言第33页/共142页4.3.1引言纹理特征的表示(1)Haralick等用共生矩阵来表示纹理特征;(2)Tamura纹理特征:M基于人类对纹理的视觉感知心理学研究;M包含6个分量:粗糙度、对比度、方向度、线像度、规整度及粗略度;M6个分量对应于心理学角度上纹理特征的6种属性;第34页/共142页4.3.1引言纹理
14、分析F定义:通过一定的图像处理技术抽取出纹理特征,从而获得纹理的定量或定性描述的处理过程。F基本过程:从像素出发,在纹理图像中提取出一些辨识力比较强的特征,作为检测出的纹理基元,并找出纹理基元排列的信息,建立纹理基元模型,然后再利用此纹理基元模型对纹理图像进一步分割、分类或是辨识等处理。第35页/共142页4.3.1引言纹理特征描述方法分类(1)统计方法灰度共生矩阵(2)几何法纹理基元(3)模型法构造图像的模型(4)信号处理法第36页/共142页纹理特征的提取与匹配4.3.1引言FTamura纹理特征F自回归纹理模型F小波变换F灰度共生矩阵第37页/共142页4.3.2Tamura纹理特征n基
15、于人类对纹理的视觉感知心理学研究;n其6个分量对应于心理学角度上纹理特征的6种属性;n粗糙度,对比度,方向度,线像度,规整度以及粗略度;第38页/共142页粗糙度1.计算图像中各像素在大小为2k2k邻域中的均值;4.3.2Tamura纹理特征k=1,2,5;g(i,j)是位于是位于(i,j)的像素灰度值的像素灰度值第39页/共142页2.计算每个像素在水平和垂直方向上互不重叠的窗口之间的均值之差;3.对每个像素,能使E值(无论方向)达到最大的k值用来设置最佳尺寸;粗糙度4.3.2Tamura纹理特征第40页/共142页4.对于整幅图像(大小为mn)中的每个像素,计算Sbest的平均值得到粗糙度
16、的数值:粗糙度4.3.2Tamura纹理特征第41页/共142页对粗糙度的描述只有一个数值,它反映的是一幅图像对粗糙度的描述只有一个数值,它反映的是一幅图像平均的粗糙程度。平均的粗糙程度。对于纹理图像具有一致基元尺寸时,这种描述是最优对于纹理图像具有一致基元尺寸时,这种描述是最优的。的。对具有不同尺寸分布的纹理图像,这种描述将损失大对具有不同尺寸分布的纹理图像,这种描述将损失大量图像信息。量图像信息。第42页/共142页方向度1.计算每个像素的梯度向量,梯度向量的模和方向分别为:4.3.2Tamura纹理特征 其中两个delta值分别是通过图像卷积下列两个操作符所得到的水平和垂直方向上的变化量
17、定义的:第43页/共142页2.构造方向(值)的直方图;q该直方图对于具有明显方向性的图像会表现出峰值,对于无明显方向的图像则表现的比较平坦。3.计算图像总体的方向性。q再通过一个公式计算直方图中峰值的尖锐程度得到图像总的方向性方向度4.3.2Tamura纹理特征第44页/共142页对比度对比度是通过对像素强度分布情况的统计得到的。其中4=4/4,4 是四阶中心矩,而2是方差。4.3.2Tamura纹理特征第45页/共142页4.3.4基于小波变换的纹理特征n对一幅图像进行小波分解,得到一系列的小波系数;n例如一幅1616的图像经过三层小波分解,可得到十块小波分解结果,共256个系数;小波分解
18、示意图第47页/共142页4.3.4基于小波变换的纹理特征n分解出来的子图像称为小波分解通道,共有四种小波通道:LL,LH,HL以及HH;n每个通道对应于原始图像在不同尺度(频率)和方向下的信息:qLL图像在水平低频和垂直低频下的信息;qLH图像在水平低频和垂直高频下的信息;qHL图像在水平高频和垂直低频下的信息;qHH图像在水平高频和垂直高频下的信息;第48页/共142页4.3.4基于小波变换的纹理特征n当图像在某个频率和方向下具有比较明显的纹理特征时,与之对应的小波通道的输出就具有较大的能量;n纹理特征可以由小波通道的能量和方差来表示:第49页/共142页nHH通道反映的是图像的高频特征,
19、包含了大部分的噪声,不适合用于纹理的提取;使用阴影部分的七使用阴影部分的七个通道进行纹理分个通道进行纹理分析。析。4.3.4基于小波变换的纹理特征第50页/共142页4.3.5 4.3.5 空间灰度共生矩阵空间灰度共生矩阵 灰度共生矩阵就是从灰度共生矩阵就是从NN的图像的图像f(x,y)的灰的灰度为度为i的像素出发,统计与距离为的像素出发,统计与距离为=(dx2+dy2)1/2,灰度为,灰度为 j的像素同时出现的概率的像素同时出现的概率P(i,j,)。用数学表达式则为:用数学表达式则为:灰度共生矩阵的像素对第51页/共142页0o方向灰度共生矩阵计算示意图一幅数字灰度图像0 0 0 0 1 1
20、 1 10 0 0 0 1 1 1 10 0 0 0 1 1 1 10 0 0 0 1 1 1 12 2 2 2 2 2 3 32 2 2 2 2 2 3 32 2 2 2 2 2 3 32 2 2 2 2 2 3 30 0 0 0 1 1 1 10 0 0 0 1 1 1 10 0 0 0 1 1 1 10 0 0 0 1 1 1 12 2 2 2 2 2 3 32 2 2 2 2 2 3 32 2 2 2 2 2 3 32 2 2 2 2 2 3 3(1)(1)各个方向的灰度共生矩阵各个方向的灰度共生矩阵 当=0 时,dx=1,dy=0,由于所给图像中只有4个灰度级,因此所求得的灰度共生矩
21、阵的大小为44。4.3.5空间灰度共生矩阵第52页/共142页45o方向灰度共生矩阵计算示意图0 0 0 0 1 1 1 10 0 0 0 1 1 1 10 0 0 0 1 1 1 10 0 0 0 1 1 1 12 2 2 2 2 2 3 32 2 2 2 2 2 3 32 2 2 2 2 2 3 32 2 2 2 2 2 3 3当=45 时,dx=1,dy=-1当=90 时,dx=0,dy=-10 0 0 0 1 1 1 10 0 0 0 1 1 1 10 0 0 0 1 1 1 10 0 0 0 1 1 1 12 2 2 2 2 2 3 32 2 2 2 2 2 3 32 2 2 2 2
22、 2 3 32 2 2 2 2 2 3 390o方向灰度共生矩阵计算示意图(1)各个方向的灰度共生矩阵4.3.5空间灰度共生矩阵第53页/共142页135o方向灰度共生矩阵计算示意图0 0 0 0 1 1 1 10 0 0 0 1 1 1 10 0 0 0 1 1 1 10 0 0 0 1 1 1 12 2 2 2 2 2 3 32 2 2 2 2 2 3 32 2 2 2 2 2 3 32 2 2 2 2 2 3 3当=135 时,dx=-1,dy=-1(1)各个方向的灰度共生矩阵4.3.5空间灰度共生矩阵第54页/共142页灰度共生矩阵计算结果:(1)各个方向的灰度共生矩阵4.3.5空间灰
23、度共生矩阵第55页/共142页用用于于测测量量灰灰度度级级分分布布随随机机性性的的一一种种特特征征参参数数叫做熵。叫做熵。熵熵值值是是图图像像内内容容随随机机性性的的量量度度,熵熵值值大大表表示示随机性比较强。随机性比较强。若若图图像像没没有有任任何何纹纹理理,则则灰灰度度共共生生矩矩阵阵几几乎乎为为零零矩矩阵阵,则则熵熵值值接接近近为为零零;若若图图像像有有较较多多的的细细小小纹纹理理,则则灰灰度度共共生生矩矩阵阵中中的的数数值值近近似似相等,则图像的熵值最大。相等,则图像的熵值最大。熵值的定义:熵值的定义:(2)熵值4.3.5空间灰度共生矩阵第56页/共142页能量:能量:对比度:对比度:
24、均匀度:均匀度:(3)能量、对比度、均匀度反映均匀性或平滑性反映均匀性或平滑性反映图像点对中前后点间灰度差的度量反映图像的均匀程度第57页/共142页能量能量是灰度共生矩阵各元素值的平方和,它是图像灰度分布均匀性或平滑性的度量,反映了图像的均匀程度和纹理粗细度,是影像纹理灰度变化均一性的度量。能量值大表明当前纹理是一种规则变化较为稳定的纹理。当灰度共生矩阵中元素分布较集中在主对角线附近值,说明局部区域内图像灰度分布较均匀。从图像整体看,纹理粗糙,则能量值应较大。反之,能量值较小,图像比较均匀或平滑。对比度对比度又称主对角线惯性矩,用于度量灰度共生矩阵的分布和图像局部的变化,即图像点对中前后点之
25、间灰度差的度量,反映图像清晰度和纹理的沟纹深浅。图像局部变化越大,即灰度差大的点对大量出现,则对比度越大,图像较粗糙,视觉效果越清晰;反之,图像较柔和。因此,图像的对比度可理解为图像的清晰度,即纹理清晰程度。第58页/共142页n灰度共生矩阵的优点:q特别适用于描述微小纹理;q易于理解和计算;n灰度共生矩阵的缺点:q不适合描述含有大面积基元的纹理,因为矩阵没有包含形状信息;q矩阵的大小只与最大灰度级有关系,而与图像大小无关;(4)小结4.3.5空间灰度共生矩阵第59页/共142页4.3.6 4.3.6 纹理能量测量纹理能量测量 Laws的纹理能量测量方法是一种典型的的纹理能量测量方法是一种典型
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 图像 特征 提取 分析
限制150内