特征提取
特征被检测后它可以从图像中被提取出来,这个过程可能需要许
多图像处理的计算机。其结果被称为特征描述或者特征向量。
常用的图像特征有颜色特征、纹理特征、形状特征、空间关系特
征。
一 颜色特征
(一)特点:颜色特征是一种全局特征,描述了图像或图像区域
所对应的景物的表面性质。一般颜色特征是基于像素点的特征,此时
所有属于图像或图像区域的像素都有各自的贡献。由于颜色对图像或
图像区域的方向、大小等变化不敏感,所以颜色特征不能很好地捕捉
图像中对象的局部特征。另外,仅使用颜色特征查询时,如果数据库
很大,常会将许多不需要的图像也检索出来。颜色直方图是最常用的
表达颜色特征的方法,其优点是不受图像旋转和平移变化的影响,进
一步借助归一化还可不受图像尺度变化的影响,基缺点是没有表达出
颜色空间分布的信息。
(二)常用的特征提取与匹配方法
(1) 颜色直方图
其优点在于:它能简单描述一幅图像中颜色的全局分布,即不同
色彩在整幅图像中所占的比例,特别适用于描述那些难以自动分割的
图像和不需要考虑物体空间位置的图像。其缺点在于:它无法描述图
像中颜色的局部分布及每种色彩所处的空间位置,即无法描述图像中
的某一具体的对象或物体。
最常用的颜色空间:RGB 颜色空间、HSV 颜色空间。
颜色直方图特征匹配方法:直方图相交法、距离法、中心距法、
参考颜色表法、累加颜色直方图法。
(2) 颜色集
颜色直方图法是一种全局颜色特征提取与匹配方法,无法区分局
部颜色信息。颜色集是对颜色直方图的一种近似首先将图像从
RGB 颜色空间转化成视觉均衡的颜色空间(如 HSV
空间),并将颜色空间量化成若干个柄。然后,用色彩自动分割
技术将图像分为若干区域,每个区域用量化颜色空间的某个颜色分量
来索引,从而将图像表达为一个二进制的颜色索引集。在图像匹配中,
比较不同图像颜色集之间的距离和色彩区域的空间关系
(3) 颜色矩
这种方法的数学基础在于:图像中任何的颜色分布均可以用它的
矩来表示。此外,由于颜色分布信息主要集中在低阶矩中,因此,仅
采用颜色的一阶矩(mean)、二阶矩(variance)和三阶矩(skewness)
就足以表达图像的颜色分布。
(4) 颜色聚合向量
其核心思想是:将属于直方图每一个柄的像素分成两部分,如果
该柄内的某些像素所占据的连续区域的面积大于给定的阈值,则该区
域内的像素作为聚合像素,否则作为非聚合像素。
(5) 颜色相关图
二 纹理特征
(一)特点:纹理特征也是一种全局特征,它也描述了图像或图
像区域所对应景物的表面性质。但由于纹理只是一种物体表面的特
性,并不能完全反映出物体的本质属性,所以仅仅利用纹理特征是无
法获得高层次图像内容的。与颜色特征不同,纹理特征不是基于像素
点的特征,它需要在包含多个像素点的区域中进行统计计算。在模式
匹配中,这种区域性的特征具有较大的优越性,不会由于局部的偏差
而无法匹配成功。作为一种统计特征,纹理特征常具有旋转不变性,
并且对于噪声有较强的抵抗能力。但是,纹理特征也有其缺点,一个
很明显的缺点是当图像的分辨率变化的时候,所计算出来的纹理可能
会有较大偏差。另外,由于有可能受到光照、反射情况的影响,从
2-D 图像中反映出来的纹理不一定是 3-D 物体表面真实的纹理。
例如,水中的倒影,光滑的金属面互相反射造成的影响等都会导
致纹理的变化。由于这些不是物体本身的特性,因而将纹理信息应用
于检索时,有时这些虚假的纹理会对检索造成“误导”。
在检索具有粗细、疏密等方面较大差别的纹理图像时,利用纹理
特征是一种有效的方法。但当纹理之间的粗细、疏密等易于分辨的信
息之间相差不大的时候,通常的纹理特征很难准确地反映出人的视觉
感觉不同的纹理之间的差别。
(二)常用的特征提取与匹配方法
纹理特征描述方法分类
(1)统计方法统计方法的典型代表是一种称为灰度共生矩阵的
纹理特征分析方法 Gotlieb 和 Kreyszig
等人在研究共生矩阵中各种统计特征基础上,通过实验,得出灰
度共生矩阵的四个关键特征:能量、惯量、熵和相关性。统计方法中
另一种典型方法,则是从图像的自相关函数(即图像的能量谱函数)
提取纹理特征,即通过对图像的能量谱函数的计算,提取纹理的粗细
度及方向性等特征参数
(2)几何法
所谓几何法,是建立在纹理基元(基本的纹理元素)理论基础上
的一种纹理特征分析方法。纹理基元理论认为,复杂的纹理可以由若
干简单的纹理基元以一定的有规律的形式重复排列构成。在几何法
中,比较有影响的算法有两种:Voronio
棋盘格特征法和结构法。
(3)模型法
模型法以图像的构造模型为基础,采用模型的参数作为纹理特
征。典型的方法是随机场模型法,如马尔可夫(Markov)随机场(MRF)
模型法和
Gibbs 随机场模型法
(4)信号处理法
纹理特征的提取与匹配主要有:灰度共生矩阵、Tamura 纹理特
征、自回归纹理模型、小波变换等。
灰度共生矩阵特征提取与匹配主要依赖于能量、惯量、熵和相关
性四个参数。Tamura
纹理特征基于人类对纹理的视觉感知心理学研究,提出 6 种属
性,即:粗糙度、对比度、方向度、线像度、规整度和粗略度。自回
归纹理模型(simultaneous
auto-regressive, SAR)是马尔可夫随机场(MRF)模型的一种应
用实例。
三 形状特征
(一)特点:各种基于形状特征的检索方法都可以比较有效地利
用图像中感兴趣的目标来进行检索,但它们也有一些共同的问题,包
括:①目前基于形状的检索方法还缺乏比较完善的数学模型;②如果
目标有变形时检索结果往往不太可靠;③许多形状特征仅描述了目标
局部的性质,要全面描述目标常对计算时间和存储量有较高的要求;
④许多形状特征所反映的目标形状信息与人的直观感觉不完全一致,
或者说,特征空间的相似性与人视觉系统感受到的相似性有差别。另
外,从
2-D 图像中表现的 3-D 物体实际上只是物体在空间某一平面的
投影,从 2-D 图像中反映出来的形状常不是 3-D
物体真实的形状,由于视点的变化,可能会产生各种失真。
(二)常用的特征提取与匹配方法
Ⅰ几种典型的形状特征描述方法
通常情况下,形状特征有两类表示方法,一类是轮廓特征,另一
类是区域特征。图像的轮廓特征主要针对物体的外边界,而图像的区
域特征则关系到整个形状区域。
几种典型的形状特征描述方法:
(1)边界特征法该方法通过对边界特征的描述来获取图像的形
状参数。其中 Hough
变换检测平行直线方法和边界方向直方图方法是经典方法。
Hough
变换是利用图像全局特性而将边缘像素连接起来组成区域封闭
边界的一种方法,其基本思想是点—线的对偶性;边界方向直方图法
首先微分图像求得图像边缘,然后,做出关于边缘大小和方向的直方
图,通常的方法是构造图像灰度梯度方向矩阵。
(2)傅里叶形状描述符法
傅里叶形状描述符(Fourier shape
descriptors)基本思想是用物体边界的傅里叶变换作为形状描述,
利用区域边界的封闭性和周期性,将二维问题转化为一维问题。
由边界点导出三种形状表达,分别是曲率函数、质心距离、复坐
标函数。
(3)几何参数法
形状的表达和匹配采用更为简单的区域特征描述方法,例如采用
有关形状定量测度(如矩、面积、周长等)的形状参数法(shape
factor)。在 QBIC 系统中,便是利用圆度、偏心率、主轴方向
和代数不变矩等几何参数,进行基于形状特征的图像检索。
需要说明的是,形状参数的提取,必须以图像处理及图像分割为
前提,参数的准确性必然受到分割效果的影响,对分割效果很差的图
像,形状参数甚至无法提取。
(4)形状不变矩法
利用目标所占区域的矩作为形状描述参数。
(5)其它方法
近年来,在形状的表示和匹配方面的工作还包括有限元法(Finite
Element Method 或 FEM)、旋转函数(Turning
Function)和小波描述符(Wavelet Descriptor)等方法。
Ⅱ 基于小波和相对矩的形状特征提取与匹配
该方法先用小波变换模极大值得到多尺度边缘图像,然后计算每
一尺度的 7 个不变矩,再转化为 10
个相对矩,将所有尺度上的相对矩作为图像特征向量,从而统一
了区域和封闭、不封闭结构。
四 空间关系特征
(一)特点:所谓空间关系,是指图像中分割出来的多个目标之
间的相互的空间位置或相对方向关系,这些关系也可分为连接/邻接
关系、交叠/重叠关系和包含/包容关系等。通常空间位置信息可以分
为两类:相对空间位置信息和绝对空间位置信息。前一种关系强调的
是目标之间的相对情况,如上下左右关系等,后一种关系强调的是目
标之间的距离大小以及方位。显而易见,由绝对空间位置可推出相对
空间位置,但表达相对空间位置信息常比较简单。
空间关系特征的使用可加强对图像内容的描述区分能力,但空间
关系特征常对图像或目标的旋转、反转、尺度变化等比较敏感。另外,
实际应用中,仅仅利用空间信息往往是不够的,不能有效准确地表达
场景信息。为了检索,除使用空间关系特征外,还需要其它特征来配
合。
(二)常用的特征提取与匹配方法
提取图像空间关系特征可以有两种方法:一种方法是首先对图像
进行自动分割,划分出图像中所包含的对象或颜色区域,然后根据这
些区域提取图像特征,并建立索引;另一种方法则简单地将图像均匀
地划分为若干规则子块,然后对每个图像子块提取特征,并建立索引。
姿态估计问题就是:确定某一三维目标物体的方位指向问题。姿
态估计在机器人视觉、动作跟踪和单照相机定标等很多领域都有应
用。
在不同领域用于姿态估计的传感器是不一样的,在这里主要讲基
于视觉的姿态估计。
基于视觉的姿态估计根据使用的摄像机数目又可分为单目视觉
姿态估计和多目视觉姿态估计。根据算法的不同又可分为基于模型的
姿态估计和基于学习的姿态估计。
一基于模型的姿态估计方法
基于模型的方法通常利用物体的几何关系或者物体的特征点来
估计。其基本思想是利用某种几何模型或结构来表示物体的结构和形
状,并通过提取某些物体特征,在模型和图像之间建立起对应关系,
然后通过几何或者其它方法实现物体空间姿态的估计。这里所使用的
模型既可能是简单的几何形体,如平面、圆柱,也可能是某种几何结