文档介绍：基于多媒体融合的图像检索的技术
摘要:基于多媒体融合的图像检索技术是目前研究的热点。本文分析了并总结基于多媒体融合的图像检索的概念,综述基于多媒体融合的图像检索的方法和相关的技术。最后简单介绍一种新的基于语音识别的图像检索的方法以及实践。
关键词:多媒体融合;图像检索
1、引言
随着多媒体技术和网组的迅速发展,以及3G、4G移动通信系统的发展,移动通信从语音业务过渡到移动宽带业务的发展出现了移动多媒体广播业务。多媒体信息的数据从以前的紧缺飞速的增,并随着人们日益需求的不断增加而迅速增加。图像信息的应用日益广泛,人们对图像数据的查询需要日益增长,对规模越来越大的图像数据库进行有效的管理就成为迫切需要解决的问题了。
基于多媒体融合的图像检索的概念
多媒体信息是指以文字、图像、影像、声音和动画等为表现形式的媒体信息。所谓的基于多媒体融合的图像检索是对图像对象的内容及上下文语义环境精心检索,如图像的颜色、纹理、形状、符号,描述图像的语音等语义特征来实现与图像内容信息相关的检索。
基于内容的图像检索是依靠图像特征进行标引和检索。所谓图像特征的画面内容特征(图像颜色和纹理等),以及图像的主题对象特征。基于内容的图像检索主要技术着重于图像的画面内容特征和主题对象特征来进行检索。它直接对图像内容进行分析,抽取特征和语义,利用这些内容特征建立索引进行检索,还融合了模式识别、计算机视觉及图像理解等技术。
图1 基于内容的图像检索技术的概念模型
颜色特征是图像检索中所使用的最直观的视觉特征。在基于颜色检索中除了采用颜色直方图外,还引用了空域信息,它确保检索的精度。在引用空域信息的时候要兼顾不变性的问题。同样,为了更好的保存图像色彩空间的信息,V)来做图像的索引。
形状特征也称为轮廓特征,是指整个图像或图像中子对象的边缘特征。采用形状特征进行检索时,用户可以通过勾勒图像的形状或轮廓,从图像库中检索出形状相似的图像。基于形状的检索更多的用于当用户粗略的画出一个轮廓进行检索的情况。用户可以选择某一形状或勾画一副草图,利用形状特征或匹配主要边界进行检索。基于形状特征的检索方法主要有两种:
针对轮廓线进行的形状特征检索,也就是分割图像进行边缘提取后,得到目标的轮廓线。
直接针对图形寻找适当的向量特征进行检索。
纹理检索与纹理分类技术有着密不可分的关系,包括有两种方法:一种是统计方法,人们提出以图像像素的颜色的分布统计信息和轮廓点的位置分布统计信息作为图像的特征量,并使用该特征量实现图像的检索。另一种是结构方法,通过对纹理颜色的定性描述,把检索空间缩小到某个颜色范围,然后再以示例查询的方法为基础,调整粗糙度、方向性和对比度三个特征值,逐步逼近要检索的目标。
基于对象特征的检索就是对图像中所包含的静态子对象进行查询,检索条件可以利用综合颜色、纹理、形状特征、逻辑特征及客观属性等,例如综合利用颜色和纹理特征。基于对象特征的检索首先要对图像进行预处理,将原始像素信息分割成一些颜色和纹理在空间上连贯分布的区域,计算出每个区域的颜色、纹理和空间特征。这种方法用于检索