文档介绍：浙江大学计算机科学与技术学院
硕士学位论文
基于视觉的实时手势跟踪与识别及其在人机交互中的应用
姓名:王辉
申请学位级别:硕士
专业:计算机应用
指导教师:叶修梓;张三元
20080603
摘要’随着人机交互技术的不断发展,各种各样的新型人机交互技术不断涌现。基于视觉的手势识别技术由于比较符合交流习惯成为近年来应用于人机交互技术中的一项关键技术。基于视觉的手势识别是当前涉及图象处理、模式识别、计算机视觉等领域的一个比较活跃的课题。基于视觉的手势识别具有很广泛的应用价值,例如刂芕械闹悄芑机器人控制;槟庀质迪低持械亩嗄J浇覫等。目前关于手势识别的研究大多是基于静态的手势识别,而对于实时的动态手势跟踪与识别涉及较少,本文创新性地研究了复杂背景下的实时手势跟踪与识别技术。随着实验的不断完善,此项技术势必会促进手势识别技术的应用,使得人机交互更加自然方便。首先本文在手势分割阶段提出了肤色提取并溶合运动信息的新方法。具体方法是利用丈ǹ占浜突诟咚鼓P偷姆羯ń6苑羯ń刑崛。⑼ü像差运算进行运动信息分析去除图像中的类肤色背景。该方法保证了在复杂背景下手势分割的准确性。其次本文在手势跟踪算法中提出了算法与滤波算法相结合的新方法确定搜索窗口以获得手的位置。具体算法为,使用算法计算手势跟踪窗口的位置和大小,并用滤波预测手心位置。该算法很大程度上提高了跟踪效率,保证了跟踪的实时性。最后在手势识别阶段利用基于嗬氲哪0迤ヅ浞椒ㄊ迪至硕栽ざ义的两种手势进行识别。为了验证以上算法,本文设计了一个人机交互系统,该系统可以利用手与机器进行简单的操作交互。实验表明,该系统跟踪效率高,同时对两种预定义手势也能达到有效识别。浙江大学硕士学位论文
丈ǹ占洌枷癫钤怂悖珻惴ǎā郝瞬ㄋ惴ǎ关键词:模板匹配浙江大学硕士学位论文摘要
∽腑吣崦眦撒,..,.,甮...·.,甌.
:琲
图目录图手机交互界面⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯.图摄像头游戏《审判之眼》⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯图刂破鳌⒎痠.⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯。图的“表面计算际酢图识别指向和手势的服务机器人⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯图主动视觉平台⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯图幕魅耸笛槭抑械囊贫魅恕图基于数据手套的手势识别的系统框图⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯图模式识别系统的基本构成⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..图三层前馈神经网络模型⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯槌墒疽馔肌图基于视觉得手势跟踪与识别系统图⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯。图手势分割的流程示意图⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯一图肤色概率分布图⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..图肤色概率分布图⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯一图用高斯分布拟合皮肤颜色分布⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..图基于占涞姆羯崛⊥计图图像序列中的两张⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..图经过帧差处理之后得到的前景⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯图帧差与肤色提取相结合处理的效果⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯。图图像去躁前后对比⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯一图呓缤枷瘛图卣鳌尽图杭尽图丈ǜ怕誓P左图为至恐狈酵迹挥彝嘉猋分量肤色概率分布图图丈ǜ怕史植左图为原图;右图为肤色概率分布图图换ソ缑妗图手势跟踪与识别流程图⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..图纯色背景下跟踪效果图⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..图复杂背景下跟踪效果图⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..图头部干扰’卜的跟踪效果图⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..图系统运行时褂们榭觥浙江大学硕士学位论文⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯.:Ⅲ
表目录表八临域的坐标表示⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯表八缶域的坐标表示⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯。浙江大学硕士学位论文
导师签名:氓独创性声明学位论文版权使用授权书他人已经发表或撰写过的研究成果,也不包含为获得迸’江盘堂或其他教育机本学位论文作者完全了解滥姿盘鲎有关保留、使用学位论文的规定,借阅。本人授权逝姿盘堂可以将学位论文的全部或部分内容编入有关数据库构的学位或证书而使用过的材料。与我一同工作的同志对本研究所做的任何贡献有权保留并向国家有关部门或机构送交论文的复印件和磁盘,允许论文被查阅和本人声明所呈交的学位论文是本人在导师指导下进行的研究工作及取得的研究成果。据我所知,除了文中特别加以标注和致谢的地方外,论文中不包含其均己在论文中作了明确的说明并表示谢意。学位论文作者签名:签字日期:年月日进行检索