文档介绍：该【混合现实MR与虚拟现实VR 】是由【非学无以广才】上传分享，文档一共【22】页，该文档可以免费在线阅读，需要了解更多关于【混合现实MR与虚拟现实VR 】的内容，可以使用淘豆网的站内搜索功能，选择自己适合的文档，以下文字是截取该文章内的部分文字，如需要获得完整电子版，请下载此文档到您的设备，方便您编辑和打印。第6章 混合现实(MR)与虚拟现实(VR) 混合现实的交互技术*混合现实MR与虚拟现实VR* 混合现实的概念混合现实是一种使真实世界和虚拟物体在同一视觉空间中显示和交互的计算机虚拟现实技术。加拿大多伦多大学工业工程系的PaulMilgram对混合现实(MixedReality,MR)的定义是:真实世界和虚拟世界在一个显示设备中同时呈现。也有学者认为:“现代意义上的‘混合现实’是不同类型的现实(主要是指真实现实与虚拟现实)的彼此混合。将计算机所生成的虚拟对象融合到真实的环境当中,从而建立出一个新的环境及符合一般视觉上所认知的虚拟影像,在这之中,现实世界中的物件能够与虚拟世界中的物件共同存在并且即时地产生互动。”返回*混合现实MR与虚拟现实VR* 混合现实(MR)与虚拟现实(VR)的关系现实与虚拟两部分构成了混合现实,其中用户与虚拟世界的联结是虚拟部分关心的内容。因此,涉及两个方面的内部,即虚拟世界的构建与呈现、人与虚拟世界的交互。所看到的虚拟世界是与人类感官直接联结的,因此,要构造完美的虚拟世界必须通过建立与人类感官匹配的自然通道。虚拟世界的呈现,音响效果的营造,触觉、力觉等各种知觉感知和反馈要通过真实感渲染得到。因此,用户与虚拟世界的交互必须建立相同的知觉通道,通过分析用户的自然行为,在感知、理解、响应和呈现上形成环路,这是虚拟现实技术的核心内容。下一页返回*混合现实MR与虚拟现实VR* 混合现实(MR)与虚拟现实(VR)的关系由于对现实世界的模拟本身非常困难,因此混合现实没有对复杂多变的现实世界进行实时模拟,其建立的是虚拟世界与现实世界的联结,并模拟二者的相互影响。而要使虚拟世界与现实世界融为一体,技术上的诸多挑战不仅要感知用户的主体行为,还要感知一切现实世界中有关联的人、环境甚至事件语义,提供恰当的交互和反馈。因此,混合现实涉及了从计算机视觉、计算机图形学、模式识别到光学、电子、材料等多个学科领域。正是由于混合现实与现实世界的紧密联系,才使其具备强大且广泛的实用价值。上一页下一页返回*混合现实MR与虚拟现实VR* 混合现实(MR)与虚拟现实(VR)的关系混合现实技术是虚拟世界与现实世界无缝融合的技术。虚拟现实代表的是计算机营造的世界,使人类的知觉感知延展到计算机中;而混合现实技术在保持对现实世界正常感知的基础上,通过建立虚拟世界与现实世界之间的联系,再将人类感官延伸到虚拟世界。混合现实技术中所关注的虚拟世界可以有丰富的内容。从早期的虚拟现实世界的局部场景,与现实世界无缝融合,使得我们可以看到匪夷所思的场景,典型的是电影《阿凡达》呈现的世界。然而,计算机的强大能力不仅在于对场景的营造能力,还在于对信息搜集、数据整理和分析呈现的能力。在信息爆炸的时代,信息容量和复杂度远远超过人类所能够的范围,在宏观上把握信息的内涵,提供对数据蕴涵的语义分析,才有可能使人类理解数据。混合现实技术可以在数据分析的基础上建立用户与数据的联结,从而使得用户可以直接感知数据分析的结果,将人类感知延展到数据语义层面。上一页下一页返回*混合现实MR与虚拟现实VR* 混合现实(MR)与虚拟现实(VR)的关系混合现实技术包含虚拟世界和现实世界。在需要虚拟现实技术支持的同时,也需要增强现实技术的支持。虚拟现实技术的第一个核心问题是对虚拟世界的建模,包括模拟现实世界的模型或人工设计的模型;对现实世界模型的模拟,即场景重建技术。虚拟现实的第二个问题是将观察者知觉与虚拟世界的空间注册,满足视觉沉浸感的呈现技术;第三个问题是提供与人类感知通道一致的交互技术,即感知和反馈技术。增强现实技术在虚拟现实技术的基础上,还需要将现实世界与虚拟世界进行注册,并且感知真实世界发生的状况、动态,搜集真实世界的数据,进行数据分析和语义分析,并对其进行响应。因此,混合现实的虚实融合分析三个层面,即虚实世界产生智能上的交互融合;虚实世界产生社会学意义上的交互融合,如行人互相避让的行为;虚实空间产生视觉上的交互影响。上一页返回*混合现实MR与虚拟现实VR* 用户界面形态新型交互技术和设备的出现,使人机界面不断向着更高效、更自然的方向发展。在混合现实中使用较多的用户界面形态包括TUI、触控用户界面、3DUI、多通道用户界面和混合用户界面。(1)TUI是目前在混合现实领域应用最多的交互方式。它支持用户直接使用现实世界中的物体与计算机进行交互。无论是在虚拟环境中使用现实物体辅助交互(AV),还是在虚拟环境中加入辅助的虚拟信息(AR),在这种交互方式下都显得非常自然并对用户具有吸引力。下一页返回*混合现实MR与虚拟现实VR* 混合现实的交互技术(2)触控用户界面是在GUI的基础上,以触觉感知为主要指点技术的交互技术。在混合现实中,一种比较自然的方式是直接用手通过屏幕与虚实物体交互。手机、平板电脑等移动设备及透明触屏都提供了这种支持,这使得直接触控成为混合现实中主要的交互方式之一。(3)在3DUI中,用户与计算机进行交互是在一个虚拟或现实的3D空间中进行的。3DUI是从虚拟现实技术中衍生而来的交互技术,它可以支持在纯虚拟环境中进行物体获取、观察世界、地形漫游、搜索与导航。在混合现实环境中,这种交互需求是大量存在的,因此,3DUI是混合现实中重要的交互手段之一。上一页下一页返回*混合现实MR与虚拟现实VR* 混合现实的交互技术(4)在混合现实中的许多应用都利用了多通道交互技术。多通道用户界面支持用户通过多种通道与计算机进行交互。这些通道包括不同的输入工具(如文字、语音、手势等)和不同的人类感知通道(听觉、视觉、嗅觉等)。在这种交互方式中通常需要维持不同通道间的一致性。(5)混合用户界面为用户提供更为灵活的交互平台,它将不同但相互补足的用户界面进行组合,用户通过多种不同的交互设备进行交互,以满足多样化的日常交互行为。上一页下一页返回*混合现实MR与虚拟现实VR* ,如果用户改变自身位置和观察角度,被观察的虚拟物体就能实时融洽地与现实场景保持一致。要达到此种效果,在增强现实中必须明确观察者和虚拟物体在现实环境中的准确位置和姿态。设计者一般会事先决定虚拟物体在现实环境中的位置,因此,只要注意观察者的位置和姿态,就可以根据观察者的实时视角重建坐标系,计算出虚拟物体的显示姿态,实现交互对象的虚实融合。这个过程是三维注册过程,其实现方法一般分为基于传感器的注册技术、基于视觉的注册技术和混合注册技术三种。上一页下一页返回*混合现实MR与虚拟现实VR*