文档介绍：2017-2-14 1 Chapter Chapter 6 6––语音交互语音交互郭亚军郭亚军金先级金先级 2017-2-14 2 语音交互的特点语音交互的特点??在日常沟通中,人类的沟通大约有在日常沟通中,人类的沟通大约有 75% 75% 是通过语音来完成的。研究表明, 是通过语音来完成的。研究表明, 听觉通道存在许多优越性,如听觉信号检测速度快于视觉信号检测速听觉通道存在许多优越性,如听觉信号检测速度快于视觉信号检测速度;人对声音随时间的变化及其敏感;听觉信息与视觉信息同时提供可度;人对声音随时间的变化及其敏感;听觉信息与视觉信息同时提供可供人获得更强烈的存在感和真实感等。因此,听觉通道是人与计算机等供人获得更强烈的存在感和真实感等。因此,听觉通道是人与计算机等信息设备进行交互最重要的信息通道。信息设备进行交互最重要的信息通道。??语音交互是研究人们如何通过自然的语音或机器合成的语音同计算机进语音交互是研究人们如何通过自然的语音或机器合成的语音同计算机进行交互的技术。它是一个多学科交叉的边缘学科,需要语言学、心理学、行交互的技术。它是一个多学科交叉的边缘学科,需要语言学、心理学、工程和计算机技术等领域的专业知识,不仅要对语音识别和语音合成技工程和计算机技术等领域的专业知识,不仅要对语音识别和语音合成技术进行研究,还要对人在语音通道下的交互机理、行为方式等进行研究。术进行研究,还要对人在语音通道下的交互机理、行为方式等进行研究。语音识别和语音合成的相结合,即构成一个语音识别和语音合成的相结合,即构成一个““人机通信系统人机通信系统””。。??语音交互系统一般采取两种途径: 语音交互系统一般采取两种途径: 1. 。音频包括用基于语音识别和理解技术的主要依靠音频进行交互的系统。音频包括语音和声音,语音特指人的话音,而声音指除去语音的其他声音,如音语音和声音,语音特指人的话音,而声音指除去语音的其他声音,如音乐、铃声等。使用这种方式,人们可以通过语音和声音与计算机进行交乐、铃声等。使用这种方式,人们可以通过语音和声音与计算机进行交互。互。 2. (通常是图形交互界面)结合在一利用语音技术与系统的其他交互形式(通常是图形交互界面)结合在一起来进行交互的系统。这种方式中语音不再占主导地位,它只是交互系起来进行交互的系统。这种方式中语音不再占主导地位,它只是交互系统的一部分。(见书图统的一部分。(见书图 ) ) 2017-2-14 3 ??语音在人机交互过程中的特点: 语音在人机交互过程中的特点: 1. 。语音是一种高效的交流媒体,包含着丰富的信息, 语音的高效性。语音是一种高效的交流媒体,包含着丰富的信息, 而且语言基本上是人思维的反应。人在使用键盘进行文本输入时, 而且语言基本上是人思维的反应。人在使用键盘进行文本输入时, 与手指击键输出所想到的词语的同时,用户还会对他的话语和措与手指击键输出所想到的词语的同时,用户还会对他的话语和措辞做进一步的琢磨。在对话中,用户在想法的产生和对其进行阐辞做进一步的琢磨。在对话中,用户在想法的产生和对其进行阐述的过程中,会有更多的参与。述的过程中,会有更多的参与。 2. 。语音与其他交流手段相比更加自然,并且其认知负荷比自然性。语音与其他交流手段相比更加自然,并且其认知负荷比较低,不需要一直占据用户的注意力。较低,不需要一直占据用户的注意力。 3. 。语音对物理空间的资源占用比较少,受工作空间的限制灵活性。语音对物理空间的资源占用比较少,受工作空间的限制比较少,可以再空间狭小、照明不佳等不良条件下正常使用,因比较少,可以再空间狭小、照明不佳等不良条件下正常使用,因此适合在不能有效利用视觉通道传递信息的场合中采用。此适合在不能有效利用视觉通道传递信息的场合中采用。 4. 。人可以在进行肢体动作同时讲话,但不能动作与语音同时进行。人可以在进行肢体动作同时讲话,但不能在思考的同时讲话。因此,人们发现在操作计算机时可以在敲键在思考的同时讲话。因此,人们发现在操作计算机时可以在敲键盘和移动鼠标的同时进行思考,但却很难在说话的同时进行思考。盘和移动鼠标的同时进行思考,但却很难在说话的同时进行思考。语音可单独使用,也可结合鼠标、输入笔等指点式设备进行交互、语音可单独使用,也可结合鼠标、输入笔等指点式设备进行交互、完成目前完成目前 WIMP WIMP 界面中通常的操作任务。界面中通常的操作任务。 5. 。人们对声音信号比较敏感,利用声音进行提示和报警是敏感性。人们对声音信号比较敏感,利用声音进行提示和报警是常用的方法