文档介绍：多模态话语分析综合理论框架探索
张德禄中国海洋大学
摘要: 本文旨在探讨如何为多模态话语分析建立一个理论框架,首先对多模态话语研
究动态进行了简单述评,然后根据系统功能语言学理论尝试建立一个多模态话
语分析的综合框架。这个框架主要由五个层面的系统及其次级范畴组成,分别
是:(1)文化层面;(2)语境层面;(3)意义层面;(4)形式层面和(5)媒体层面,同时
还探讨了各个模态之间的关系,分为互补性的和非互补性的两大类,最后探讨
了非语言模态的语法结构的建立、语法结构与语篇结构之间的关系以及语法结
构是如何体现概念意义、人际意义和谋篇意义的。
主题词: 多模态;话语;框架;语法;关系
中图分类号:H0-06 文献标识码:A 文章编号:1672-9382(2009) 01-0024-07
到了现代语言学研究中,人们才开始从非语言
1 引言
特征和伴随语言特征的角度研究它,不过只作
在话语分析理论如火如荼的发展中,人们为一种语言的辅助表达系统,没有作为意义表
发现单纯从语言的角度已经不能对话语进行深入达模态来研究。随着多媒体话语的产生,人们
全面的分析和研究,因为话语的意义中的一大部直到最近几年才逐步认识到其重要性,将其作
分是由非语言因素体现的,如伴语言特征:音响为一个独立的学术领域进行研究。
度、声调、语调、音速等,身体特征:手势、身在多模态话语分析方面最早的研究者之一
势、面部表情、动作、移动等,非身体特征: 是R. Barthes,他在1977年发表的论文《图像的
PPT、音响设备、网络、实验室、周围的环境因修辞》( Rhetoric of the image)中探讨了图像在
素等。在这种情况下,交际不再是利用一种感官表达意义上与语言的相互作用;Kress, G. & van
进行,如说话是听觉,书写是视觉,盲文是触觉 Leeuwen, T. (1996; 2001; 2003)研究了模态与媒
等,而是用两种或者多种感官同时进行,如用体的关系,专门探讨了多模态现象规则地表达意
PPT上课则是视觉与听觉同时进行的;模拟与讲义的现象,包括视觉图像、颜色语法以及报纸的
解则是听觉、视觉和触觉同时进行的。以这种交版面设计和不同媒介的作用等;O’Halloran, K. L.
作者简介:张德
际方式产生的话语就是多模态话语。(2004)不仅研究多模态的理论建构,还专门研究
禄,中国海洋大
然而,如何在话语分析中把多种媒体和多了数学语篇中的多模态现象;Royce, T. (2002)研
学外国语学院教
种模态结合起来进行分析解读是现代语言学研究了不同符号在多模态话语中的互补性以及在第
授、博士生导师。
究,特别是话语分析研究应该特别注意解决的二语言课堂教学中多模态的协同性等。
研究方向:系统问题。本文首先对多模态话语研究动态进行了国内多模态话语的研究还处在起始阶段,
功能语言学、文简单述评,然后根据系统功能语言学理论尝试尚未见到专著出版,只有数量不多的论文,
体学、符号学、建立一个多模态话语分析的综合框架。其中胡壮麟的“社会符号学研究中的多模态化”
语篇分析和外语多模态话语指运用听觉、视觉、触觉等多(2007)讨