文档介绍：心理科学 2001 年第 24 卷第 4 期 4 6 5
多模态信息认知加工的研究进展
、
,
.臼
幽点
在护杨丽发傅小兰
(中国科学院心理研究所,北京 100[01)
霖、现实世界中,信息是以各种各样的模态存在的。音是图命名实验任务中决定反应的关键因素。
随着科学技术的发展,结合视、听、图不同形式而呈
2 多模态信息加工中的干扰效应
现的多模态(M ultim od)信息逐渐成为信息加工的
一种重要形式。多模态信息的认知加工也已成为认词一图干扰实验是 Stroop 效应实验范式的一
知心理学与工程心理学研究中的一个热点向题。本种变式。词一图干扰实验范式中所用的刺激一般由
文概述了有关多模态信息加工过程中的促进效应、两部分组成:目标是要求反应的部分,分心则是要求
干扰效应及抑制机制的主要研究,并加以评论。忽视的部分。在实验条件下,目标与分心在功能、语
义、时空等方面有一定的关系;而在控制条件下,分
1 多模态信息加工中的促进效应
心是与目标没有关系的中性刺激。这两个条件下对
一些研究者发现,在词一图配对呈现的图命名目标反应时的差值即为 Stroop 效应的因变量。常
任务中,配对刺激间的语义关系在不同条件下会产用的词一图干扰实验范式是视觉呈现词与图,另一
生两个独立的效应:促进效应与干扰效应,哪个效应种范式是听觉呈现词与视觉呈现图片相结合,这两
占主导地位取决于刺激对中两个刺激呈现之间的时种条件下发现的效应基本类似。词一图干扰实验可
间间隔(即SOA )。词比图先呈现400m s(SOA + 采用不同的任务,不同任务产生的干扰效应也不同。
400m s);在 SOA 为十如分心词对目标图的命名有干扰,而对目标图的分
loom s到一loom s 之间时,发生语义干扰效应。这类没有影响;分心图对目标词的分类有干扰而对目
可能是由于400m s 的 SOA 使得先呈现的词刺激有标词的命名没有影响。这便是词一图干扰效应的任
足够的时间在语义水平上被激活,激活的扩散易化务不对称性[5l
了对语义有关的图的反应。V itkovitch 与 Tyrrel 对词一图干扰效应的解释由两方面的工作组
(1999)发现,正确的基本水平的名字词可以促进对成,一方面是试图解释词一图干扰效应的来源,另一
次级水平的图片命名,如词“狗”的呈现促进了对图方面是试图进行词一图干扰效应的阶段定位。关于
片“哈巴狗”的命名,他们认为这是抑制机制选择性词一图干扰效应的来源目标已提出了三种理论,即
地抑制了跨水平千扰作用,而促进作用未被抑制的知觉编码假设、反应竟争假说和语义评价或决定观。
结果[[ 21。另一个决定发生促进还是千扰效应的重知觉编码假设(Perceptual-encodinhypothesis)认
要因素是配对刺激间的关系,如在决定反应的关键为,分心刺激的呈现吸引了一定的注意,消耗了一定
水平上,分心刺激与目标刺激相同,则分心刺激会促资源,降低了对目标进行编码可得到的资源,使得编
进对目标刺激的反应。Sm ith 等人(2000)发现在没码的效率与质量降低,所以对目标的反应成绩降低。
有语义中介的惰况下,语言与图片系统之间仍有交反应竞争假说(R petitiohypothes is)认
互作用。启动词的字母搜索任务损害了其语义激为,需要对先于有关反应而产生的无关反应进行压
活,但并不影响在词汇水平上语言信息与图片信息抑是产生语义干扰的基本原因[[ 61。该理论认为对
之间的激活扩散。表明词一图跨模态信息的词汇表分心与目标产生反应的速度不同,也称为相对速度
征系统之间有联系川。假设。其核心思想是语义表征与词汇表征相分离,
,优先提取范畴信息;词对
与语音上的相似也会产生促进效应[[ 4)。这种促进词汇表征有优势通达,优先提取名字信息。语义评
在一定程度上会削弱语义干扰效应。正字法促进作价或决定观(Sem antievaluatioodecision)则从语
用的关键在于词、图名字的字母或字母特征信息在义编码的性质及反应的决定与执行来解释语义干扰
适当的空间位置上重亚,而语音促进效应是因为语效应,认为是目标与分心之间的内部竞争性的积累
万方数据
46 6 心理科学第 24 卷
或者提取反应的竞争导致语义干扰效应的产生。为清除已激活的干扰信息。
Elliott等人(1998)认为,对颜色命名产生干扰的并关于抑制与干扰之间的关系,有些学者把二者
不是分心词的短时记忆表征,而是对