吕 勇 顾吉有

    (教育部人文社会科学重点研究基地天津师范大学心理与行为研究院，天津 300074)

    注意对视听语义整合加工的影响 *

    吕 勇 顾吉有

    (教育部人文社会科学重点研究基地天津师范大学心理与行为研究院，天津 300074)

    采用2×3的被试内实验设计，将注意条件和目标刺激类型作为实验变量，考察了指向不同感觉通道的注意对视听语义整合加工的不同影响。结果发现，只有在同时注意视觉和听觉刺激时，被试对语义一致的视听刺激反应最快，即产生冗余信号效应。而在选择性注意一个感觉通道时，语义一致的视听刺激并不具有加工优势。进一步分析发现，在同时注意视觉和听觉时语义一致视听刺激的加工优势源自于其视觉和听觉成分产生了整合。也就是说，只有在同时注意视觉和听觉时，语义一致视听刺激才会产生整合，语义不一致视听刺激不会产生整合。而在选择性注意一个感觉通道时，不论语义是否一致，视听刺激均不会产生整合。

    注意，多感觉整合，语义联结，竞争模型。

    1 引言

    人们的脑每天都会接受大量来自不同感觉通道的信息。持续追踪并整合这些来自不同通道的信息是人类知觉系统的一项重要功能(Su,2014)。有研究显示，个体对多通道信息的整合加工(即多感觉整合，multisensory integration)能够减少反应时并提高正确反应率(孙远路等, 2011;Koelewijn, Bronkhorst, & Theeuwes, 2010)，并且降低知觉阈限(Frassinetti, Bolognini, & Làdavas, 2002;Lovelace, Stein, & Wallace, 2003)。已有文献中将这种对双通道目标的加工优势称为“冗余信号效应(the redundant signal effect)”(Miller, 1982)。

    在对多通道信息的整合加工中，注意的作用一直存在争论(Koelewijn et al., 2010；Talsma,Senkowski, Soto-Faraco, & Woldorff, 2010)。目前，主流观点认为注意对视听整合加工起一定的作用。比如，Talsma和Woldorff(2005)采用简单图形和短音分别作为视觉和听觉材料，考察了被试在注意和非注意条件下探测偶然出现的目标刺激的表现，同时记录被试的脑电。结果发现，被试对双通道刺激的反应明显快于对任意一个单通道刺激的反应。并且，只有在注意条件下，才会出现代表视听整合加工的ERP效应。

    但是 ......