字母識(shí)別任務(wù)中的視聽(tīng)整合.pdf

1、我們的感官系統(tǒng)如何整合來(lái)自不同感官通道的信息，從而獲得對(duì)環(huán)境的統(tǒng)一知覺(jué)，一直是行為和神經(jīng)科學(xué)研究的熱門(mén)領(lǐng)域，而該領(lǐng)域中研究得最多的課題則是視聽(tīng)整合。目前，有關(guān)視聽(tīng)整合的研究多數(shù)都集中于言語(yǔ)感知，提出人腦左后側(cè)的顳上溝在視聽(tīng)整合中起關(guān)鍵作用。該區(qū)還能通過(guò)反饋投射調(diào)整特定通道皮層區(qū)(這里指的是視覺(jué)運(yùn)動(dòng)加工區(qū)V5，以及顳上皮層中的聽(tīng)覺(jué)相關(guān)區(qū)域)的活動(dòng)；除此之外，前額皮層和項(xiàng)區(qū)似乎也涉及其中。但是最近的研究表明，由于視覺(jué)字母—言語(yǔ)聲音之間的特殊

2、聯(lián)系，字母識(shí)別過(guò)程中的視聽(tīng)整合與言語(yǔ)感知中的整合不盡相同。深入了解字母識(shí)別過(guò)程中視聽(tīng)整合的神經(jīng)機(jī)制和特征，能為教育神經(jīng)科學(xué)做出一定貢獻(xiàn)，而且這方面的研究對(duì)訓(xùn)練語(yǔ)言學(xué)習(xí)者和語(yǔ)言喪失者學(xué)習(xí)語(yǔ)言能起到重要作用。 本研究通過(guò)一系列實(shí)驗(yàn)米考察字母識(shí)別過(guò)程中視聽(tīng)整合的特點(diǎn)和神經(jīng)機(jī)制。以人們通過(guò)長(zhǎng)時(shí)間學(xué)習(xí)獲得的、彼此之間具有特殊聯(lián)系的視覺(jué)字母和聽(tīng)覺(jué)語(yǔ)言為刺激，采用目標(biāo)識(shí)別任務(wù)，來(lái)考察字母識(shí)別過(guò)程中視聽(tīng)整合的特點(diǎn)及其所涉及的神經(jīng)機(jī)制，以及空間因

3、素對(duì)視覺(jué)字母和聽(tīng)覺(jué)語(yǔ)音整合效應(yīng)的影響。實(shí)驗(yàn)過(guò)程中，要求被試始終注視正中央的注視點(diǎn)，對(duì)小概率目標(biāo)刺激的呈現(xiàn)盡快按鍵反應(yīng)，而對(duì)于非目標(biāo)刺激的出現(xiàn)則不按鍵。本研究欲檢驗(yàn)的問(wèn)題有3個(gè)：第一，字母識(shí)別過(guò)程中，視聽(tīng)整合的行為效應(yīng)符合同激活模型。第二，左、右視野中的字母視聽(tīng)整合效應(yīng)存在差異，呈現(xiàn)在右視野的視聽(tīng)刺激更容易被整合。第三，考察空間因素在視聽(tīng)整合中的作用，在視聽(tīng)刺激同步呈現(xiàn)的條件下，視覺(jué)字母和聽(tīng)覺(jué)語(yǔ)音之間的空間位置一致與否影響其整合效應(yīng)強(qiáng)度，

4、位置一致的刺激更容易進(jìn)行整合，而且其整合效應(yīng)更強(qiáng)。 實(shí)驗(yàn)1通過(guò)行為實(shí)驗(yàn)米驗(yàn)證冗余目標(biāo)效應(yīng)符合競(jìng)爭(zhēng)模型還是同激活模型，從而證明行為水平上是否體現(xiàn)出視聽(tīng)整合效應(yīng)。結(jié)果發(fā)現(xiàn)，和單一視覺(jué)和單一聽(tīng)覺(jué)單獨(dú)呈現(xiàn)時(shí)相比，在視覺(jué)和聽(tīng)覺(jué)刺激同時(shí)呈現(xiàn)的條件下，被試識(shí)別字母時(shí)的反應(yīng)時(shí)更短、正確率更高，表明視聽(tīng)同時(shí)呈現(xiàn)條件下發(fā)生了視覺(jué)整合。而且，這種反應(yīng)時(shí)促進(jìn)效應(yīng)是由于視覺(jué)和聽(tīng)覺(jué)刺激的同激活產(chǎn)生的交互導(dǎo)致。 在實(shí)驗(yàn)2中，采用和實(shí)驗(yàn)1類(lèi)似的字母識(shí)別

5、實(shí)驗(yàn)范式，分別在左、右視野呈現(xiàn)刺激，考察不同視野中的整合效應(yīng)是否存在差異。結(jié)果發(fā)現(xiàn)，當(dāng)刺激呈現(xiàn)在右視野時(shí)，整合差異波中存在兩個(gè)顯著的ERP成分：N136(表征同時(shí)呈現(xiàn)的視聽(tīng)刺激調(diào)整聽(tīng)覺(jué)皮層的激活)，以及N262(表征多感官區(qū)的視聽(tīng)整合事件)；當(dāng)刺激呈現(xiàn)在左視野時(shí)，并沒(méi)有顯著的整合成分出現(xiàn)。該結(jié)果表明，呈現(xiàn)在右視野的視聽(tīng)字母更容易被知覺(jué)為一個(gè)統(tǒng)一的整體，更容易被整合。 實(shí)驗(yàn)3通過(guò)調(diào)控視覺(jué)字母和聽(tīng)覺(jué)言語(yǔ)之間的空間位置關(guān)系，考察空間因