版權(quán)說(shuō)明:本文檔由用戶(hù)提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
1、在日常生活中,人類(lèi)時(shí)時(shí)刻刻都在攝取來(lái)自不同感官的各種信息,為了完成不同的認(rèn)知任務(wù),我們可能需要將注意力在各個(gè)感官通道上進(jìn)行來(lái)回切換;當(dāng)有的感官通道受到不可逆的損傷時(shí),我們希望通過(guò)從其他感官獲取相關(guān)信息來(lái)進(jìn)行替代。本文主要圍繞視覺(jué)與聽(tīng)覺(jué)跨模態(tài)轉(zhuǎn)換闡述碩士期間的兩項(xiàng)工作:其一,視覺(jué)與聽(tīng)覺(jué)跨模態(tài)轉(zhuǎn)換的認(rèn)知過(guò)程研究。本文采用行為學(xué)實(shí)驗(yàn)和腦電分析的方法,討論了這種自上而下的注意力切換的行為學(xué)和電生理特征,對(duì)比了注意力從聽(tīng)覺(jué)切換到視覺(jué)與從視覺(jué)切換到
2、聽(tīng)覺(jué)的不同特性,計(jì)算了感官間注意力切換所需要的時(shí)間以及對(duì)應(yīng)的腦電成分,并使用事件相關(guān)電位(ERP)這種高時(shí)間分辨率的方法確定了接到注意力轉(zhuǎn)移的任務(wù)以后,開(kāi)始注意力轉(zhuǎn)移的時(shí)間點(diǎn)。我們發(fā)現(xiàn),注意力從視覺(jué)切換到聽(tīng)覺(jué)約需要152ms,而從聽(tīng)覺(jué)切換到視覺(jué)只需要約96ms。對(duì)于事件相關(guān)電位,聽(tīng)覺(jué)提示誘發(fā)的N1、P2幅值均比視覺(jué)提示誘發(fā)的大。注意力從視覺(jué)轉(zhuǎn)移到聽(tīng)覺(jué)誘發(fā)了額葉和中央?yún)^(qū)一個(gè)2μV左右的負(fù)波,而視覺(jué)注意力的保持則表現(xiàn)為一個(gè)接近基線的信號(hào);聽(tīng)
3、覺(jué)注意力的保持誘發(fā)了一個(gè)位于額葉和中央?yún)^(qū)的2μV左右的負(fù)波,而注意力從聽(tīng)覺(jué)轉(zhuǎn)移到視覺(jué)的過(guò)程卻表現(xiàn)為一個(gè)接近基線的信號(hào)。考慮到ERP波形幅值反映了認(rèn)知資源的分配,這很好地驗(yàn)證了“視覺(jué)主導(dǎo)認(rèn)知過(guò)程(visual dominance)”的觀點(diǎn)。此外,注意力的轉(zhuǎn)移會(huì)造成聽(tīng)覺(jué)刺激誘發(fā)的ERP幅值增加,對(duì)于視覺(jué)刺激恰好相反,感官間的注意力切換會(huì)造成視覺(jué)刺激誘發(fā)的ERP幅值減小,我們猜測(cè),這種現(xiàn)象與聽(tīng)覺(jué)對(duì)于注意力的自吸引效應(yīng)和視覺(jué)注意力水平可能有一定
4、關(guān)系。其二,基于聽(tīng)覺(jué)代替視覺(jué)的助盲系統(tǒng)SoundView升級(jí)優(yōu)化工作。為了實(shí)現(xiàn)聽(tīng)覺(jué)代替視覺(jué)的目標(biāo),我們搭建了聽(tīng)覺(jué)引導(dǎo)助盲系統(tǒng)SoundView,它通過(guò)識(shí)別環(huán)境中的某些物體編碼相應(yīng)的語(yǔ)音播放給盲人聽(tīng),告知盲人環(huán)境中重要物體的名稱(chēng)和方位。聽(tīng)覺(jué)引導(dǎo)助盲系統(tǒng)SoundView通過(guò)攝像頭采集視頻輸入嵌入式系統(tǒng)進(jìn)行數(shù)字圖像處理和特征識(shí)別,根據(jù)特定物體所處位置構(gòu)建三維立體聲序列,盲人能夠通過(guò)聲音序列的不同區(qū)別物體,并利用三維立體聲判斷物體方位。為了避
5、免復(fù)雜的模式識(shí)別算法,我們用條形碼標(biāo)記環(huán)境中的重要物體幫助識(shí)別。本課題前期已經(jīng)完成了SoundView系統(tǒng)整體搭建,但是已有的系統(tǒng)存在處理速度過(guò)慢、有效識(shí)別范圍過(guò)小等問(wèn)題。為了改善系統(tǒng)性能,使SoundView更加具有實(shí)用價(jià)值,我們使用長(zhǎng)焦鏡頭和分段特征識(shí)別算法擴(kuò)展了有效距離,同時(shí)簡(jiǎn)化圖像處理程序、使用系統(tǒng)庫(kù)函數(shù)節(jié)省計(jì)算資源,大大提升了SoundView的處理速度,使得在0.5m-6.5m的范圍內(nèi)可以以12幀/秒以上的速度進(jìn)行有效的條形
溫馨提示
- 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶(hù)所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 眾賞文庫(kù)僅提供信息存儲(chǔ)空間,僅對(duì)用戶(hù)上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶(hù)上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶(hù)因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 基于高層語(yǔ)義的跨模態(tài)應(yīng)用研究.pdf
- 基于視角轉(zhuǎn)換的視覺(jué)實(shí)驗(yàn)與圖形應(yīng)用研究.pdf
- 視覺(jué)和聽(tīng)覺(jué)邏輯記憶識(shí)別輕度認(rèn)知障礙的效力比較
- 商業(yè)插畫(huà)的視覺(jué)與聽(tīng)覺(jué).pdf
- 視覺(jué)和聽(tīng)覺(jué)的形成分解
- 視覺(jué)表象和聽(tīng)覺(jué)表象在健美操運(yùn)動(dòng)技能學(xué)習(xí)中的應(yīng)用研究.pdf
- 基于生物視覺(jué)認(rèn)知機(jī)理的特征提取及其應(yīng)用研究.pdf
- 視覺(jué)注意和行為認(rèn)知模型及其應(yīng)用.pdf
- 經(jīng)驗(yàn)?zāi)B(tài)分解理論與應(yīng)用研究.pdf
- 跨模態(tài)信息檢索方法的研究與實(shí)現(xiàn).pdf
- 聽(tīng)覺(jué)與視覺(jué)通道下的數(shù)字加工比較研究.pdf
- 基于視覺(jué)感知的圖像表征和應(yīng)用研究.pdf
- 隱性視覺(jué)注意與聽(tīng)覺(jué)跨通路刺激范式誘發(fā)的事件相關(guān)電位信號(hào)分析與識(shí)別.pdf
- 短時(shí)記憶的視覺(jué)和聽(tīng)覺(jué)編碼
- 淺議音樂(lè)藝術(shù)的聽(tīng)覺(jué)與視覺(jué)元素
- 聽(tīng)覺(jué)障礙者交際中語(yǔ)碼選用和轉(zhuǎn)換的研究.pdf
- 經(jīng)驗(yàn)?zāi)B(tài)分解算法應(yīng)用研究.pdf
- 整理)劇場(chǎng)的視覺(jué)與聽(tīng)覺(jué)設(shè)計(jì)淺析
- 視覺(jué)及聽(tīng)覺(jué)表征動(dòng)量的行為與fMRI研究.pdf
- 網(wǎng)頁(yè)視覺(jué)基礎(chǔ)設(shè)計(jì)與應(yīng)用研究.pdf
評(píng)論
0/150
提交評(píng)論