基于ERPs的聽(tīng)覺(jué)感知及與視覺(jué)相干性研究.pdf

1、人工智能經(jīng)過(guò)幾十年的發(fā)展已經(jīng)取得了許多令人矚目的成就，但也面臨一些瓶頸問(wèn)題，產(chǎn)生了爭(zhēng)論和分歧。現(xiàn)在，大多數(shù)科研人員認(rèn)為對(duì)人類認(rèn)知和智能本質(zhì)的研究將會(huì)促進(jìn)對(duì)人工智能的深刻理解，并為之提供新的思路。聽(tīng)覺(jué)感知和認(rèn)知作為人類完整認(rèn)知功能的一個(gè)重要組成部分，有著極為重要的不可替代的作用。但是，目前人們對(duì)它的本質(zhì)、規(guī)律以及與其它認(rèn)知功能關(guān)系的了解程度還遠(yuǎn)遠(yuǎn)不夠。
　　 本研究是國(guó)家自然科學(xué)基金項(xiàng)目“視覺(jué)聽(tīng)覺(jué)跨模態(tài)相干性協(xié)同學(xué)習(xí)算法”(ID：

2、60873139)的重要組成部分，屬于探索性研究。有關(guān)聽(tīng)覺(jué)感知和認(rèn)知方面的研究認(rèn)為：聽(tīng)覺(jué)感知認(rèn)知應(yīng)該包括基于聽(tīng)覺(jué)的注意、感覺(jué)、辨別、識(shí)別、可懂度、情緒、記憶等方面，尤其值得研究的是聽(tīng)覺(jué)場(chǎng)景分析、真實(shí)世界的聽(tīng)覺(jué)認(rèn)知以及聽(tīng)覺(jué)與視覺(jué)的復(fù)雜關(guān)系等方面。
　　 根據(jù)目前有關(guān)聽(tīng)覺(jué)方面的研究成果，本文主要針對(duì)屬于聽(tīng)覺(jué)認(rèn)知范疇的聽(tīng)覺(jué)感知進(jìn)行研究。首先從行為學(xué)水平進(jìn)行了聽(tīng)覺(jué)的部分基本功能、聽(tīng)覺(jué)場(chǎng)景分析、真實(shí)世界聽(tīng)覺(jué)認(rèn)知進(jìn)行了研究，建立了聽(tīng)覺(jué)特征捆

3、綁認(rèn)知模型及其計(jì)算模型。在此基礎(chǔ)上，為了能夠更深入地理解聽(tīng)覺(jué)感知的本質(zhì)及其過(guò)程，我們通過(guò)ERPs技術(shù)對(duì)聽(tīng)覺(jué)早期認(rèn)知加工進(jìn)行了較為深入的分析和研究，并結(jié)合視覺(jué)早期認(rèn)知加工不僅發(fā)現(xiàn)了一些新的成分，而且提出了聽(tīng)覺(jué)視覺(jué)在腦區(qū)上的相干性分析方法；隨后，對(duì)聽(tīng)覺(jué)視覺(jué)正相干時(shí)的早期成分變化與記憶的關(guān)系進(jìn)行了剖析；最后，對(duì)單通道聽(tīng)覺(jué)和視聽(tīng)覺(jué)雙通道ERPs的自動(dòng)分類算法進(jìn)行了研究。
　　 主要?jiǎng)?chuàng)新點(diǎn)如下：
　　 (1)建立了聽(tīng)覺(jué)特征捆綁認(rèn)知

4、模型及計(jì)算模型。
　　 (2)基于聽(tīng)覺(jué)、視覺(jué)早期認(rèn)知加工進(jìn)行了各自的成分研究并結(jié)合地形圖分析，發(fā)現(xiàn)并命名了一種分布在顳枕區(qū)的TO-P2成分，然后進(jìn)行了基于腦區(qū)的聽(tīng)覺(jué)與視覺(jué)相干性分析。
　　 (3)進(jìn)行了聽(tīng)覺(jué)視覺(jué)正性相干時(shí)早期ERPs成分變化與記憶編碼過(guò)程關(guān)系的研究，并提出EEVME效應(yīng)。
　　 (4)提出了單通道聽(tīng)覺(jué)和視聽(tīng)覺(jué)雙通道ERPs自動(dòng)分類方法TSFEC，這種基于時(shí)間-空間特征提取的分類方法，其分類正確率達(dá)