聾生唇讀語音識(shí)別中的適應(yīng)研究

聾生唇讀語音識(shí)別中的適應(yīng)研究

1語音視覺特征嘴唇閱讀是“愚蠢人用視覺信息感知語言的特殊方法和技能”?？丛捜送ㄟ^觀察說話人的口唇發(fā)音動(dòng)作、肌肉活動(dòng)及面部表情,形成連續(xù)的視知覺,并與頭腦中儲(chǔ)存的詞語表象相比較和聯(lián)系,進(jìn)而理解說話者的內(nèi)容”。研究發(fā)現(xiàn),聾人通過唇讀進(jìn)行語音識(shí)別的效果受到音素的可見性程度之限制。Fisher(1986)用視素(Viseme)表示語音的視覺特征。一個(gè)視素就是根據(jù)一個(gè)音素的發(fā)音位置或口形劃分的。視素分為元音視素和輔音視素。元音視素的可見性較高,準(zhǔn)確的發(fā)音可以表現(xiàn)出不同的唇形(圓唇/不圓唇)和開口度。而輔音視素是根據(jù)發(fā)音部位確定,比元音要模糊。而且,許多輔音音素的視覺形象完全一樣,“例如b和p,d和t,g和k,j和q等,它們只有氣流強(qiáng)弱的區(qū)別,而氣流的強(qiáng)弱則根本無法看見,只有元音a、o、e、i、u、ü幾乎各有自己的獨(dú)特視覺形象”。Young(1986)做了一個(gè)很有意義的實(shí)驗(yàn),要求16名被試從照片中進(jìn)行面部確認(rèn),發(fā)現(xiàn)在面部辨認(rèn)中,辨認(rèn)熟悉面部的反應(yīng)時(shí)間與錯(cuò)誤率均少于辨認(rèn)不熟悉面部,存在明顯的熟悉效應(yīng)(familiarityeffect)。本文試圖探討聾校師生熟悉程度對(duì)唇讀語音識(shí)別效果的影響。2實(shí)驗(yàn)方法2.1年級(jí)學(xué)生基本情況選取武漢某聾校聾生28名為實(shí)驗(yàn)被試。其中,二年級(jí)學(xué)生10名(一個(gè)班),五年級(jí)學(xué)生18名(一個(gè)班10名,另一個(gè)班8名);男生11人,女生17人;平均年齡為11.25歲(年齡范圍為8~15歲)。被試都為3歲前(語前)致聾,聽力損失程度平均為99.92分貝(聽力損失的范圍是78-110分貝)。2.2實(shí)驗(yàn)材料的組成采用2×3兩因素被試內(nèi)實(shí)驗(yàn)設(shè)計(jì)。這兩個(gè)自變量因素是:(1)熟悉程度,包括新任課教師(陌生教師)與原任課教師(熟悉教師)兩個(gè)水平;(2)音素,包括單字聲母、單字單韻母、單字復(fù)韻母三個(gè)水平。實(shí)驗(yàn)材料相對(duì)音素的三個(gè)水平分為三組:聲母測(cè)試組、單韻母測(cè)試組、復(fù)韻母測(cè)試組。每組實(shí)驗(yàn)材料包括6個(gè)目標(biāo)識(shí)別音素,每個(gè)目標(biāo)識(shí)別音素提供5個(gè)單字識(shí)別口形。在目標(biāo)音素中,目標(biāo)聲母中分別含有/b/、/z/、/t/、/ch/、/q/、/k/,目標(biāo)單韻母中分別含有/a/、/o/、/e/、/i/、/u/、/ü/,目標(biāo)復(fù)韻母中分別含有/ai/、/uo/、/ie/、/an/、/ong/、/ao/。每組實(shí)驗(yàn)材料的測(cè)試時(shí)間控制在15分鐘左右。2.3材料和實(shí)驗(yàn)主試實(shí)驗(yàn)分以下幾個(gè)步驟進(jìn)行:被試的分組:在參加實(shí)驗(yàn)的三個(gè)自然班的基礎(chǔ)上,每個(gè)班的被試被分成在性別、年齡、聽力損失程度上大致相等的兩個(gè)組。主試的培訓(xùn)和分配:由6名普通話水平都達(dá)到國家普通話甲級(jí)標(biāo)準(zhǔn)的教師組成本實(shí)驗(yàn)的主試。正式測(cè)試之前分別對(duì)這6名教師進(jìn)行半小時(shí)的施測(cè)培訓(xùn),要求其默讀并提供規(guī)范的單字口形。每個(gè)自然班的主試由該班1名原任課教師和分配的1名新任課教師組成。實(shí)驗(yàn)材料的施測(cè):分兩階段進(jìn)行。每個(gè)班的兩名主試首先分別對(duì)該班的一個(gè)小組進(jìn)行實(shí)驗(yàn)材料的測(cè)試;一周后,主試交叉對(duì)另一小組進(jìn)行測(cè)試。測(cè)試時(shí),主試現(xiàn)場(chǎng)提供規(guī)范的口形并要求聾生進(jìn)行唇讀聲母、單韻母、復(fù)韻母的識(shí)別,并將答案填寫在答題紙上。為了保證被試能理解測(cè)試意圖,主試在正式實(shí)施測(cè)驗(yàn)前通過指導(dǎo)語提供操作示范。測(cè)試結(jié)束后,回收答題紙,分別計(jì)算出被試在原任課教師和新任課教師作主試時(shí)不同組實(shí)驗(yàn)材料識(shí)別的正確率,輸入計(jì)算機(jī),使用SPSS10.0進(jìn)行統(tǒng)計(jì)分析。3音素識(shí)別的單n-ls分布及差異表1呈現(xiàn)了聾生對(duì)教師不同熟悉程度下唇讀漢字口形識(shí)別聲母、單韻母、復(fù)韻母的平均正確率與標(biāo)準(zhǔn)差。多因素重復(fù)測(cè)量的方差分析發(fā)現(xiàn),熟悉程度的主效應(yīng)臨近顯著(F(1,27)=4.164,P=0.051),音素的主效應(yīng)顯著(F(2,54)=12.929,P=0.000),熟悉程度與音素之間的交互效應(yīng)顯著(F(2,54)=5.106,P=0.009)(見圖1)。通過兩個(gè)方向的簡(jiǎn)單效應(yīng)分析及對(duì)音素不同水平的差異作事后檢驗(yàn)發(fā)現(xiàn):(1)熟悉教師和陌生教師之間的熟悉效應(yīng)僅顯著發(fā)生在單韻母識(shí)別水平上(F(1,27)=7.879,P=0.009)。(2)在熟悉教師提供漢字口形的情況下,識(shí)別不同音素之間的正確率存在顯著差異(F(2,54)=18.083,P=0.000),且聲母與單韻母之間、聲母與復(fù)韻母之間、單韻母與復(fù)韻母之間的差異都顯著(F(1,27)=35.854,P=0.000;F(1,27)=15.953,P=0.000;F(1,27)=4.412,P=0.045)。(3)在陌生教師提供漢字口形的情況下,識(shí)別不同音素之間的正確率接近顯著差異(F(2,54)=3.028,P=0.057),其中僅聲母、單韻母之間的差異顯著(F(1,27)=5.733,P=0.024)。4討論4.1熟悉程度的差異實(shí)驗(yàn)結(jié)果發(fā)現(xiàn),聾生唇讀語音識(shí)別中熟悉效應(yīng)的產(chǎn)生是有條件的。師生之間的熟悉程度在單韻母識(shí)別中起到了顯著的作用,在一定程度上說明了“說話者與看話者之間的關(guān)系越熟悉,看話效果越好”的理論假設(shè)。然而,在聲母與復(fù)韻母識(shí)別中,未發(fā)現(xiàn)因熟悉程度不同所帶來的顯著性差異。分析其原因,前者可能與聲母可見性程度低有關(guān),后者則可能與由元音與元音、元音與鼻音組合的復(fù)韻母的復(fù)雜性有關(guān)。需指出的是,盡管熟悉程度的不同并未帶來識(shí)別聲母的顯著性差異,但聾生唇讀熟悉教師提供口形的正確率低于陌生教師值得注意。這可能與聾生參與實(shí)驗(yàn)時(shí)的注意力集中程度有一定的關(guān)系,更可能是有其它更細(xì)致的影響因素我們沒有分離出來。這種現(xiàn)象的合理解釋有待更進(jìn)一步的研究。4.2音素可見性的影響音素的可見性對(duì)聾生的唇讀語音識(shí)別有很大的影響,但其影響作用在熟悉與陌生教師提供唇讀口形時(shí)表現(xiàn)出不同的特點(diǎn)。在熟悉教師提供口形情況下,唇讀語音識(shí)別不同音素的效果極其顯著,說明視素可見性的影響作用顯著。而在陌生教師提供口形情況下,唇讀語音識(shí)別不同音素的顯著差異僅來源于聲母與單韻母。這說明聾生在識(shí)別陌生教師提供的口形時(shí)總體上存在一定的難度,但視素的可見性還是起到了很強(qiáng)的作用。我們認(rèn)為,音素可見性對(duì)聾生語音識(shí)別影響的條件性差異可能與聾校師生長(zhǎng)期進(jìn)行語言交流過程中建立的穩(wěn)固語音識(shí)別模式有關(guān)。聾生只要建立了穩(wěn)固的語音識(shí)別模式,就適應(yīng)了教師的口形表達(dá),能有效而迅速地進(jìn)行唇讀語音,故表現(xiàn)出音素可見性的最大影響。據(jù)此推知,提高聾生唇讀的效果在一定程度上要加強(qiáng)聾生與任課教師的口語交流,構(gòu)建聾生穩(wěn)固的語音識(shí)別模式。5音素顯示的隨機(jī)性聾校師生的熟悉程度與音素可見性共同交互作用于聾生唇讀語音識(shí)別過程。5.1聾生唇讀語音識(shí)別的熟悉效應(yīng)僅顯著發(fā)生在單韻母的識(shí)別