國內(nèi)英語教學(xué)用多模態(tài)語料庫建設(shè)現(xiàn)狀ppt - (e-Learning)平臺

1、國內(nèi)英語教學(xué)用多模態(tài)語料庫建設(shè)現(xiàn)狀-何美20130422語料庫n語料庫是指按照一定的語言學(xué)原則，運用隨機抽樣方法，收集自然出現(xiàn)的連續(xù)的語言運用文本或話語片斷而建成的具有一定容量的大型電子文庫。n關(guān)于語料庫的三點基本認(rèn)識：語料庫中存放的是在語言的實際使用中真實出現(xiàn)過的語言材料；語料庫是以電子計算機為載體承載語言知識的基礎(chǔ)資源；真實語料需要經(jīng)過加工（分析和處理）,才能成為有用的資源； 語料庫驅(qū)動學(xué)習(xí)n在20世紀(jì)90年代初Tim Johns提出一種新的基于語料庫數(shù)據(jù)的外語學(xué)習(xí)方法:數(shù)據(jù)驅(qū)動學(xué)習(xí)（data-driven learning,簡稱DDL）。其主要思想是引導(dǎo)學(xué)生對語料庫數(shù)據(jù)進行觀察，檢索，自

2、我發(fā)現(xiàn)語言使用規(guī)律，以自下而上的方式歸納語法規(guī)則和語用特征 n優(yōu)點：數(shù)據(jù)驅(qū)動學(xué)習(xí)改變了以往傳統(tǒng)的單向灌輸?shù)慕虒W(xué)模式，提供真實的語言實例，激發(fā)學(xué)生的學(xué)習(xí)興趣，通過語料庫檢索，培養(yǎng)學(xué)生自主學(xué)習(xí)和自我解決問題的能力，達到輔助英語教學(xué)的最終目的 國內(nèi)傳統(tǒng)文本語料庫教學(xué)應(yīng)用-理論研究綜述n21世紀(jì)初，國內(nèi)一些學(xué)者( 李文中1999，朱樂紅, 2000; 何安平, 2001) 開始關(guān)注于語料庫在英語教學(xué)中的應(yīng)用研究。李文中, 濮建忠（2001）率先提出語料庫索引在英語教學(xué)中的三種方式；2004年王金栓探討語料庫驅(qū)動學(xué)習(xí)英語教學(xué)新模式；同年首屆中國語料庫語言學(xué)與英語教育教學(xué)研討會在廣州華南師范大學(xué)外文學(xué)院召

3、開, 對語料庫語言學(xué)與英語教育教學(xué)的各個議題展開了激烈討論，極大地促進了語料庫的英語教學(xué)研究；目前國內(nèi)關(guān)于語料庫應(yīng)用于英語教學(xué)的研究中所涉及的內(nèi)容有詞匯教學(xué)、語法教學(xué)、語音拼寫教學(xué)、寫作教學(xué)翻譯教學(xué)、口語教學(xué)、中介語研究、學(xué)習(xí)模式、教學(xué)模式改革、話語和語篇研究等，曾永強（2001）基于語料庫的適應(yīng)性學(xué)習(xí)模式，徐曼菲（2004）圖示理論、語料庫語言學(xué)與外語教學(xué)、衛(wèi)乃興，李文中，濮建中(2005)語料庫應(yīng)用研究、梁茂成，李文中，許家金語料庫應(yīng)用教程、潘潘（2012）基于語料庫的語言研究和教學(xué)應(yīng)用等。 國內(nèi)傳統(tǒng)文本語料庫教學(xué)應(yīng)用-語料庫建設(shè)開發(fā)綜述n由衛(wèi)乃興、李文中和濮建忠等人首次在國內(nèi)實現(xiàn)了語料庫

4、資源的在線查詢、檢索和免費共享, 實現(xiàn)了4個語料庫的700多萬詞的文本資源KWIC網(wǎng)絡(luò)在線轉(zhuǎn)換和實時傳送與共享, 開發(fā)了數(shù)據(jù)庫學(xué)習(xí)系統(tǒng) 現(xiàn)在在國內(nèi)已建成多個大型英語語料庫：中國子語料庫，中國英語學(xué)習(xí)語料庫，大學(xué)學(xué)習(xí)者英語口語語料庫，中國專業(yè)英語學(xué)習(xí)者口語語料庫，中國英語語料庫，中學(xué)英語口語語料庫，公共英語等級考試口語語料庫等，這些英語語料庫都與中國的外語教學(xué)和外語學(xué)習(xí)緊密相聯(lián)。 傳統(tǒng)文本語料庫教學(xué)應(yīng)用“瓶頸”n目前基于語料庫的教學(xué)模式和實踐仍處于探索階段,且教學(xué)應(yīng)用研究多關(guān)注于詞匯教學(xué)。 n傳統(tǒng)語料庫多為文本進行轉(zhuǎn)寫標(biāo)注，其應(yīng)用于直接應(yīng)用于日常語言教學(xué)卻仍有不少障礙，主要問題包括：（1）現(xiàn)有文

5、本語料庫主要為調(diào)查和研究語言而設(shè)計和建立，其規(guī)模大、話題和語域種類繁多，但內(nèi)容通常不能與語言教學(xué)要求直接接軌；（2）語料庫的體例與傳統(tǒng)的教材體例相距甚遠(yuǎn)，從中提取的詞語索引行也往往使初學(xué)者感到過于紛雜和不完整；（3）語料庫的標(biāo)注體系，如口語語料庫中的諸多音韻標(biāo)記，通常令人費解；（4）語料庫只顯示文字和數(shù)據(jù)，而語言教學(xué)卻已進入了“多媒體”時代 -何安平（2009）多媒體 VS 多模態(tài)n內(nèi)容的載體即邏輯媒介來界定某個內(nèi)容是否是多媒體材料。邏輯媒介指在物理媒介上裝載內(nèi)容或信息的編碼手段, 如文字、模擬音頻流、數(shù)字音頻流、圖像、視頻流等。n模態(tài)在本文里指人類通過感官如視覺、聽覺等 跟外部環(huán)境如人、機器

6、、物件、動物等之間的互動方式。多模態(tài)語料庫- 多模態(tài)語料庫是建立在“言語理論” 基礎(chǔ)之上的, 以言語活動為研究對象, 以從原始數(shù)據(jù)中抽取信息和知識為手段, 以語境模型為驅(qū)動的囊括整個言語活動的語言、聲音、圖像和動作的多媒體語料庫（張霄軍，2007:36）。 教學(xué)應(yīng)用優(yōu)勢：n多模態(tài)語料庫的語料不再僅限于文本, 以多媒體素材包括音頻和視頻為語料,在多元語境中反映語言在語音、語義和語用等方面的全貌，學(xué)生更直接的體驗語言使用的多模態(tài)語境。n通過多媒體素材語料進行檢索，提高學(xué)生的自主性 改變以往灌輸式的教學(xué)方式，有利于建設(shè)“以教師為主，以學(xué)生為輔”的教學(xué)模式。國外多模態(tài)語料庫的建設(shè) 早在早在200020

7、00年，年， NIMMNIMM工作組就當(dāng)時現(xiàn)存多模態(tài)語料庫，轉(zhuǎn)寫軟件，工作組就當(dāng)時現(xiàn)存多模態(tài)語料庫，轉(zhuǎn)寫軟件，標(biāo)注工具進行調(diào)查，發(fā)現(xiàn)全球范圍內(nèi)已存在標(biāo)注工具進行調(diào)查，發(fā)現(xiàn)全球范圍內(nèi)已存在6464個多模態(tài)語料個多模態(tài)語料庫庫,36,36個用于面部表情和言語多模態(tài)研究，個用于面部表情和言語多模態(tài)研究，2828個研究身體姿勢和個研究身體姿勢和言語多模態(tài)研究，并已有言語多模態(tài)研究，并已有2121個標(biāo)注方案，現(xiàn)存的多模態(tài)語料庫主個標(biāo)注方案，現(xiàn)存的多模態(tài)語料庫主要用于多模態(tài)話語分析，視聽識別系統(tǒng)，人機智能對話領(lǐng)域的，要用于多模態(tài)話語分析，視聽識別系統(tǒng)，人機智能對話領(lǐng)域的，但是當(dāng)時多模態(tài)語料庫的研究多是僅限

8、于兩種模態(tài)的分析，標(biāo)注但是當(dāng)時多模態(tài)語料庫的研究多是僅限于兩種模態(tài)的分析，標(biāo)注軟件，研究成果應(yīng)用范圍不廣。經(jīng)過十幾年眾多學(xué)者的努力，現(xiàn)軟件，研究成果應(yīng)用范圍不廣。經(jīng)過十幾年眾多學(xué)者的努力，現(xiàn)在已建有用于不同用途的可以分析多種模態(tài)的大型語料庫工程，在已建有用于不同用途的可以分析多種模態(tài)的大型語料庫工程，包括用于多模態(tài)話語分析的包括用于多模態(tài)話語分析的CIDCID語料庫，語料庫，D64D64語料庫，語料庫，IFADVIFADV語料語料庫，庫， SmartwebSmartweb語料庫用于研究人機智能對話技術(shù)，也有應(yīng)用其語料庫用于研究人機智能對話技術(shù)，也有應(yīng)用其他領(lǐng)域的：他領(lǐng)域的：AMIAMI會議語料

9、庫（會議語料庫（3 3個不同會議室個不同會議室100100小時的會議內(nèi)容，小時的會議內(nèi)容，用于研發(fā)瀏覽先前會議內(nèi)容的技術(shù)），用于研發(fā)瀏覽先前會議內(nèi)容的技術(shù)），CUBE-GCUBE-G語料庫（由德國和語料庫（由德國和日本聯(lián)合建設(shè)，用于研究多模態(tài)文化差異），日本聯(lián)合建設(shè)，用于研究多模態(tài)文化差異），F(xiàn)ruits Cart Fruits Cart CorpusCorpus（1313個成員的任務(wù)生成性對話，用于研究語言生成）。個成員的任務(wù)生成性對話，用于研究語言生成）。 國外多模態(tài)語料庫檢索軟件開發(fā)n許多應(yīng)用于多模態(tài)語料庫標(biāo)注和檢索的軟件：許多應(yīng)用于多模態(tài)語料庫標(biāo)注和檢索的軟件： ANVILANVIL，

10、ElanElan，MacVisSTAMacVisSTA，DRSDRS，ExmeraldaExmeralda，同時還有其他功能的軟件，同時還有其他功能的軟件，TransformerTransformer用于文件格式轉(zhuǎn)換，用于文件格式轉(zhuǎn)換，speechware speechware 語料庫轉(zhuǎn)寫軟件，語料庫轉(zhuǎn)寫軟件，C-BASC-BAS用于標(biāo)注編碼。用于標(biāo)注編碼。ElanElan軟件是荷蘭紐梅因馬普心理語言學(xué)研究所開發(fā)的一個多媒體轉(zhuǎn)寫標(biāo)軟件是荷蘭紐梅因馬普心理語言學(xué)研究所開發(fā)的一個多媒體轉(zhuǎn)寫標(biāo)注軟件，在話語分析、態(tài)勢語言、語言存檔、口語語料庫建設(shè)、瀕危語注軟件，在話語分析、態(tài)勢語言、語言存檔、口語語

11、料庫建設(shè)、瀕危語言或方言的保存等方面被廣泛使用。言或方言的保存等方面被廣泛使用。ElanElan支持多種音頻和視頻文件格式支持多種音頻和視頻文件格式的轉(zhuǎn)寫和標(biāo)注，媒體與文本直接關(guān)聯(lián)，一一對應(yīng)，可以無限添加標(biāo)注；的轉(zhuǎn)寫和標(biāo)注，媒體與文本直接關(guān)聯(lián)，一一對應(yīng)，可以無限添加標(biāo)注；支持大字符集支持大字符集UnicodeUnicode編碼漢字、國際音標(biāo)等各種字符的輸入和顯示；轉(zhuǎn)編碼漢字、國際音標(biāo)等各種字符的輸入和顯示；轉(zhuǎn)寫標(biāo)注內(nèi)容與數(shù)據(jù)庫緊密結(jié)合，使用者可以根據(jù)需要進行各種形式的檢寫標(biāo)注內(nèi)容與數(shù)據(jù)庫緊密結(jié)合，使用者可以根據(jù)需要進行各種形式的檢索；許多多模態(tài)語料庫的建設(shè)中都是用了該種軟件。而多模態(tài)語料庫應(yīng)索

12、；許多多模態(tài)語料庫的建設(shè)中都是用了該種軟件。而多模態(tài)語料庫應(yīng)用到外語教學(xué)的研究也起步于用到外語教學(xué)的研究也起步于20002000年。意大利系統(tǒng)功能語言學(xué)和多模態(tài)年。意大利系統(tǒng)功能語言學(xué)和多模態(tài)話語分析專家話語分析專家Anthony Baldry Anthony Baldry 和其他學(xué)者共同研發(fā)和其他學(xué)者共同研發(fā)“多模態(tài)語料庫標(biāo)多模態(tài)語料庫標(biāo)注系統(tǒng)注系統(tǒng)” （Multimodal Corpus Authoring SystemMultimodal Corpus Authoring System，簡稱，簡稱MCAMCA）該信息）該信息檢索工具基于系統(tǒng)功能語言學(xué)和多模態(tài)話語分析理論，以檢索工具基于系

13、統(tǒng)功能語言學(xué)和多模態(tài)話語分析理論，以“幀幀”為基本為基本單位刻畫了影視語篇的語義內(nèi)容和類型結(jié)構(gòu)，從而成功地表征了多媒體單位刻畫了影視語篇的語義內(nèi)容和類型結(jié)構(gòu)，從而成功地表征了多媒體信息的語義內(nèi)容。如今在意大利、新加坡等國，該多模態(tài)檢索系統(tǒng)已經(jīng)信息的語義內(nèi)容。如今在意大利、新加坡等國，該多模態(tài)檢索系統(tǒng)已經(jīng)在多所高校的外語電化教學(xué)中得到了應(yīng)用。在多所高校的外語電化教學(xué)中得到了應(yīng)用。 國外教學(xué)多模態(tài)語料庫建設(shè)n20082008年年1212曰合作建設(shè)的教學(xué)語料庫曰合作建設(shè)的教學(xué)語料庫SACODEYLSACODEYL多模態(tài)語料庫是多模多模態(tài)語料庫是多模態(tài)語料庫在外域教學(xué)中的直接應(yīng)用。其在歐共體資助下，由

14、英國、態(tài)語料庫在外域教學(xué)中的直接應(yīng)用。其在歐共體資助下，由英國、法國、德國、意大利、立陶宛、羅馬尼亞和西班牙法國、德國、意大利、立陶宛、羅馬尼亞和西班牙7 7個國家的個國家的4 4所所大學(xué)于。該庫收錄了歐洲大學(xué)于。該庫收錄了歐洲7 7國的青少年語言，是世界上第一個將國的青少年語言，是世界上第一個將數(shù)據(jù)驅(qū)動學(xué)習(xí)模式付諸實踐的多語種多模態(tài)語料庫。與其他語料數(shù)據(jù)驅(qū)動學(xué)習(xí)模式付諸實踐的多語種多模態(tài)語料庫。與其他語料庫相比，該庫有其獨到之處：（庫相比，該庫有其獨到之處：（1 1）提供多種語料庫工具和靈活）提供多種語料庫工具和靈活多樣的檢索形式；（多樣的檢索形式；（2 2）可進行文本和多模態(tài)視頻間的自由切

15、換；）可進行文本和多模態(tài)視頻間的自由切換；（3 3）用戶可自定義標(biāo)注；（）用戶可自定義標(biāo)注；（4 4）補充了豐富的教學(xué)活動；（）補充了豐富的教學(xué)活動；（5 5）可免費在線使用同時多模態(tài)語料庫建設(shè)中的其他一些問題也在國可免費在線使用同時多模態(tài)語料庫建設(shè)中的其他一些問題也在國外引起了廣泛關(guān)注。如：多模態(tài)語料庫標(biāo)注信度測試，多個多模外引起了廣泛關(guān)注。如：多模態(tài)語料庫標(biāo)注信度測試，多個多模態(tài)語料庫標(biāo)注軟件間文本兼容，多模態(tài)語料庫網(wǎng)絡(luò)共享及多模態(tài)態(tài)語料庫標(biāo)注軟件間文本兼容，多模態(tài)語料庫網(wǎng)絡(luò)共享及多模態(tài)語料庫的著作權(quán)問題都有了深層次的研究。語料庫的著作權(quán)問題都有了深層次的研究。國內(nèi)多模態(tài)語料庫建設(shè)n李文中

16、教授帶領(lǐng)開發(fā)的國內(nèi)建成語料檢索與音視頻定位同步播放系統(tǒng)，整合了多媒體技術(shù)，支持關(guān)鍵詞和場景檢索。n楊林偉、伍忠杰設(shè)計的新聞多媒體語料庫基于B/S(瀏覽器/服務(wù)器)架構(gòu)模式均對語料庫的建設(shè)和共享具有積極的促進作用。多模態(tài)應(yīng)用于教學(xué)n目前國內(nèi)關(guān)于多模態(tài)語料庫應(yīng)用于教學(xué)的研究有兩種：n一種是間接應(yīng)用，將多模態(tài)語料庫的研究成果應(yīng)用于英語教學(xué)。 n另一種是直接應(yīng)用，將多模態(tài)語料庫直接應(yīng)用于英語教學(xué)。 間接應(yīng)用n王立非、文艷（2008）應(yīng)用Elan軟件對第二語言教師課堂話語，母語演講者開場片段進行多模態(tài)分析，建立小型多模態(tài)語料庫研究音韻特征是如何和話語的結(jié)合方式； n劉芹、潘鳴威（2010）以多模態(tài)話語分析理論為基礎(chǔ)，擬建立中型多模態(tài)口語語料庫，從多個標(biāo)注維度設(shè)計多模態(tài)口語語料庫，以對學(xué)生口語作全方位、多層次的剖析，以全面反映大學(xué)生的英語口語水平。 直接應(yīng)用n李學(xué)寧、馬利霞（2010）探討了MCA 多模態(tài)檢索及其在外語電化教學(xué)中的應(yīng)用的可能性；n吳進善（2010）提出多媒體教學(xué)平臺建設(shè)的理論框架，將多媒體語料檢索和大學(xué)教學(xué)相結(jié)合；n河南師范大學(xué)李