英語聽力口語考試自動化系統(tǒng)

江蘇省英語聽力口語

自動化考試介紹牛津大學出版社(中國)有限公司中國科學院自動化研究所

2008年8月1目錄考試概要介紹考試的模式和管理計算機自動閱卷原理評估報告及教學反饋21.1主要內(nèi)容自動閱卷平臺人機對話聽力口語考務平臺考生語音數(shù)據(jù)考務和考場編排系統(tǒng)題庫管理系統(tǒng)考生成績及個性化診斷報告這是一場英語聽力口語合并的全自動化考試出題自動化，以海量題庫為基礎；考試自動化，采取人機對話方式；判卷自動化，全部閱卷由計算機完成；結(jié)果反饋，自動化生成評估報告。31.2本項目四大特點人機對話的測試系統(tǒng)，將聽力和口語合二為一，省時省力、減少事故；現(xiàn)狀：100萬考生口語考試，3天組織，工作量很大；人工：1老師/天/100份卷，總量100萬考生；機器：1個市，2臺服務器/3天判卷；大幅度減少考試可能出現(xiàn)的差錯和事故率。海量題庫、人機對話，同一考場不同考卷；題庫的海量性從考試機制的角度有效阻止了考試作弊現(xiàn)象；通過技術(shù)手段有效抑制猜題、押題等弊端；從長遠建設角度，經(jīng)過3到5年努力建立起百萬級題庫，并且年更新10%。41.2本項目四大特點計算機完成全部英語聽力和口語考試及評卷公正性：人工閱卷方式受制于教師體力和精力狀況，很難保證成績的客觀性、準確性和公平性，不同老師之間可能出現(xiàn)較大差異；計算機判卷不僅克服了人工判卷中這些很難避免的不利因素，極大提高閱卷和評估的客觀性和公正性，而且為個性化評估和提供改進建議奠定了堅實的基礎。有效評估，反饋教學六級評估報告，從省、市、區(qū)縣，到學校、班級和個人；中國第一次以量化方式提供考試評估反饋；這樣的評估報告對英語的教與學提供了真正的可信、可視化和可操作化的幫助。5目錄考試概要介紹考試的模式和管理計算機自動閱卷原理評估報告及教學反饋62.1考試自動化系統(tǒng)架構(gòu)面向考試全程，全面、靈活、可定制的方案考前：分級考務管理/考場編排系統(tǒng)、考試服務網(wǎng)站考中：測試系統(tǒng)考后：自動閱卷系統(tǒng)、報告生成系統(tǒng)72.2考務管理/考場編排系統(tǒng)具有省、市、區(qū)縣三級管理模式；可對考生考籍進行管理；提供多種考場編排方式，生成與考試相關(guān)的各種表格與文件，并能靈活打印82.3考試的組織與管理候考室考場1考生提前進入候考室考場2每考場監(jiān)考員1名每考場系統(tǒng)操作員1名每考場帶隊教師1名每考點考生培訓員1名每考點主考1名注：一個考點可包括一個或多個考場(計算機教室)92.4考試系統(tǒng)監(jiān)考機局域網(wǎng)考試機聽音、錄音聽音、錄音聽音、錄音考生在監(jiān)考機的控制下，通過考試機實現(xiàn)聽題目、錄回答的過程。注：以現(xiàn)有計算機教室為考場，每考場設有30-40臺考試機102.4考試系統(tǒng)-學生人機交互學生端軟件操作簡單易用，包括考號輸入、設備測試、答題等，在語音提示下完成考試過程，出現(xiàn)誤操作的幾率很小112.4考試系統(tǒng)-考號輸入122.4考試系統(tǒng)-設備測試耳麥設備由省政府統(tǒng)一采購132.4考試系統(tǒng)-設備測試----錄音樣例聲音太小聲音太大（飽和）設備測試時檢查錄音設備，確保錄音正常，是自動閱卷的基礎。聲音合適142.4考試系統(tǒng)-考試過程考生面對計算機，人機對話152.4考試系統(tǒng)-教師人機交互教師端軟件全程監(jiān)控，學生端如有任何異常情況(設備測試、進度、錄音異常等)，及時提示監(jiān)考老師幫助學生解決問題162.4考試系統(tǒng)-測試現(xiàn)場172.4考試系統(tǒng)-其它保障措施每個考場預設10%的備用考試設備，以備設備故障的考生當場或下場重考；考前制定應急處理方案和故障解決手冊，做好對考生設備異常、遲到缺考、網(wǎng)絡故障、數(shù)據(jù)傳輸?shù)葌€別情況的處理準備。考試機故障解決手冊監(jiān)考機故障解決手冊182.5自動閱卷系統(tǒng)評分標準人機對話考試系統(tǒng)考生答案自動閱卷服務器(省政府統(tǒng)一采購)局域網(wǎng)閱卷進度監(jiān)控系統(tǒng)管理注：以一市10萬考生計算，閱卷中心由兩臺閱卷服務器構(gòu)成，3天可完成閱卷。192.5自動閱卷系統(tǒng)導入考生的答卷文件；準確完成自動閱卷和評分；20目錄考試概要介紹考試的模式和管理計算機自動閱卷原理評估報告及教學反饋213.1自動閱卷系統(tǒng)技術(shù)結(jié)構(gòu)223.2語音識別用于口語評估的特殊性限定條件下的語音識別專門麥克風，一定題型；有別于不受任何限制的自然口語識別；口語評估基于標準語音庫，而語音識別基于大量非標準庫中科院自動化所領(lǐng)先的語音識別技術(shù)美國雖然還沒有把語音技術(shù)應用于他們本國的學生評估，但是把這種技術(shù)應用到美國以外學生的英語考試已經(jīng)很多年了。233.3閱卷特征提取完整性朗讀型題目，能否順利讀完全文，以及順利讀完的比例；話題簡述型題目，能否完整表達題目的語意，清楚表達的語意比例；完整性特征是評分的起評基本特征；準確性單詞級評估，主要包括單詞發(fā)音的元音、輔音、重音準確性流利性句子級評估，主要包括語速、插入（重復、修正）、連貫（連讀、失去爆破、同化）等韻律性句子級評估，主要包括意群停頓（節(jié)奏）、重讀弱讀、語氣語調(diào)243.4自動閱卷過程說明Makingteawithteabagsisfasterandeasierthanmakingitwithleavesinteapots閱卷系統(tǒng)及其輸入：系統(tǒng)輸入：考生朗讀文本及語音253.4自動閱卷過程說明綜合各種特征給出評分完整性特征：根據(jù)漏讀情況計算完整性準確性特征：單詞發(fā)音、重音準確性流利性特征：語速、插入、連讀、失去爆破、同化韻律性特征：意群停頓、重讀弱讀、語氣語調(diào)綜合決策模塊：綜合上述特征給出最后評分綜合決策完整性特征準確性特征流利性特征韻律性特征評分結(jié)果門限設置26目錄考試概要介紹考試的模式和管理計算機自動閱卷原理評估報告及教學反饋274.1省、市、區(qū)(縣)、校、班級、個人六級評估報告評估報告的主要內(nèi)容包括：考試總分統(tǒng)計：分別按照個人、班級、學校、區(qū)(縣)、市、省進行分析和比較，并可自定義比較單位，如平均分、最高分、單項分等；主要錯誤的尋找和指正：給出發(fā)音、考點、語速、重音等方面的分檔評價和主要錯誤；改進建議：針對主要錯誤給出練習改善的建議。284.2.1考試總分統(tǒng)計34分及以上（A檔）34-28分（B檔）28-24分（C檔）24-20分（D檔）20分下（E檔）3341(80.3%)511(12.3%)140(3.4%)82(2.0%)86(2.1%)294.2.2單項分數(shù)統(tǒng)計30->4.2.2發(fā)音錯誤比率圖314.2.2語速分布圖324.2.3各大題得分情況分析朗讀短文回答問題平均分：8.79分(滿分10分)平均分：8.74(滿分10分)聽短文或?qū)υ捇卮饐栴}復述句子平均分：9.02分(滿分10分)平均分：9.44分(滿分10分)334.2.4依據(jù)考點對各題得分情況分析依據(jù)本次考試所涉及的功能意念點，對回答問題部分的成績進行歸納依據(jù)本次考試所涉及的交談內(nèi)容，對聽短文或?qū)υ捇卮饐栴}部分成績進行歸納依據(jù)本次考試所復述句子的長度，對復述句子部分成績進行歸納34謝謝！359、春去春又回，新桃換舊符。在那桃花盛開的地方，在這醉人芬芳的季節(jié)，愿你生活像春天一樣陽光，心情像桃花一樣美麗，日子像桃子一樣甜蜜。2月-252月-25Tuesday,February11,202510、人的志向通常和他們的能力成正比例。12:45:3312:45:3312:452/11/202512:45:33PM11、夫?qū)W須志也，才須學也，非學無以廣才，非志無以成學。2月-2512:45:3312:45Feb-2511-Feb-2512、越是無能的人，越喜歡挑剔別人的錯兒。12:45:3312:45:3312:45Tuesday,February11,202513、志不立，天下無可成之事。2月-252月-2512:45:3312:45:33February11,202514、ThankyouverymuchfortakingmewithyouonthatsplendidoutingtoLondon.ItwasthefirsttimethatIhadseentheToweroranyoftheotherfamoussights.IfI'dgonealone,Icouldn'thaveseennearlyasmuch,becauseIwouldn'thaveknownmywayabout.。11二月202512:45:33下午12:45:332月-2515、會當凌絕頂，一覽眾山小。二月2512:45下午