【通用】聽見智能會議系統(tǒng)建設(shè)方案一體機

聽見智能會議系統(tǒng)

建設(shè)方案安徽聽見科技有限公司

2017年1月目錄1.項目概述>1.1.建設(shè)背景1>1.2.建設(shè)重要性1.建設(shè)內(nèi)容及目標.產(chǎn)品施工條件.建設(shè)方案>4.1.系統(tǒng)概述7>4.2.軟件詳細配置84.2.1.....94.2.2.4.2.1.....94.2.2.....114.2.2.1中文語音轉(zhuǎn)寫引擎應(yīng)用系統(tǒng)基本功能用戶管理錯誤!未定義書簽。 一4.2.2.2 音頻采集處理錯誤!未定義書簽。4.2.2.3.114.2.2.4.4.2.2.3.114.2.2.4.12 3實日口日轉(zhuǎn)^寫 _S^i□日轉(zhuǎn)^寫內(nèi)容編輯12效果優(yōu)化14內(nèi)容展示15內(nèi)容管理16全文檢索錯誤!未定義書簽。硬件設(shè)備配置17一體式智能會議主機錯誤/未定義書簽。應(yīng)用端主控電腦錯誤/未定義書簽。5.項目報價 191.1.項目概述建設(shè)背景隨著信息時代的到來，海量語音的獲取和存儲能力愈發(fā)強大，基于會議辦公的實際場景，會存在需要大量的人力投入、工作效率不高的情況、語音技術(shù)在會議場景中的應(yīng)用質(zhì)量和效果不高。因此，結(jié)合會議會務(wù)場景對語音技術(shù)的實際應(yīng)用需求，開展了基于會議場景下的語音技術(shù)應(yīng)用關(guān)鍵技術(shù)研究，突破語音合成、語音識別、語音轉(zhuǎn)寫等核心技術(shù)，提升語音技術(shù)在會議會務(wù)場景中的應(yīng)用水平，切實提升日常會議辦公的工作效率和效果。建設(shè)重要性語音識別(SpeechRecognize)技術(shù)，是讓機器通過識別和理解過程使之聽懂人類語言的技術(shù)。語音識別技術(shù)是信息技術(shù)中人機交互的關(guān)鍵技術(shù)，目前已經(jīng)在呼叫中心、電信增值業(yè)務(wù)、企業(yè)信息化系統(tǒng)中有了廣泛的應(yīng)用。隨著語音識別在語音搜索、語音控制等全新應(yīng)用領(lǐng)域的深入應(yīng)用，語音識別技術(shù)被業(yè)界權(quán)威人士譽為有可能引發(fā)人機界面領(lǐng)域革命的關(guān)鍵技術(shù)。近年來，語音識別技術(shù)取得了長足的進步。智能會議系統(tǒng)是基于語音識別技術(shù)所研發(fā)，可滿足會議演講、會議研討、溝通交流、大型會議等一系列需要進行實時文字轉(zhuǎn)寫的場景。此部分項目的實施主要解決會議記要整理時間長、會議中心思想因記錄人員的理解而可能出現(xiàn)的偏差、會議錄音及關(guān)鍵點難以查找等問題。項目建成后當天即可完成所有相關(guān)會議記要的整理工作，同時，每一個人的發(fā)言均可記錄在紀要當中，可有效減少因不同原因造成的會議中心內(nèi)容理解的偏差，提升紀要整理的效率。建設(shè)內(nèi)容及目標本項目計劃選取1個會議室分別部署單機版聽見智能會議系統(tǒng)，進行基于會議場景下的新型語音轉(zhuǎn)寫技術(shù)的應(yīng)用，實現(xiàn)會議過程中音頻實時轉(zhuǎn)寫成文字，輔助會議記錄人員進行紀要的整理與校正，實現(xiàn)快速成稿，在整體上打造樣板化智能語音轉(zhuǎn)寫會議室。產(chǎn)品施工條件聽見智能會議系統(tǒng)的部署環(huán)境整體要求如下:電源機柜要^頻接

求口環(huán)境指標要求1.5KW麥克

風(fēng)電源機柜要^頻接

求口環(huán)境指標要求1.5KW麥克

風(fēng)需配置麥克風(fēng)對每個說話人聲音進行采集高度：6U

深度：

500MM

對應(yīng)機

柜托盤

一個需提供

一路音

頻接口，支持卡儂公或大三芯或雙蓮花視頻接

口

如需上

屏，需

提供投

屏接口，支

持HDMI

或

VGA詳細說明如下:環(huán)境要求智能會議系統(tǒng)采用專業(yè)定制一體機的硬件形態(tài)，一體機的安裝機柜需要6U空間，安裝于正常室外室內(nèi)即可，設(shè)備深度為500MM，系統(tǒng)本身局域網(wǎng)組建自帶，網(wǎng)絡(luò)帶寬在100M以上，主控PC需要連接局域網(wǎng)下使用，整套設(shè)備局域網(wǎng)下運行即可。同時需要1.5KW電源。音視頻需求該系統(tǒng)是基于音頻基礎(chǔ)上實現(xiàn)語音轉(zhuǎn)寫，麥克風(fēng)等音響設(shè)備利用會議室現(xiàn)有環(huán)境。為實現(xiàn)對現(xiàn)場音頻的采集，需要現(xiàn)場音響設(shè)備（調(diào)音臺或相關(guān)音頻設(shè)備）提供會議話筒音頻供轉(zhuǎn)寫，同時設(shè)備接口支持卡儂公、大三芯（6.5）、雙蓮花輸入。如有展板上屏需求，需要會議室內(nèi)配有投影儀或者電視機，且具備VGA或者HDMI接口任意一種，展板通過連接投影儀或者電視機進行投屏展示。系統(tǒng)連線圖聽見智能會議系統(tǒng)的配套硬件設(shè)備，其形態(tài)為：通過國家CCC認證和專業(yè)定制一體機+應(yīng)用端主控電腦。一體式智能會議主機為訊飛聽見專業(yè)定制設(shè)備，集成了包括服務(wù)節(jié)點、應(yīng)用節(jié)點、聲卡、顯示器、路由器等部件，用于部署引擎等核心能力軟件，并提供錄音服務(wù)處理、數(shù)據(jù)傳遞等能力；主控端筆記本電腦主要用于部署客戶端軟件，控制會議的開始和結(jié)束，提供軟件各個功能的操作。會議室現(xiàn)場的發(fā)言音頻輸出給一體機，同時如需顯示，一體機支持顯示輸出，主控電腦通過網(wǎng)線與一體機連接，整套產(chǎn)品即可使用。第5頁...UHH「_■!:第5頁...UHH「_■!:二|qHId＞整機電源：AC100-240V700W；＞服務(wù)器節(jié)點：XEON2.6G20M2011P8CORE,E5-2620V3*2；32GDDR4REG/ECC；接口2*千網(wǎng)口(IntelI210AT),1*RS232,GPIO,Watchdog,丫6人-＞切換器；USB：6*USB(前置1*USB2.0+后置(2*USB2.0/2*USB3.0)；＞應(yīng)用節(jié)點：CORE3.2G6M1151P4COREI5-6500；8GDDR4,2*千兆網(wǎng)口(Intel82579V)1*千兆網(wǎng)口(Intel82579V)，1*RS232,1*VGA，1*PS2,外接：DVI轉(zhuǎn)HDMI；＞坦克聲卡：一個麥克風(fēng)輸入并自帶音量增益旋鈕,XLR/6.3mm混合式接頭一個樂器輸入并自帶音量增益旋鈕,6.3mm接頭4個模擬輸入(RCA接頭)一組唱盤輸入并內(nèi)建RIAA等化放大及自帶音量增益旋鈕6個模擬輸出(RCA接頭)一個耳機接孔(6.3mm接頭)并自帶音量增益旋鈕一個光纖數(shù)字輸出/輸入一個同軸數(shù)字輸出/輸入一組MIDII/O。

產(chǎn)品連線說明：本產(chǎn)品為一體機形態(tài)，只需要接通一根電源線、一根音頻線、一根視頻線，并通過一根網(wǎng)線連接主控，就可使用。上屏接口:支持DVi或hdmi4*IKU01HI上屏接口:支持DVi或hdmi4*IKU01HI?HK ?q?._|±|主.|.王.14.^4^一Mi--QMBtF"J334Ft—B-mB三J-rrm BEnTffifflH-HriilpmIr]三三三R目I

,三mMmffi.g^

■hl=l三一H4W

■三三二三三之1電源音頻線：音微輸入口，支恃卡衣公、蓮花、大三芯輸入5.5.建設(shè)方案系統(tǒng)概述聽見智能會議系統(tǒng)由軟件、硬件共同構(gòu)成，實現(xiàn)在會議場景下的實時音頻或錄音采集，并通過語音識別技術(shù)實時轉(zhuǎn)化為文字。用戶可以通過系統(tǒng)提供延時播放、按句回聽、重點標記等功能方便快速整理出會議材料；并且通過系統(tǒng)提供的語氣詞過濾、自動分段等功能自動優(yōu)化文字結(jié)果；同時，用戶可以使用全文檢索功能方便檢索歷史音頻。系統(tǒng)具備會議音頻管理、即時校對編輯、敏感詞屏蔽、轉(zhuǎn)寫文字實時直播等基本功能。性能參數(shù)系統(tǒng)關(guān)鍵性能指標如下：1）轉(zhuǎn)寫結(jié)果能夠?qū)崟r上屏展示；2）轉(zhuǎn)寫結(jié)果能夠音字對照、編輯校正；3）普通話轉(zhuǎn)寫指標：安靜環(huán)境下的標準普通話轉(zhuǎn)寫正確率三90%；4）系統(tǒng)響應(yīng)指標：常規(guī)頁面操作的響應(yīng)時間W5秒；5)轉(zhuǎn)寫效率指標：實時語音轉(zhuǎn)寫效率W500毫秒。軟件功能配置中文語音轉(zhuǎn)寫引擎聽見智能會議系統(tǒng)需要解決語音轉(zhuǎn)換成文字的問題。機器語音識別技術(shù)是一種實現(xiàn)從“聲音，，到“文字，，轉(zhuǎn)換的技術(shù)，通過將人的語音直接轉(zhuǎn)換成相應(yīng)的文本。語音識別技術(shù)的研究工作開始于上世紀五十年代。Bell實驗室的研究人員利用模擬元器件提取了語音信號元音共振峰頻率變化的信息，有史以來第一次實現(xiàn)了識別十個英文數(shù)字的語音識別系統(tǒng)-Audry系統(tǒng)。八十年代，Bell實驗室的Rabiner等科學(xué)家將原本艱澀難懂的隱馬爾科夫模型(HiddenMarkovModel-HMM)理論工程化，形成了較為完善的概率統(tǒng)計模型體系，識別性能也得到了很大的提高。2006年以來DeepLearning理論和技術(shù)成為了模式識別領(lǐng)域的一個熱門研究方向，G.E.Hinton等深入研究了深度置信網(wǎng)絡(luò)(DeepBeliefNetwork-DBN)以及深度神經(jīng)網(wǎng)絡(luò)(DeepNeuralNetwork-DNN)等模型結(jié)構(gòu)，微軟通過與Hinton合作率先將DNN應(yīng)用于語音識別任務(wù)，識別性能取得了顯著提升。此后谷歌、蒙特利爾，以及IBM又將循環(huán)神經(jīng)網(wǎng)絡(luò)(RecurrentNeuralNetwok-RNN)成功應(yīng)用于語音識別領(lǐng)域，特別是長短時記憶(Long-ShortTermMemory)神經(jīng)網(wǎng)絡(luò)結(jié)構(gòu)，取得非常出色的語音識別性能。加上目前圖形處理器(GPU)計算能力的提升，以及互聯(lián)網(wǎng)時代大規(guī)模標注數(shù)據(jù)獲取成為可能，基于深度學(xué)習(xí)的語音識別技術(shù)已經(jīng)在多個領(lǐng)域達到實用水平。傳統(tǒng)的語音識別技術(shù)主要用于解決人與機器的交互問題。而在會議場景需要需要轉(zhuǎn)成文字的音頻內(nèi)容是人與人之間交互，聽見智能會議系統(tǒng)需要基于機器語音識別技術(shù)構(gòu)建語音轉(zhuǎn)寫引擎。聽見智能會議系統(tǒng)構(gòu)建的語音轉(zhuǎn)寫引擎需要能夠?qū)崟r、高效的把人與人之間交流的語音轉(zhuǎn)換為文字的能力，具體包括中文語音轉(zhuǎn)寫引擎與英文語音轉(zhuǎn)寫引擎，本系統(tǒng)需要完成中文語音轉(zhuǎn)寫引擎的建設(shè)。第10頁應(yīng)用系統(tǒng)基本功能聽見智能會議系統(tǒng)，可以實現(xiàn)在會議、教學(xué)、演講等場景下的實時音頻或錄音采集，并通過語音識別技術(shù)實時轉(zhuǎn)化為文字。用戶可以通過系統(tǒng)提供延時播放、按句回聽、重點標記等功能方便快速整理出會議材料；并且通過系統(tǒng)提供的語氣詞過濾、自動分段等功能自動優(yōu)化文字結(jié)果，可人工進行角色分離；同時，用戶可以使用全文檢索功能方便檢索歷史音頻。實時語音轉(zhuǎn)寫聽見智能會議系統(tǒng)需要通過對實時音頻流信號的處理完成從信號獲取、轉(zhuǎn)換、處理、識別、輸出、展示等一整套流程動作，需要由強大的音頻采集處理模塊。系統(tǒng)講通過使用特定的錄音服務(wù)，通過麥克風(fēng)收集后，送達后臺服務(wù)端完成編碼工作，實時上傳到系統(tǒng)，供后續(xù)的轉(zhuǎn)寫文字等功能使用，同時保存到內(nèi)容管理模塊中。系統(tǒng)通過專業(yè)麥克風(fēng)對會議全程進行高保真錄音,并針對連續(xù)中文語流進行實時語音轉(zhuǎn)寫識別，并持續(xù)進行轉(zhuǎn)寫結(jié)果文本內(nèi)容第11頁

的輸出。歷史語音轉(zhuǎn)寫相比于實時語音轉(zhuǎn)寫模塊，歷史語音轉(zhuǎn)寫模塊提供對于已經(jīng)錄制好的歷史音頻需要轉(zhuǎn)寫情況下的解決能力；用戶可以通過系統(tǒng)提供的功能按鈕，導(dǎo)入歷史音頻并實現(xiàn)快速離線轉(zhuǎn)寫；支持音頻批量導(dǎo)入。甚星由.忸中常如酊兩星1甚星由.忸中常如酊兩星1隨6■的■土應(yīng)住壬共業(yè)之后超吟「=雷工碗.畛七豆芝i■脾去帶西?W?ar―斯口I與王?讓?HE—才—,希寫!Bf門骷白*亍石*人號.哥幾聲Bn,HET的二端—型躲r充囚如簧機堂》：■京迪■+■?”看口口■立疝*才一、LtltilE史ISAF中立的=用一科印餐.李，品弄穴理一心―白陛*整丸=工詆?fflfcTh川■tfiKTCIMllLgR*l??『*法?Q*sEI;圖：歷史音頻轉(zhuǎn)寫編輯效果圖5.3.2.3.內(nèi)容編輯在實時語音轉(zhuǎn)寫過程中用戶可以實時對轉(zhuǎn)寫出的文本結(jié)果進行編輯，并進行重點內(nèi)容標記。在實時編輯的過程中采用延時播放的策略，用戶可以在查看到轉(zhuǎn)寫文本之后及時根據(jù)聽到的音頻進行文本校對編輯。用戶也可不戴耳機直接聽現(xiàn)場的實時音頻。支持第12頁選擇查看原始結(jié)果，對比修改，方便快捷，會議結(jié)束后即可直接成稿，并根據(jù)重點內(nèi)容，整理導(dǎo)出會議紀要。具體功能包括：延時播放：在實時語音轉(zhuǎn)寫過程中,識別結(jié)果展現(xiàn)之后再開始連續(xù)播放音頻，即用戶在看到轉(zhuǎn)寫文本的時候，同步聽到對應(yīng)的音頻,使得校對和編輯更加便利。重點內(nèi)容標記：在實時語音轉(zhuǎn)寫過程中或者暫停和結(jié)束時，用戶均可以選中文本來進行重點內(nèi)容的標記，已標記的文本也可以進行修改和標記取消，方便整理會議紀要，會議結(jié)束會后即可或直接成稿。音字對照：在實時語音轉(zhuǎn)寫暫停的時候，用戶如果對于有些內(nèi)容沒有聽清，對于文本內(nèi)容不確定的情況下，雙擊原始結(jié)果即可聽到文本對應(yīng)的音頻，方便用戶對寫結(jié)果進行編輯，尤其是不小心誤刪除了編輯文本，可以通過回聽原始結(jié)果來進行回溯。實時語音轉(zhuǎn)寫結(jié)束狀態(tài)時，原始結(jié)果及編輯結(jié)果均可雙擊進行音頻回聽。第13頁;QE1,1 .0bFli9立加feu. 的11)0 加峭.(ZTfliSttlUK*曲SM用苧L今天WT￥費過一下1tfIt士fcSLlffli圣科Nt￡■坨時：摩密：歲島t回卡時B7全口BLfH司以時.9用守單:MH1*?twi9M0小■■nzlE&3SHA汽9下巨”?具春3E■1斤圖：實時語音轉(zhuǎn)寫效果圖5.3.2.4.效果優(yōu)化在實時語音轉(zhuǎn)寫過程中，聽見智能會議系統(tǒng)通過提供語氣詞過濾、自動分段等功能自動優(yōu)化文字轉(zhuǎn)寫和顯示結(jié)果。具體包括：自動分段：在會議內(nèi)容實時語音轉(zhuǎn)寫成文字的過程中，為了方便用戶編輯何查看，系統(tǒng)提供根據(jù)VAD+固定字數(shù)和VAD+固定關(guān)鍵詞兩種自動分段方式。系統(tǒng)提供最佳的默認自動分段方式，用戶也可根據(jù)實際情況進行設(shè)置。語氣詞過濾：用戶可以在實時語音轉(zhuǎn)寫開始前或者進行文稿整理時可以根據(jù)需要選擇是否開啟語氣詞過濾按鈕，若開啟按鈕可將語氣詞和多余的詞匯去除，以保證文稿的第14頁

規(guī)整。語氣詞過濾只針對新轉(zhuǎn)寫的結(jié)果，已經(jīng)修改過的內(nèi)容不支持過濾。關(guān)鍵詞優(yōu)化：用戶可通過關(guān)鍵詞優(yōu)化功能將此次會議相關(guān)的關(guān)鍵詞進行添加，能有效提升該關(guān)鍵詞的識別準確率。實時轉(zhuǎn)寫過程中用戶也可添加關(guān)鍵詞，并且可以實時生效，后續(xù)識別結(jié)果可得到有效優(yōu)化。5.3.2.5.內(nèi)容展示5.3.2.5.內(nèi)容展示系統(tǒng)通過提供展板上屏等形式進行實時語音轉(zhuǎn)寫結(jié)果的展示。具體功能包括：實時上屏：通過展板上屏展示中實時語音轉(zhuǎn)寫結(jié)果。并且，字體顏色和展板背景顏色可以根據(jù)實際情況需要進行調(diào)整。棱心技術(shù)國際頓先,特寫準確率可達95%以上」并在業(yè)界次達到機需自動語音轉(zhuǎn)寫超過專業(yè)速錄員水平.同時穿用獨立部詈的專強服卷器棱心技術(shù)國際頓先,特寫準確率可達95%以上」并在業(yè)界次達到機需自動語音轉(zhuǎn)寫超過專業(yè)速錄員水平.同時穿用獨立部詈的專強服卷器.可實班制嫉音施特寫.徹底1決涉密場第的厘用需宓.第15頁上屏后臺修改：如果在實時轉(zhuǎn)寫過程中使用了實時上屏功能，希望保障上屏效果，那么可以使用上屏后臺修改功能進行展板端的結(jié)果糾正。在開始時點擊展板按鈕，調(diào)出展板，此時該展板端會同步出現(xiàn)識別文字。如果在轉(zhuǎn)寫過程中出現(xiàn)明顯錯誤或不適宜展示的詞語，則可以在主控端進行展板編輯，可以修改或刪除，修改之后按Enter鍵則修改的內(nèi)容會同步到現(xiàn)場的投影屏幕上。5.3.2.6.內(nèi)容管理5.3.2.6.內(nèi)容管理所有通過聽見智能會議系統(tǒng)轉(zhuǎn)寫的實時錄制的音頻文本數(shù)據(jù)和本地上傳的音頻文本數(shù)據(jù)系統(tǒng)都會以列表形式進行管理，后臺通過分布式存儲集群實現(xiàn)高效安全存儲，整個過程用戶無感知。用戶可以通過內(nèi)容管理模塊隨時查看和編輯，并且可以根據(jù)名稱等信息快速檢索。此外，編輯后的全文本、重點文本以及音頻、某一角色的文本，用戶都可以快速導(dǎo)出，方便快捷。系統(tǒng)通過自然語言理解、語音識別和語義分析技術(shù)理解用戶意圖，執(zhí)行用戶的檢索指令（包括語音、文本等），實現(xiàn)資源文本內(nèi)第16頁

容的語音搜索服務(wù)能力，不僅能檢索文本資源，也能根據(jù)文件名對音視頻內(nèi)容進行搜索。該服務(wù)在傳統(tǒng)的文字輸入搜索方式基礎(chǔ)上，不僅能支持搜索語音時的相對自由表述，也應(yīng)當能夠支持傳統(tǒng)文字檢索時的相對自由表述。5.4.硬件參數(shù)配置數(shù)單

量拉聽見智能會議系統(tǒng)的配套硬件設(shè)備，具體包括：一體式智能會議主機、應(yīng)用端主控電腦。產(chǎn)品參數(shù)如下：數(shù)單

量拉參數(shù)配置訊飛聽見專業(yè)定制一體式智能會議主機，提供4U設(shè)備形態(tài)，集成了包括服務(wù)節(jié)點、應(yīng)用節(jié)點、聲卡、顯示器、路由器等部件。服務(wù)節(jié)點配置：2*E5-2620V32.6GHZ/32G/900G*3SAS2.6GHZ/32G/900G*3SAS10KRPM+raid5/1*USBkey+3*USB2.0/1000MNIC；第17頁

A應(yīng)用節(jié)點配置：~~Intel_CoreSATAi5/8G/500G7200RPM/VGA+HDMI\DVI\DP/3*USB2.0/1000MNIC；SATA＞KVM控制器：二路信號切換，支持一鍵切換服務(wù)端、應(yīng)用端信號源季鼠支持切換使用二切一。＞聲音采集工作站：DMX6FireUSB，單路聲卡＞支持路由功能，提供三個連接外網(wǎng)標準網(wǎng)絡(luò)LAN接口、1個標準網(wǎng)WAN口，配備1