qcon2018小機器人誕生之路

小Q 近期主要關注人工智能 教育等創(chuàng)新產(chǎn)品的研發(fā)小Q小Q

小Q小Q 聊12聊12

小Q33 器QQ空間 器峰值每日聊天2000w次，用戶130w（業(yè)界領先單用戶會話輪次達到15AI模型，算法實踐結果做到70%開 閉?量數(shù) 檢索式

深度學習

多樣化數(shù)據(jù) 生成式

RankingQuery理解(TF、Ranking分詞&

searchdsearchd

基于Sphinx技術特色——獨家配方Rank數(shù)據(jù)數(shù)據(jù)baseline A1:休息下A2:你還 A3:R率F-R率F---------POS-IDF A1:休息下A2:你還 啊A3:下次叫我一起，球場

Word2vecRF-深度學習引入深度學習CNN模型，基于TGU訓練\評測\部署，Q數(shù)據(jù)做了拼接共用一個卷積池化的參數(shù)，然后求余弦相似度。ApplyingDeepLearningtoAnswerSelection:AStudyandAnOpen深度學 我們引 改進模型對原有 N模型對比優(yōu)化LearningtoRankShortTextPairswithConvolutionalDeepNeuralNR率F-R率F-技術特色——獨家配方Rank

Pair

12POS-技術特色——獨家配方Rank綜合詞共現(xiàn)/IDF詞向量 N取得比baseline在F值上約70%的提升RF-----N詞共現(xiàn)+idf-基于UGC中文和Emoji表情label利于深度學習LSTM目前6分類的成功率大于80結合寵物的情感分 也開始顯現(xiàn)(KFC&寵物321 器321

小Q小Q

整合人工智能基礎能力 生態(tài)系統(tǒng)合作伙伴?！v訊2017年Q2財+44整合騰訊內多項AI上下文管 會話管

流 流

AILabsAILabsQQ QQ

流式上任 支任 支

我要 稻

意圖識別實體抽 實體消 領域預分 相似度排領域指令粗 指令擴 句子相似 槽位填提高響應速率策略：fastText在top3的領域上選中目標準確率達到97.6%Fasttext1fastText原理

物聯(lián)控制音 故 通 算 電 提 笑 天 百科通用控由于停用詞影響正確率（你、我、他等），這里設置停用詞去掉后剩余詞多于由于停用詞影響正確率（你、我、他等），這里設置停用詞去掉后剩余詞多于個（謂賓短語），停用詞。否則保留停用詞。2t的實體（歌曲、歌手等）給予較低權重。主流語義相似度算法：CNN,wmd 心如刀看深南大道

看深南大道堵 (無實體基于29個句子/詞性特征，實體消歧采用GBDT+Boosting95%，提高容錯能力策略：QueryCorrection(QC)321 器321

小Q小Q的團隊缺乏硬 ，硬件如何選型，硬件研發(fā)如何開展 硬件項目周期長，如何做到快速驗證，快速試錯，快速

頭效果 花

失 按鍵通信題

過 電磁干

1、總耗時達4.423、每個流程都在不同的部門，有些功能還是剛走 4、TTS耗時過長，需要15、靜音檢測每次都要消耗 耗時過長，接近2秒 2、優(yōu)化各個步驟耗時，比如音樂從800ms優(yōu)化到3

靜音檢

目標是秒開，追趕AmazonEcho的應答速度。

音樂意 稻音樂意 稻我要 稻

語音識 語義分

3、TTS不用等待音樂查詢結果，節(jié)省約 生成 流

響應速度優(yōu)化——TTS傳統(tǒng)TTS生成音頻文件，返回地址客戶

痛點：耗時?。ㄔ诎倏祁愰L內容上非常明顯1、 生成完整音頻文件時2、客戶端拿到音頻地址后時間到可 的時響應速度優(yōu)化——TTS根據(jù)文本實時生成語音包數(shù)據(jù)，借助TCP ，OPUS將語音包編碼后，有序送往客戶，OPUS可將語音包從2880b減至300b

數(shù)據(jù) 數(shù)據(jù)

OPUSPCM1、流式TTS 時間不依賴于文本的長度，在長文本和短文本上時間無差2、客戶端無需 ， 會以PUSH的形式有序傳遞給客戶測試數(shù)據(jù)來源測試數(shù)據(jù)來源 PC調試工具連接前端IC，dump工作時各寄存器的設置，確認IC發(fā)現(xiàn)問題：codec模塊AEC沒有打開前端adc、codec抓取原始音頻pcmmicAEC針對前端信號幅度被截的問題，調整了codec調整mic輸入的放大增益參數(shù)以及調整C信號的放大增益參數(shù)，確保信號幅度的完整性。測試的成功率在安靜環(huán)境測試，由原來的%提升到82%比還有明顯差距。專業(yè)音 測試，驗證Mic頻響和結構密封性AudioAudioUSBUSBdriver中多核多線程并 USBUSBUSB修改USB驅動bug，推動解決了MTK底層USBDriver的bug你好小 明天天氣 ，9月份第一版數(shù)據(jù)為誤喚醒為10小時8次，喚醒率為60%； ，在用戶群體差異化情況下，不同習慣容易造成身語音內容丟失，進而語義分 確，導致內容異常。9月份第一版語義的成功率為間斷說 會話開 數(shù)據(jù)傳

明天天氣怎么 天氣|明

天氣怎么 天氣|今會話開

明天天氣怎么 天氣|明喚 [ State