交互式直播推流編碼器的設(shè)計(jì)VIP

1、交互式直播推流編碼器的設(shè)計(jì)議程 直播編碼器的使用場(chǎng)景 直播編碼器在直播中的位置 直播編碼器的典型架構(gòu) 如何進(jìn)行直播交互 交互式直播在教育上的獨(dú)特應(yīng)用 直播編碼器在教育上的技術(shù)挑戰(zhàn)直播編碼器的使用場(chǎng)景娛樂(lè) 類秀 游 體 場(chǎng) 戲 育教育 類在線 教育電商類直播 營(yíng)銷直播編碼器在直播中的位置直播編碼器所處的位置直播編碼器的典型架構(gòu)技術(shù)點(diǎn)分析音頻采集后處理 PCM（Pulse Code Modulation）數(shù)據(jù)的處理目的是除去聲音中電流聲、環(huán)境噪聲等，為終端用戶提供更好的視聽體驗(yàn)。 開源經(jīng)典處理庫(kù)可以參考webrtc的ns音頻處理模塊。技術(shù)點(diǎn)分析視頻采集后處理RGB/YUV 的美化處理給攝像頭或者其

2、它直播畫面增加一些特效處理，可以大大增強(qiáng)直播的趣味性。由于圖像處理對(duì)CPU的消耗很大，所以這個(gè)過(guò)程建議放到GPU里去做（如GLSL去處理圖 像），這個(gè)典型的一個(gè)開源庫(kù)是GPU image?；蛘咄ㄟ^(guò)第三方的視頻美化軟件來(lái)做(一般是虛擬攝像頭)。技術(shù)點(diǎn)分析音視頻緩沖區(qū)的目的外部時(shí)鐘x1攝像頭/其它干擾無(wú)法和 外部時(shí) 鐘同步？ 根據(jù)上圖，由于采集會(huì)收到來(lái)自系統(tǒng)、硬件等方面的限制， 可能會(huì)超出或者低于外部時(shí)鐘指定的采樣率。解決方法就是增加緩沖區(qū)，來(lái)減少這種干擾，如果采樣率較低，可以使用最后 一幀來(lái)填充，如果采樣率較高，可以丟棄一些舊幀。技術(shù)點(diǎn)分析音視頻同步以RTMP/FLV直播流為分析媒體，假設(shè)：視頻

3、幀率：25 fps音頻采樣率：44100，每幀音頻包含1024個(gè)采樣則video_duration=1000/25=40msaudio_duration=1024/44100*1000=23.219954ms開始04080120160200240280320時(shí)間軸視頻音頻1：交叉2：遞增如何打時(shí)間戳？技術(shù)點(diǎn)分析音視頻合成以RTMP/FLV直播流為分析媒體 DTSDecoding Time Stamp PTSPresent Time Stamp CTSComposition Time Stamp那么rtmp/flv里的時(shí)間戳是什么呢？DTS如果H264包含了B幀呢？CTS=PTS如何進(jìn)行直播交互交互式直播在教育上的獨(dú)特應(yīng)用 教師所見，學(xué)生即所得 錄屏？ 各種數(shù)學(xué)作圖圖形，畫筆工具 輔助教學(xué)內(nèi)容的展示 碼率大??？直播編碼器在教