G用戶體驗(yàn)質(zhì)量QoE體系原理及優(yōu)化指導(dǎo)書.doc

1、4G 用戶體驗(yàn)質(zhì)量 QoE 體系原理及優(yōu)化指導(dǎo)書1 2016 年 4G網(wǎng)絡(luò) QOE算法簡(jiǎn)介和考核目標(biāo)1.1指標(biāo)簡(jiǎn)介：4G 時(shí)代已經(jīng)來臨， 網(wǎng)絡(luò)建設(shè)持續(xù)發(fā)力、客戶挖掘和發(fā)展加之各類新興APP業(yè)務(wù)的多樣性 （智能終端的快速普及和微信、視頻、證券、云盤等新興移動(dòng)互聯(lián)網(wǎng)業(yè)務(wù)應(yīng)用的日趨豐富），用戶對(duì)移動(dòng)數(shù)據(jù)業(yè)務(wù)使用體驗(yàn)的要求愈來愈高。因此，需要進(jìn)行對(duì)用戶使用的主流業(yè)務(wù)進(jìn)行科學(xué)的量化和評(píng)價(jià)，以便進(jìn)一步進(jìn)行客戶感知量化管理和端到端短板問題挖掘及精準(zhǔn)優(yōu)化。為了緊密貼近用戶上網(wǎng)實(shí)際感知，必須要轉(zhuǎn)變網(wǎng)絡(luò)質(zhì)量管理方式，不僅關(guān)注網(wǎng)絡(luò)性能，更要關(guān)注業(yè)務(wù)質(zhì)量與用戶感知的量化評(píng)價(jià)。本次基于單用戶單次會(huì)話控制面和業(yè)務(wù)面（ S

2、1 接口、 S11 接口、 S6A接口信令）全流程事件構(gòu)成感知評(píng)價(jià)要素，從接入性（Accessibility）、完整性（ Integrity）和保持性（ Retainability）三個(gè)部分的用戶感知關(guān)鍵指標(biāo)KQI 來構(gòu)建 4G 客戶 QoE（用戶的體驗(yàn)質(zhì)量）評(píng)估體系，以通過QoE 的量化的形式來評(píng)估用戶感知的好壞程度，并對(duì)評(píng)估出感知差的用戶、站點(diǎn)/ 小區(qū)、 SP進(jìn)行全程全網(wǎng)端到端的分析優(yōu)化，從而提升用戶的上網(wǎng)感知，即讓用戶上網(wǎng)時(shí)獲得“上得去，不中斷，速率快”的良好體驗(yàn)。2016 年 4G網(wǎng)絡(luò)客戶業(yè)務(wù)QOE評(píng)價(jià)算法變化情況描述：本次主要根據(jù)瀏覽、視頻、應(yīng)用下載和即時(shí)通信業(yè)務(wù)實(shí)際特性，主要基于各

3、類業(yè)務(wù)QOS要求特性，例如：交互類時(shí)延要求低、會(huì)話類時(shí)延要求高、視頻類速率碼率和清晰度速率差異要求。針對(duì)接入性能、 完整性能和保持性能進(jìn)行門限重新定義，更加適合現(xiàn)有客戶滿意度需求，通過無線、核心網(wǎng)絡(luò)和業(yè)務(wù)層面優(yōu)化，達(dá)到進(jìn)一步提升客戶滿意度和業(yè)務(wù)感知的目的。（ 1）瀏覽業(yè)務(wù)小包時(shí)延和大包感知權(quán)重進(jìn)行優(yōu)化，根據(jù)小包流量和大包流量、小包次數(shù)和大包次數(shù)比例和流量貢獻(xiàn)情況，適當(dāng)增加大包速率感知權(quán)重，由前期小包：大包=65%： 35%優(yōu)化為小包：大包 =20%： 80%；（ 2）視頻業(yè)務(wù)四大APP（樂視、優(yōu)酷、愛奇藝、騰訊）進(jìn)行標(biāo)清、高清、超清、1080P 測(cè)試驗(yàn)證，15 年以標(biāo)清視頻為基準(zhǔn)進(jìn)行視頻感知制

4、定，由于客戶使用高清視頻比例達(dá)到65%左右，因此2016 年以高清視頻感知需求為基準(zhǔn)，制定了貼近業(yè)務(wù)需求的速率感知門限，更加準(zhǔn)確的評(píng)價(jià)視頻客戶使用業(yè)務(wù)感知高低。（ 3）應(yīng)用下載大流量業(yè)務(wù)速率感知提升，為了進(jìn)一步保障和提升4G 存量客戶感知，適當(dāng)提升大包數(shù)據(jù)感知門限，例如8M應(yīng)用下載業(yè)務(wù)優(yōu)秀門限由S 提升為 4Mbit/S 。1.2考核目標(biāo)：4G業(yè)務(wù) QOE以 1 月 QOE百分制得分為基準(zhǔn)，各地市每個(gè)月目標(biāo)為在一月份基礎(chǔ)上，百分制得分增加 1%為達(dá)到考核目標(biāo)（舉例： 2 月份為在 1 月份基礎(chǔ)上增加 1%，三月份基礎(chǔ)上增加 2%，以此類推，如果改月 QOE得分增加比例達(dá)到 1 月基礎(chǔ)的百分比例

5、，即為考核達(dá)標(biāo)）；如果按照一月份基礎(chǔ)上，某月增加的百分制數(shù)值達(dá)到90 分，默認(rèn)為達(dá)到考核目標(biāo)）2 4G 客戶業(yè)務(wù)體驗(yàn) QoE實(shí)施背景傳統(tǒng)的KPI 只能集中反映網(wǎng)絡(luò)設(shè)備的性能（控制面），很多時(shí)候存在KPI 很好但業(yè)務(wù)質(zhì)量不佳的情況。而 KQI 聚焦用戶面和控制面，更能貼近用戶的業(yè)務(wù)質(zhì)量和用戶體驗(yàn)，而 QoE則是由各類業(yè)務(wù) （如瀏覽類、 視頻類、 下載類等） 的主要 KQI 構(gòu)建而成， 即相對(duì)傳統(tǒng)的KPI 更能貼近用戶的真實(shí)上網(wǎng)感知。即 KPI 主要評(píng)估的是網(wǎng)絡(luò)管道的質(zhì)量，而QoE/KQI 則是評(píng)估網(wǎng)絡(luò)管道內(nèi)的業(yè)務(wù)質(zhì)量。如網(wǎng)頁瀏覽的 KQI 模型：用戶上網(wǎng)的主要信令流程：3 QoE體系建立思路描述

6、一套體系：本次的QoE（用戶的體驗(yàn)質(zhì)量，Qualityof Experience ， QoE）主要針對(duì)瀏覽類業(yè)務(wù)、視頻業(yè)務(wù)、應(yīng)用下載業(yè)務(wù)、即時(shí)通信業(yè)務(wù)進(jìn)行基于上網(wǎng)業(yè)務(wù)全流程 KQI（關(guān)鍵質(zhì)量指標(biāo)）感知評(píng)估。QoE體系的建立思路主要為： 各類業(yè)務(wù)接入、 完整、 保持性能的 KQI 指標(biāo)選取及定義、 各類業(yè)務(wù)的 KQI 指標(biāo)門限及權(quán)重的選擇、 QoE體系的計(jì)算。兩級(jí)定界：在QOE模型建立中，全面引入表征QI（業(yè)務(wù)指標(biāo)），基于 IUPS 接口進(jìn)行KQI 質(zhì)量問題分析，一級(jí)問題定位界：針對(duì)網(wǎng)絡(luò)、客戶、終端和SP等維度 QOE評(píng)價(jià)差的網(wǎng)元、客戶、終端和SP進(jìn)行 S1 接口以上和以下質(zhì)量問題定位，S1 接

7、口以上問題表征QI 為：上行 SYN時(shí)延、上行RTT時(shí)延、上行重置率； S2 接口以下問題表征QI 為：下行重傳率、下行RTT時(shí)延、下行重置率和單位流量切換次數(shù)，鑒權(quán)失敗S6A 接口指標(biāo)關(guān)聯(lián)，短信、語音被叫感知SGS接口指標(biāo)關(guān)聯(lián), ；二級(jí)問題定界：S1 接口ATTACH、 PDN、默認(rèn)承載建立、承載修改和業(yè)務(wù)請(qǐng)求失敗CAUSE關(guān)聯(lián)細(xì)分，結(jié)合設(shè)備KPI 進(jìn)行感知具體影響因素分析，業(yè)務(wù)質(zhì)量側(cè)SP失敗代碼關(guān)聯(lián)分析確定服務(wù)器側(cè)具體問題，無線側(cè)基于網(wǎng)絡(luò)接入KPI（關(guān)鍵性能指標(biāo)）保持KPI 和完整性能KPI，關(guān)聯(lián)無線側(cè)容量、編碼配置、功能參數(shù)、無線質(zhì)量和移動(dòng)性能相關(guān)表征PI （性能指標(biāo)）進(jìn)行具體問題核查和

8、優(yōu)化。三個(gè)層面：基于端、管、云優(yōu)化思路，在QOE模型基礎(chǔ)之上，業(yè)務(wù)維度與端（VIP 客戶維度，熱門終端維度）管（網(wǎng)絡(luò)、小區(qū)、ENODEB、 MME、 SGW、 PGW、 APN維度、 3GNET路由維度、 SP落地維度）云（熱門業(yè)務(wù)SP 維度、服務(wù)器參數(shù)設(shè)置維度、分布式服務(wù)器落地性能分析）。進(jìn)行 QOE評(píng)價(jià)和QI 關(guān)聯(lián)輸出 QOE感知差客戶和終端、小區(qū)和設(shè)備、業(yè)務(wù)和服務(wù)器，進(jìn)一步進(jìn)行各專業(yè)協(xié)作分析和優(yōu)化。備注：在有資源條件下，基于各類業(yè)務(wù)主流終端主流業(yè)務(wù)測(cè)試QOE感知常態(tài)工作，在后期體現(xiàn)，力求做到全網(wǎng)評(píng)估QOE與測(cè)試 QOE基本吻合。3.1QOE百分制算法介紹4G 客戶 QOE百分制按照四類業(yè)

9、務(wù)感知評(píng)價(jià)分值進(jìn)行聚合計(jì)算，計(jì)算地市維度、 小區(qū)維度、 終端維度和 SP 維度 QOE得分，瀏覽業(yè)務(wù)、視頻業(yè)務(wù)、應(yīng)用下載和即時(shí)通信四類業(yè)務(wù)權(quán)重占比為：瀏覽業(yè)務(wù)30%、視頻業(yè)務(wù)30%、應(yīng)用下載30%和即時(shí)通信10%。QOE得分 =瀏覽業(yè)務(wù)QOE得分 *30%+視頻業(yè)務(wù)QOE得分 *30%+應(yīng)用下載QOE得分 *30%+即時(shí)通信QOE得分 *10%。3.2瀏覽類業(yè)務(wù) QoE模型構(gòu)建瀏覽業(yè)務(wù) QOE感知評(píng)價(jià)模型介紹基于S1/SGS/S6A 接口平臺(tái)的數(shù)據(jù)業(yè)務(wù)感知評(píng)估方法解決傳統(tǒng)無線指標(biāo)單純面向設(shè)備、無用戶面指標(biāo)和指標(biāo)對(duì)用戶感知不敏感等問題，將用戶主觀層面的感知轉(zhuǎn)化成可量化移的動(dòng)互聯(lián)網(wǎng)業(yè)務(wù)各階段信令流

10、程指標(biāo)性能進(jìn)行評(píng)估，主要信令指標(biāo)按照一般上網(wǎng)流程劃分三類，包括業(yè)務(wù)接入KQI 指標(biāo)（ ATTACH、PDP、DNS、 SYN、GET）業(yè)務(wù)完整性能 KQI 指標(biāo)（ GET和 POST感知速率和時(shí)延）和保持性能KQI 指標(biāo)（ TCP重傳率、 TCP重置率和IU-RELEASE掉線率），上述三類指標(biāo)量化后系數(shù)加權(quán)值作為數(shù)據(jù)業(yè)務(wù)上網(wǎng)感知性能（QOE）的最終數(shù)值。表 1：瀏覽業(yè)務(wù) QOE評(píng)估體系考核 KQI 子項(xiàng)權(quán)重和感知門限KQI 子項(xiàng)KQI 子項(xiàng)權(quán)重接入性 KQI30%完整性 KQI50%保持性 KQI20%QI門限QI 權(quán)重優(yōu)秀良好正常差E-RAB建立成功%99%93%90%-93%88%-93

11、%98%97%-98%95%-97%99%99%99%97%96%-97%94%-96%99%92%90%-92%85%-90%95%93%-95%90%-93%95%93%-95%90%-93%90%10%（ %）100K 數(shù)據(jù)包時(shí)38020%延（小包）200K 速率22001800-22001500-180030002500-30001500-250040003500-40002500-350040003500-40002500-3500 40003500-40002500-350040003500-40002500-35002048K 速率60005000-60003000-500030

12、00隨即計(jì)算TCP下行重置率%TCP下行重傳率%UE異常掉線率5%瀏覽業(yè)務(wù) QOE數(shù)學(xué)模型介紹瀏覽業(yè)務(wù)QOE計(jì)算模型中QOEb、和 QOEc 分別是指業(yè)務(wù)接入性能子項(xiàng)QOE值、業(yè)務(wù)完整性能子項(xiàng) QOE值和業(yè)務(wù)保持性能子項(xiàng)QOE值，其中：=X* 業(yè)務(wù)保持性KQI 值、=Y*業(yè)務(wù)完整性KQI值、= Z* 業(yè)務(wù)接入性KQI 值， X、 Y、 Z 值為各子項(xiàng)業(yè)務(wù)KQI 值系數(shù)權(quán)重因子，X+Y+Z=1。瀏覽業(yè)務(wù) QOE和 KQI 等級(jí)劃分根據(jù)前期客戶投訴在接入、完整和保持方面權(quán)重以及業(yè)務(wù)感知實(shí)際需求，定義X=30%， Y=50%，Z=20%。（ 1）瀏覽業(yè)務(wù) QOE感知等級(jí)門限： 優(yōu)秀值門限為 90 分

13、，良好值門限為80 分，差值門限為70 分；（ 2）瀏覽業(yè)務(wù) QOE由接入 KQI、完整 KQI 和保持 KQI 構(gòu)成，權(quán)重為：30%、50%、 20%；（ 3）接入 KQI、完整 KQI 和保持 KQI 感知等級(jí)門限如下。接入 KQI 感知門限：優(yōu)秀值門限為90 分，良好值門限為80 分，差值門限為70 分；完整 KQI 感知門限：優(yōu)秀值門限為90 分，良好值門限為80 分，差值門限為70 分；保持 KQI 感知門限：優(yōu)秀值門限為90 分，良好值門限為80 分，差值門限為70 分。KQI 感知門限劃分原則：定義KQI 得分小于差值門限為“感知差”等級(jí)，KQI 得分大于差值小于良好值定義為“達(dá)

14、標(biāo)”等級(jí)，KQI 得分大于良好值門限小于優(yōu)秀值門限定義為感知“良好”等級(jí)，KQI得分大于優(yōu)秀值門限定義為感知“優(yōu)秀”等級(jí)。瀏覽業(yè)務(wù) KQI 計(jì)算模型描述（ 1）接入性能 KQI 評(píng)估簡(jiǎn)介如下表所示，通過S1 接口平臺(tái)統(tǒng)計(jì)對(duì)應(yīng)維度（本次統(tǒng)計(jì)為全網(wǎng)區(qū)域和小區(qū)級(jí)別）子項(xiàng)KQI 指標(biāo)值，在制定KQI 對(duì)應(yīng)業(yè)務(wù)流量子項(xiàng)KQI 感知門限后，根據(jù)QOE計(jì)算模型計(jì)算公式對(duì)業(yè)務(wù)感知進(jìn)行評(píng)估打分（百分制） ，各子項(xiàng)KQI 權(quán)重加權(quán)獲得接入性能KQI 感知得分，輸出接入性能KQI 感知等級(jí)。業(yè)務(wù)接入性KQI值=+。其中 : ERAB 建立成功率、尋呼成功率、 TAU成功率、 ATTACH成功率、 PDN成功率、默認(rèn)

15、承載建立成功率、業(yè)務(wù)請(qǐng)求成功率、承載修改成功率、 SYN連接成功率、 DNS成功率和GET成功率作為各自單項(xiàng)KQI 量化值，表達(dá)式如下：R1+R2+R3+R4+R5+R6+ + R11=1(R1,R2,R3. 為 ATTCH業(yè)務(wù) PDNDNS 等 KQI 的權(quán)重因子 ) 。本次加大ERAB、 ATTACH成功率、默認(rèn)承載建立成功率和GET功率權(quán)重（ RAB無無線側(cè)表征、GET為 SP側(cè)）， 11 類接入事件權(quán)重分別為： 10%,5%,10%,10%,10%,10%,10%,10%,10%,5%,10%。（ 2）完整性能 KQI 評(píng)估簡(jiǎn)介瀏覽業(yè)務(wù)完整性KQI 評(píng)估計(jì)算：主要評(píng)估用戶在進(jìn)行數(shù)據(jù)業(yè)務(wù)

16、過程中業(yè)務(wù)感知好壞情況，用戶數(shù)據(jù)業(yè)務(wù)真實(shí)感知性能情況，從用戶真實(shí)感知及業(yè)務(wù)性能感知參數(shù)本質(zhì)出發(fā)，依據(jù)小包時(shí)延和大包速率制定的感知門限，由于實(shí)際網(wǎng)絡(luò)各區(qū)間包時(shí)延和速率與滿足感知差別較大，部分門限進(jìn)行調(diào)整。瀏覽業(yè)務(wù)QOE完整性KQI值=+。評(píng)估各包大小業(yè)務(wù)時(shí)延感知性能門限指標(biāo)值如下：以下小包時(shí)延門限根據(jù)前期感限速測(cè)試獲得，門限研究部分闡述小包校正后良好感知速率為400KBIT./S ，換算時(shí)延為1 秒。大包業(yè)務(wù)速率門限根據(jù)業(yè)務(wù)時(shí)延QOS計(jì)算獲得。表 2 完整性能 KQI 時(shí)延感知門限速率轉(zhuǎn)換表包區(qū)間優(yōu)秀 I良好門限 Q達(dá)標(biāo)門限 TI 門限換算時(shí)3GPP換算速率延（ S）小包完成時(shí)延 (MS)330

17、350380（校正）400200K速率300K速率2500K速率2800K速率31024K 速率32048K 速率32048K速率3其中 : Q值對(duì)應(yīng) 8 個(gè)區(qū)間速率感知得分，為瀏覽業(yè)務(wù)想數(shù)據(jù)流大小區(qū)間對(duì)應(yīng)的感知得分值。W 為8 個(gè)區(qū)間權(quán)重因子。W1+W2+W3+W4+W5+W6.+W8=1(W1,W2,W3。為不同業(yè)務(wù)包區(qū)間權(quán)重因子) 。瀏覽業(yè)務(wù)小包和大包業(yè)務(wù)權(quán)重計(jì)算表：根據(jù)流量和業(yè)務(wù)次數(shù)40%:60%比例計(jì)算獲得。包區(qū)間次數(shù)600KB次數(shù)占比%流量占比%業(yè)務(wù)權(quán)重%（ W1-W8）W1W2W3W4W5W6W7W8（ 3）保持性能 KQI 評(píng)估簡(jiǎn)介保持性能 KQI 門限和權(quán)重： 保持性能 KQ

18、I 主要以 TCP重傳率、 TCP重置率和 IU-RELEASE釋放率，作為表征 KQI 來衡量， KQI 分項(xiàng)權(quán)重為 40%、 30%、 30%。 優(yōu)秀值、良好值和差值門限感知如下：用戶業(yè)務(wù)保持性能評(píng)估，主要評(píng)估用戶在進(jìn)行數(shù)據(jù)業(yè)務(wù)過程中信令流程完整及業(yè)務(wù)可靠感知情況，用戶是否有正常數(shù)據(jù)業(yè)務(wù)行為及其成功率感知情況，其中主要體現(xiàn)為業(yè)務(wù)過程中斷率（率）和 TCP包重傳率丟包等情況，對(duì)統(tǒng)計(jì)指標(biāo)按照各業(yè)務(wù)流程加權(quán)平均值作為業(yè)務(wù)完整性能感知指標(biāo)。定義瀏覽業(yè)務(wù)保持性KQI 值=TCP 重置 KQI 綜合，K1+K2+K3=1(K1重傳率權(quán)重40%,K2 重置率權(quán)重30%,K3 為 IU-RELEASE掉線

19、率權(quán)重30%)。3.3視頻類業(yè)務(wù) QoE模型構(gòu)建視頻業(yè)務(wù) QOE感知評(píng)價(jià)模型介紹基于IUPS 平臺(tái)的數(shù)據(jù)業(yè)務(wù)感知評(píng)估方法解決傳統(tǒng)無線指標(biāo)單純面向設(shè)備、無用戶面指標(biāo)和指標(biāo)對(duì)用戶感知不敏感等問題，將用戶主觀層面的感知轉(zhuǎn)化成可量化移的動(dòng)互聯(lián)網(wǎng)業(yè)務(wù)各階段信令流程指標(biāo)性能進(jìn)行評(píng)估， 主要信令指標(biāo)按照一般上網(wǎng)流程劃分三類，包括業(yè)務(wù)接入 KQI 指標(biāo)（ ERAB建立成功率、尋呼成功率、 TAU成功率、 ATTACH成功率、 PDN成功率、默認(rèn)承載建立成功率、業(yè)務(wù)請(qǐng)求成功率、承載修改成功率、SYN連接成功率、 DNS成功率和 GET成功率）業(yè)務(wù)完整性能KQI 指標(biāo)（ GET和 POST感知速率和時(shí)延）和保持性

20、能KQI 指標(biāo)（ TCP重傳率、 TCP重置率），上述三類指標(biāo)量化后系數(shù)加權(quán)值作為數(shù)據(jù)業(yè)務(wù)上網(wǎng)感知性能（QOE）的最終數(shù)值。表 3：視頻業(yè)務(wù) QOE評(píng)估體系考核 KQI 子項(xiàng)權(quán)重和感知門限KQI 子項(xiàng)KQI 子項(xiàng)權(quán)重QI門限QI 權(quán)重優(yōu)秀良好正常差E-RAB建立成功%99%93%90%-93%88%-93%98%97%-98%95%-97%99%99%99%97%96%-97%94%-96%99%92%90%-92%85%-90%95%93%-95%90%-93%96%94%-96%90%-94%90%10%（ %）100K 數(shù)據(jù)包時(shí)3800%延（小包）200K 速率30002200-3000

21、 1200-2200 30002200-3000 1600-2200 35002500-3500 1800-2500 40002500-40001800-250040002500-4000 1800-2500 26002000-2600 1800-2000 16384K速率30002500-30001600-25001600隨即計(jì)算TCP下行重置率3%TCP下行重傳率%UE異常掉線率4%視頻業(yè)務(wù) QOE數(shù)學(xué)模型介紹結(jié)合主流視頻的播放原理、信令流程、業(yè)務(wù)特征、播放卡頓現(xiàn)象、播放下載速率等，基于IUPS口信令對(duì)視頻播放KQI 建模如圖6 所示。圖 6視頻感知KQI 建模視頻業(yè)務(wù)QOE數(shù)學(xué) 公式如下

22、：QOEa、和 QOEc 分別是指業(yè)務(wù)接入性能子項(xiàng)QOE值、業(yè)務(wù)完整性能子項(xiàng)QOE值和業(yè)務(wù)保持性能子項(xiàng) QOE值，其中：=X* 業(yè)務(wù)保持性KQI 值、=Y*業(yè)務(wù)完整性KQI 值、= Z*業(yè)務(wù)接入性KQI 值， X、 Y、Z 值為各子項(xiàng)業(yè)務(wù)KQI 值系數(shù)權(quán)重因子，X+Y+Z=1。根據(jù)前期客戶投訴在接入、完整和保持方面權(quán)重以及業(yè)務(wù)感知實(shí)際需求，定義 X=30%,Y=50%,Z=20%。視頻業(yè)務(wù) QOE和 KQI 等級(jí)劃分（ 1）視頻業(yè)務(wù) QOE感知等級(jí)門限： 優(yōu)秀值門限為 90 分，良好值門限為80 分，差值門限為70 分；（ 2）視頻業(yè)務(wù) QOE由接入 KQI、完整 KQI 和保持 KQI 構(gòu)成

23、，權(quán)重為：30%、50%、 20%；（ 3）接入 KQI、完整 KQI 和保持 KQI 感知等級(jí)門限如下：接入 KQI 感知門限：優(yōu)秀值門限為90 分，良好值門限為80 分，差值門限為70 分；完整 KQI 感知門限：優(yōu)秀值門限為90 分，良好值門限為80 分，差值門限為70 分；保持 KQI 感知門限：優(yōu)秀值門限為90 分，良好值門限為80 分，差值門限為70 分。KQI 感知門限劃分原則：定義 KQI 得分小于差值門限為“感知差”等級(jí)，KQI 得分大于差值小于良好值定義為“達(dá)標(biāo)”等級(jí)，KQI 得分大于良好值門限小于優(yōu)秀值門限定義為感知“良好”等級(jí)，KQI得分大于優(yōu)秀值門限定義為感知“優(yōu)秀”

24、等級(jí)。視頻業(yè)務(wù) KQI 計(jì)算模型描述（ 1）接入性能KQI 評(píng)估由于三類感知KQI 分別由多項(xiàng)業(yè)務(wù)事件表征KQI 組合構(gòu)成，因此，需要針對(duì)每項(xiàng)KQI 具體信令統(tǒng)計(jì)指標(biāo)值進(jìn)行感知高低研究，對(duì)投訴客戶聚合小區(qū)分析，定義KQI 衡量差值，根據(jù)感知研究經(jīng)驗(yàn)和其他運(yùn)營商平均指標(biāo)，不同業(yè)務(wù)根據(jù)小包時(shí)延和大業(yè)務(wù)速率結(jié)合用戶體驗(yàn)回訪結(jié)果制定感知門限。業(yè)務(wù)接入性KQI值=+。其中 : ERAB 建立成功率、尋呼成功率、 TAU成功率、 ATTACH成功率、 PDN成功率、默認(rèn)承載建立成功率、業(yè)務(wù)請(qǐng)求成功率、承載修改成功率、 SYN連接成功率、 DNS成功率和GET成功率作為各自單項(xiàng)KQI 量化值；表達(dá)式如下：R

25、1+R2+R3+R4+R5+R6+ + R11=1(R1,R2,R3. 為 ATTCH業(yè)務(wù) PDPDNS 等 KQI 的權(quán)重因子 ) 。本次加大ERAB、 ATTACH成功率、默認(rèn)承載建立成功率和GET功率權(quán)重（ RAB無無線側(cè)表征、GET為 SP側(cè)）， 11 類接入事件權(quán)重分別為： 10%,5%,10%,10%,10%,10%,10%,10%,10%,5%,10%。接入性能計(jì)算 ：如下表所示，通過 S1 接口平臺(tái)統(tǒng)計(jì)對(duì)應(yīng)維度（本次統(tǒng)計(jì)為全網(wǎng)區(qū)域和小區(qū)級(jí)別）子項(xiàng) KQI 指標(biāo)值，在制定KQI 對(duì)應(yīng)業(yè)務(wù)流量子項(xiàng)KQI 感知門限后，根據(jù)QOE計(jì)算模型計(jì)算公式對(duì)業(yè)務(wù)感知進(jìn)行評(píng)估打分（百分制），各子項(xiàng)

26、KQI 權(quán)重加權(quán)獲得接入性能KQI 感知得分，依據(jù)根據(jù)客戶投訴和業(yè)務(wù)實(shí)際感知（小包時(shí)延、大業(yè)務(wù)速率）制定的感知門限，輸出接入性能KQI 感知等級(jí)。（ 2）完整性能 KQI 評(píng)估視頻完整性能感知門限和權(quán)重定義：主要以各類業(yè)務(wù)客戶感知為主要評(píng)價(jià)標(biāo)注，不同業(yè)務(wù)，客戶感知指標(biāo)評(píng)價(jià)有所不同，視頻業(yè)務(wù)完整性能感知評(píng)估，結(jié)合數(shù)據(jù)傳送慢啟動(dòng)原因，按照業(yè)務(wù)請(qǐng)求數(shù)據(jù)以小包時(shí)延和大包速率進(jìn)行感知門限制定和評(píng)估，小包以業(yè)務(wù)感知時(shí)延為衡量標(biāo)準(zhǔn)，定義感知時(shí)延16834KB速率300025001600表 4 完整性能 KQI 時(shí)延感知門限速率轉(zhuǎn)換表視頻業(yè)務(wù)完整性KQI 評(píng)估計(jì)算 : 主要評(píng)估用戶在進(jìn)行數(shù)據(jù)業(yè)務(wù)過程中業(yè)務(wù)感知

27、好壞情況，用戶數(shù)據(jù)業(yè)務(wù)真實(shí)感知性能情況，從用戶真實(shí)感知及業(yè)務(wù)性能感知參數(shù)本質(zhì)出發(fā)，業(yè)務(wù)時(shí)延為用戶真實(shí)感知重要因素，對(duì)統(tǒng)計(jì)指標(biāo)按照每次業(yè)務(wù)不同包大小區(qū)間進(jìn)行組合運(yùn)算，結(jié)合不同業(yè)務(wù)感知門限值進(jìn)行業(yè)務(wù)保持性KQI 值評(píng)估。完整性能KQI=小包時(shí)延得分*20%+大包速率感知得分*80%(權(quán)重根據(jù)業(yè)務(wù)次數(shù)和流量加權(quán)獲得) 。小包權(quán)重20%，大包權(quán)重80%由小包（50KB），根據(jù)流量和業(yè)務(wù)次數(shù)60%:40%比例計(jì)算獲得。大包速率感知完整性KQI值=+其中 : Q 值對(duì)應(yīng) 8 個(gè)區(qū)間，為視頻業(yè)務(wù)想數(shù)據(jù)流大小區(qū)間對(duì)應(yīng)的得分值。W1+W2+W3+W4+W5+W6.+W8=1(W1,W2,W3。為不同業(yè)務(wù)包區(qū)間權(quán)

28、重因子) ，根據(jù)流量和業(yè)務(wù)次數(shù) 60%:40%比例計(jì)算獲得。備注：小區(qū)級(jí)別完整性能計(jì)算模型中，小包和大包占比為差異計(jì)算獲得。（ 3）保持性能 KQI 評(píng)估保持性能KQI 門限和權(quán)重：保持性能KQI 主要以 TCP重傳率和TCP重置率，作為表征KQI 來衡量，KQI 分項(xiàng)權(quán)重為50%和 50%。優(yōu)秀值、良好值和差值門限感知如下：用戶業(yè)務(wù)保持性能評(píng)估，主要評(píng)估用戶在進(jìn)行數(shù)據(jù)業(yè)務(wù)過程中信令流程完整及業(yè)務(wù)可靠感知情況，用戶是否有正常數(shù)據(jù)業(yè)務(wù)行為及其成功率感知情況，其中主要體現(xiàn)為業(yè)務(wù)過程中斷率（TCP 重置率）和 TCP包重傳率丟包等情況，對(duì)統(tǒng)計(jì)指標(biāo)按照各業(yè)務(wù)流程加權(quán)平均值作為業(yè)務(wù)完整性能KQI 綜合感

29、知指標(biāo)。定義視頻業(yè)務(wù)保持性KQI 值 =， K1+K2=1(K1 重傳率權(quán)重為50%,K2 重置率權(quán)重為50%)。視頻業(yè)務(wù)播放“卡頓”問題研究為了能從信令上找出移動(dòng)視頻播放“卡頓”的特征，通過在無線信號(hào)質(zhì)量差的環(huán)境（ RSCP-105dbm,Ec/Io-80dbm,Ec/Io-6dB ），從大量的測(cè)試分析得知： 下載速率大于1300kbps 時(shí)，觀看視頻流暢， 偶爾有卡頓問題， 而速率低于1300kbps時(shí)，均出現(xiàn)不同程度的卡頓和初始緩沖嚴(yán)重現(xiàn)象。因此初步確定搜狐視頻點(diǎn)播基準(zhǔn)速率為1300kbps左右，低于該基準(zhǔn)速率時(shí)用戶感知相對(duì)較差，如表1 所示。表 7 主流 APP標(biāo)清視頻點(diǎn)播基準(zhǔn)速率與卡

30、頓門限關(guān)系表 8 主流 APP高清視頻點(diǎn)播基準(zhǔn)速率與卡頓門限關(guān)系表 9 主流 APP超清視頻點(diǎn)播基準(zhǔn)速率與卡頓門限關(guān)系備注：以上只針對(duì)普通標(biāo)清移動(dòng)搜狐視頻業(yè)務(wù)進(jìn)行分析，未考慮終端性能影響，樂視超清視頻基準(zhǔn)速率約為 3300kbps 左右。本次區(qū)分碼流類型，以視頻APP類超清視頻為基準(zhǔn)。3.4應(yīng)用下載類業(yè)務(wù)QoE模型構(gòu)建應(yīng)用下載 QOE感知評(píng)價(jià)模型介紹應(yīng)用下載業(yè)務(wù)QOE總體評(píng)估方法和視頻業(yè)務(wù)類似，基于IUPS 平臺(tái)的數(shù)據(jù)業(yè)務(wù)感知評(píng)估方法解決傳統(tǒng)無線指標(biāo)單純面向設(shè)備、無用戶面指標(biāo)和指標(biāo)對(duì)用戶感知不敏感等問題，將用戶主觀層面的感知轉(zhuǎn)化成可量化移的動(dòng)互聯(lián)網(wǎng)業(yè)務(wù)各階段信令流程指標(biāo)性能進(jìn)行評(píng)估，主要信令指

31、標(biāo)按照一般上網(wǎng)流程劃分三類，包括業(yè)務(wù)接入KQI 指標(biāo)（ ATTACH、 PDP、 DNS、 SYN、 GET）業(yè)務(wù)完整性能KQI 指標(biāo)（ GET和POST感知速率和時(shí)延）和保持性能KQI 指標(biāo)（ TCP重傳率、 TCP重置率），上述三類指標(biāo)量化后系數(shù)加權(quán)值作為數(shù)據(jù)業(yè)務(wù)上網(wǎng)感知性能（QOE）的最終數(shù)值。表 4：應(yīng)用下載業(yè)務(wù)QOE評(píng)估體系考核KQI 子項(xiàng)權(quán)重和感知門限KQI 子項(xiàng)KQI 子門限QI 權(quán)重QI項(xiàng)權(quán)重優(yōu)秀良好正常差E-RAB建立成功率 (%)%99%93%90%-93%88%-93%98%97%-98%95%-97%99%99%99%97%96%-97%94%-96%99%98%95%

32、-98%90%-95%97%95%-97%90%-95%99%95%-99%90%-95%90%10%100K 數(shù)據(jù)包時(shí)延（小3800%包）200K 速率30002000-30001000-200030002000-30001000-200040003000-40002000-300050004000-50003000-400050004000-50003000-400060005000-60004000-500016384K速率120009000-120006000-90006000隨即計(jì)算TCP下行重置率3%保持性20%KQITCP下行重傳率%UE異常掉線率4%應(yīng)用下載 QOE數(shù)學(xué)模型介紹

33、應(yīng)用下載QOE計(jì)算公式如下：QOEa、和 QOEc 分別是指業(yè)務(wù)接入性能子項(xiàng)QOE值、業(yè)務(wù)完整性能子項(xiàng)QOE值和業(yè)務(wù)保持性能子項(xiàng) QOE值，其中：=X* 業(yè)務(wù)保持性KQI 值、=Y*業(yè)務(wù)完整性KQI 值、= Z*業(yè)務(wù)接入性KQI 值， X、Y、Z 值為各子項(xiàng)業(yè)務(wù)KQI 值系數(shù)權(quán)重因子，X+Y+Z=1。根據(jù)前期客戶投訴在接入、完整和保持方面權(quán)重以及業(yè)務(wù)感知實(shí)際需求，定義X=30%,Y=50%,Z=20%。應(yīng)用下載 QOE和 KQI 等級(jí)劃分（ 1）應(yīng)用下載業(yè)務(wù)QOE感知等級(jí)門限：優(yōu)秀值門限為90 分，良好值門限為80 分，差值門限為70 分；（ 2）應(yīng)用下載業(yè)務(wù)QOE由接入 KQI、完整 KQI

34、 和保持 KQI 構(gòu)成，權(quán)重為：30%、 50%、 20%；（ 3）接入 KQI、完整 KQI 和保持 KQI 感知等級(jí)門限如下：接入 KQI 感知門限：優(yōu)秀值門限為90 分，良好值門限為80 分，差值門限為70 分；完整 KQI 感知門限：優(yōu)秀值門限為90 分，良好值門限為80 分，差值門限為70 分；保持 KQI 感知門限：優(yōu)秀值門限為90 分，良好值門限為80 分，差值門限為70 分。KQI 感知門限劃分原則：定義KQI 得分小于差值門限為“感知差”等級(jí)，KQI 得分大于差值小于良好值定義為“達(dá)標(biāo)”等級(jí)，KQI 得分大于良好值門限小于優(yōu)秀值門限定義為感知“良好”等級(jí)，KQI得分大于優(yōu)秀值

35、門限定義為感知“優(yōu)秀”等級(jí)。應(yīng)用下載 KQI 計(jì)算模型描述（ 1）接入性能 KQI 評(píng)估通過 S1 接口平臺(tái)統(tǒng)計(jì)對(duì)應(yīng)維度（本次統(tǒng)計(jì)為全網(wǎng)區(qū)域和小區(qū)級(jí)別）子項(xiàng) KQI 指標(biāo)值， 在制定 KQI對(duì)應(yīng)業(yè)務(wù)流量子項(xiàng)KQI 感知門限后，根據(jù)QOE計(jì)算模型計(jì)算公式對(duì)業(yè)務(wù)感知進(jìn)行評(píng)估打分（百分制），各子項(xiàng)KQI 權(quán)重加權(quán)獲得接入性能KQI 感知得分，輸出接入性能KQI 感知等級(jí)。業(yè)務(wù)接入性KQI值=+。其中 : ERAB 建立成功率、尋呼成功率、 TAU成功率、 ATTACH成功率、 PDN成功率、默認(rèn)承載建立成功率、業(yè)務(wù)請(qǐng)求成功率、承載修改成功率、 SYN連接成功率、 DNS成功率和GET成功率作為各自單

36、項(xiàng)KQI 量化值；R1+R2+R3+R4+R5+R6+ + R11=1(R1,R2,R3. 為 ATTCH業(yè)務(wù) PDPDNS 等 KQI 的權(quán)重因子 ) 。本次加大ERAB、 ATTACH成功率、默認(rèn)承載建立成功率和GET功率權(quán)重（ RAB無無線側(cè)表征、GET為 SP側(cè)）， 11 類接入事件權(quán)重分別為： 10%,5%,10%,10%,10%,10%,10%,10%,10%,5%,10%。接入性能計(jì)算 ：如下表所示，通過 S1 接口平臺(tái)統(tǒng)計(jì)對(duì)應(yīng)維度（本次統(tǒng)計(jì)為全網(wǎng)區(qū)域和小區(qū)級(jí)別）子項(xiàng) KQI 指標(biāo)值，在制定KQI 對(duì)應(yīng)業(yè)務(wù)流量子項(xiàng)KQI 感知門限后，根據(jù)QOE計(jì)算模型計(jì)算公式對(duì)業(yè)務(wù)感知進(jìn)行評(píng)估打分（百分制），各子項(xiàng)KQI權(quán)重加權(quán)獲得接入性能KQI感知得分，依據(jù)根據(jù)客戶投訴和業(yè)務(wù)實(shí)際感