質量提升大會戰(zhàn)操作手冊（手機郵箱企業(yè)版）

1、數據業(yè)務產品質量提升大會戰(zhàn)操作手冊手機郵箱業(yè)務分冊1. 總則1.1 產品質量評測目標為提升手機郵箱產品質量，全面提高移動客戶對于數據業(yè)務的使用體驗，提高產品競爭力，特進行質量評測1.2 產品質量評測方法評測方法采取業(yè)務撥測、用戶調研及業(yè)務平臺查詢的方法。業(yè)務測試時需在現有集團客戶賬戶內部增加測試賬號。1.3 測試樣本量要求1.要求覆蓋以下6類數據業(yè)務熱點區(qū)域：寫字樓（除移動公司辦公樓、營業(yè)廳），大學/中學校園及周邊休閑場所，中高檔住宅小區(qū)，機場/地鐵/三星級以上酒店/度假村，會展中心/IT賣場/大型商業(yè)區(qū)和其他TD用戶投訴熱點區(qū)域。2.各省公司需先分析本省/地市的數據業(yè)務熱點區(qū)域，按覆蓋用戶情

2、況、用戶使用行為等進行分類，優(yōu)先測試覆蓋用戶多、用戶投訴多的熱點區(qū)域。3.要求使用2G和TD號段進行測試。2. 操作手冊2.1 可用性測試2.2.1 數據統(tǒng)計準確率指標定義BOSS訂購用戶數/業(yè)務平臺訂購數* 100% （BOSS訂購數含計費和未計費用戶數）指標來源BOSS、業(yè)務平臺測試記錄指業(yè)務平臺訂購數與BOSS訂購用戶數的一致性。數據統(tǒng)計準確率=BOSS訂購用戶數/業(yè)務平臺訂購數* 100%備注平臺訂購用戶數每月15日前通過郵件下發(fā)省產品經理。2.2.2 計費準確率指標定義集團客戶數/總開通集團客戶數指標來源BOSS測試記錄統(tǒng)計周期內，已開通集團客戶中的話單與其訂產品價格一致的集團客戶數

3、/總開通集團客戶數備注2.2.3 業(yè)務開通時長（s）指標定義功能開通時間指標來源BOSS測試記錄從BOSS受理到功能開通歷時時間（秒）（對于全網業(yè)務，從省BOSS提交訂單到收到BBOSS反饋的成功歸檔信息；對于本省業(yè)務，從業(yè)務提交訂單到功能開通的時間）備注2.2.4 訂單成功率指標定義業(yè)務成功受理的訂單數量/提交的總訂單數量*100%指標來源BOSS測試記錄業(yè)務成功受理的訂單數量/提交的總訂單數量*100%備注2.2.5 證書申請下載時長指標定義證書申請總時長指標來源BOSS測試記錄PushEmail 同CA 間的證書申請、制作、下載總時長備注2.2.6 郵件發(fā)送成功率指標定義發(fā)送成功次數/總

4、發(fā)送次數指標來源業(yè)務撥測測試環(huán)境所有技術指標都應在GSM和TD網絡環(huán)境下，并且保持網絡暢通預置條件測試步驟測試步驟：1、新建一封郵件，分別用手動輸入和選取地址薄的方式編輯收件人、抄送以及密送2、編輯郵件正文3、點擊發(fā)送4、在PC打開目標郵箱查看測試記錄用戶記錄數據：1） 發(fā)送成功次數2） 計算發(fā)送成功率=發(fā)送成功次數/總發(fā)送次數如測試中發(fā)生失敗，需在備注項記錄失敗提示信息，如無提示信息需詳細描述失敗現象備注2.2.7 郵件接收成功率指標定義接收成功次數/總接收次數指標來源業(yè)務撥測測試環(huán)境所有技術指標都應在GSM和TD網絡環(huán)境下，并且保持網絡暢通預置條件測試步驟1） 通過PC郵件客戶端軟件向終端

5、發(fā)送一封郵件；測試記錄用戶記錄數據：1） 接收郵件成功次數2） 計算接收成功率=接收成功次數/總接收次數如測試中發(fā)生失敗，需在備注項記錄失敗提示信息，如無提示信息需詳細描述失敗現象備注2.2.8 附件發(fā)送成功率指標定義發(fā)送成功次數/總發(fā)送次數指標來源業(yè)務撥測測試環(huán)境所有技術指標都應在GSM和TD網絡環(huán)境下，并且保持網絡暢通預置條件測試步驟測試步驟：1、新建一封郵件，分別用手動輸入和選取地址薄的方式編輯收件人、抄送以及密送，添加附件2、編輯郵件正文3、點擊發(fā)送4、在PC打開目標郵箱查看測試記錄用戶記錄數據：1） 發(fā)送成功次數2） 計算發(fā)送成功率=發(fā)送成功次數/總發(fā)送次數如測試中發(fā)生失敗，需在備注

6、項記錄失敗提示信息，如無提示信息需詳細描述失敗現象備注2.2.9 附件下載成功率指標定義下載成功次數/總下載次數指標來源業(yè)務撥測測試環(huán)境所有技術指標都應在GSM和TD網絡環(huán)境下，并且保持網絡暢通預置條件測試步驟1） 通過PC郵件客戶端軟件向終端發(fā)送一封帶附件的郵件；2） 通過終端客戶端下載該附件測試記錄用戶記錄數據：1） 下載附件成功次數2） 計算下載成功率=下載成功次數/總下載次數如測試中發(fā)生失敗，需在備注項記錄失敗提示信息，如無提示信息需詳細描述失敗現象備注2.2.10 郵件到達通知短信下發(fā)時延（s）指標定義短信下發(fā)時延指標來源業(yè)務撥測測試環(huán)境所有技術指標都應在GSM和TD網絡環(huán)境下，并且

7、保持網絡暢通預置條件1）手機上不要安裝PushEmail客戶端，如已安裝，先卸載在測試測試步驟1） 通過PC郵件客戶端軟件向終端發(fā)送一封帶附件的郵件；2） 通過終端看記錄收到亂碼短信的時延測試記錄用戶記錄數據：1） 計算短信下發(fā)時延如測試中發(fā)生失敗，需在備注項記錄失敗提示信息，如無提示信息需詳細描述失敗現象備注2.2.11 通過配置信息進行業(yè)務帳號同步時延（s）指標定義短信下發(fā)時延指標來源業(yè)務撥測測試環(huán)境所有技術指標都應在GSM和TD網絡環(huán)境下，并且保持網絡暢通預置條件1）手機上不要安裝PushEmail客戶端，如已安裝，先卸載在測試測試步驟1） 通過郵件代理網關發(fā)送測試帳戶配置信息的時長2）

8、 通過終端看記錄收到亂碼短信的時延測試記錄用戶記錄數據：1） 計算短信下發(fā)時延如測試中發(fā)生失敗，需在備注項記錄失敗提示信息，如無提示信息需詳細描述失敗現象備注2.2.12 通過獲取參數進行業(yè)務帳號同步時延（s）指標定義短信下發(fā)時延指標來源業(yè)務撥測測試環(huán)境所有技術指標都應在GSM和TD網絡環(huán)境下，并且保持網絡暢通預置條件1）手機上不要安裝PushEmail客戶端，如已安裝，先卸載在測試測試步驟1） 通過客戶端點擊獲取參數按鈕的時長2） 通過終端看記錄收到亂碼短信的時延測試記錄用戶記錄數據：1） 計算短信下發(fā)時延如測試中發(fā)生失敗，需在備注項記錄失敗提示信息，如無提示信息需詳細描述失敗現象備注2.2

9、.13 客戶端完成賬戶鑒權時延（s）指標定義短信下發(fā)時延指標來源業(yè)務撥測測試環(huán)境所有技術指標都應在GSM和TD網絡環(huán)境下，并且保持網絡暢通預置條件測試步驟1） 客戶端軟件自動鑒權獲取setting消息的時長2） 通過終端記錄帳號配置成功的時延測試記錄用戶記錄數據：1） 計算帳號配置成功時延如測試中發(fā)生失敗，需在備注項記錄失敗提示信息，如無提示信息需詳細描述失敗現象備注2.2.14 客戶端獲取郵件過濾規(guī)則時延（s）指標定義過濾規(guī)則獲取時延指標來源業(yè)務撥測測試環(huán)境所有技術指標都應在GSM和TD網絡環(huán)境下，并且保持網絡暢通預置條件測試步驟1） 客戶端獲取郵件過濾2） 通過終端記錄收到過濾規(guī)則時延測試

10、記錄用戶記錄數據：1） 計算獲取過濾規(guī)則下發(fā)時延如測試中發(fā)生失敗，需在備注項記錄失敗提示信息，如無提示信息需詳細描述失敗現象備注2.2.15 用戶申請發(fā)送炸彈信息的時延（s）指標定義短信下發(fā)時延指標來源業(yè)務撥測測試環(huán)境所有技術指標都應在GSM和TD網絡環(huán)境下，并且保持網絡暢通預置條件測試步驟1） 用戶登錄代理網關發(fā)送炸彈信息的時延2） 記錄收到時延測試記錄用戶記錄數據：1） 計算發(fā)送炸彈信息的時延如測試中發(fā)生失敗，需在備注項記錄失敗提示信息，如無提示信息需詳細描述失敗現象備注2.2 易用性測試2.2.1 界面友好度指標定義評價手機郵箱客戶端界面體驗友好度指標來源用戶調研測試環(huán)境所有技術指標都應

11、在GSM和TD網絡環(huán)境下，網絡通暢預置條件測試步驟1） 客戶端：點擊手機郵箱客戶端圖標、進入客戶端首頁，進入欄目頁觀察和體驗2） 讓用戶對結果進行評測3） 對抽取的樣本進行統(tǒng)計，取平均分測試記錄用戶記錄數據：非常優(yōu)秀為5分,優(yōu)秀為4分,良好為3分,差為2分,非常差為1分平均分=總分數/調研用戶數備注2.2.2 操作便捷性指標定義評價手機郵箱客戶端界面體驗友好度指標來源用戶調研測試環(huán)境所有技術指標都應在GSM和TD網絡環(huán)境下，網絡通暢預置條件測試步驟1） 對抽取的樣本進行統(tǒng)計，取平均分測試記錄用戶記錄數據：非常準確易懂為5分,準確易懂為4分,一般3分,差為2分,非常差為1分平均分=總分數/調研用

12、戶數備注2.3 可靠性測試2.2.3 業(yè)務中斷頻次指標定義統(tǒng)計當月每集團客戶終端次數指標來源投訴處理工單測試環(huán)境所有技術指標都應在GSM和TD網絡環(huán)境下，網絡通暢預置條件測試步驟業(yè)務中斷指由我公司系統(tǒng)或我公司人員原因造成客戶業(yè)務主要功能不可用。統(tǒng)計當月平均每集團客戶業(yè)務中斷次數（當月所有客戶終端次數總和/所有集團客戶數量）測試記錄記錄數據統(tǒng)計：備注2.2.4 業(yè)務恢復時長指標定義統(tǒng)計當月業(yè)務恢復時長指標來源投訴處理工單測試環(huán)境所有技術指標都應在GSM和TD網絡環(huán)境下，網絡通暢預置條件測試步驟業(yè)務恢復時長指主要功能從不可用到可用的時長。取當月業(yè)務恢復時長的平均值；測試記錄記錄數據統(tǒng)計：備注2.2

13、.5 設備返修率指標定義設備返修次數/設備返修總次數*100%指標來源投訴處理工單測試環(huán)境所有技術指標都應在GSM和TD網絡環(huán)境下，網絡通暢預置條件測試步驟測試記錄記錄數據統(tǒng)計：設備返修次數/設備返修總次數*100%備注2.4 可服務性測試2.2.6 業(yè)務辦理申請渠道的豐富性指標定義評價手機郵箱業(yè)務辦理申請渠道指標來源用戶調研測試環(huán)境所有技術指標都應在GSM和TD網絡環(huán)境下，網絡通暢預置條件測試步驟1） 對抽取的樣本進行統(tǒng)計，取平均分測試記錄用戶記錄數據：非常豐富為5分,豐富為4分,一般3分,差為2分,非常差為1分平均分=總分數/調研用戶數備注2.2.7 投訴處理渠道的豐富性指標定義評價手機郵箱投訴處理渠道指標來源用戶調研測試環(huán)境所有技術指標都應在GSM和TD網絡環(huán)境下，網絡通暢預置條件測試步驟1） 對抽取的樣本進行