互聯(lián)網(wǎng)企業(yè)總體測試業(yè)務(wù)1109

1、移 動 測 試 培 訓(xùn)Testin你可能會遇到以下問題23可能你會給予差評4也有可能你會卸載5出現(xiàn)上述情況的本質(zhì)原因就是質(zhì)量差6糟糕的質(zhì)量導(dǎo)致Delay7糟糕的質(zhì)量導(dǎo)致8糟糕的質(zhì)量導(dǎo)致我的用戶呢9糟糕的質(zhì)量導(dǎo)致Down10糟糕的質(zhì)量導(dǎo)致11糟糕的質(zhì)量導(dǎo)致Die12用戶對于缺陷的容忍度極低13用戶反饋?zhàn)疃嗍枪δ軉栴}ANR1.50%閃退16.77%功能47.60%兼容性3.29%廣告10.18%卡5.99%內(nèi)存3.89%網(wǎng)絡(luò)2.10%加載性能4.49%客服問題0.60%隱私安全1.50%流量2.09%ANR閃退功能兼容性廣告卡內(nèi)存網(wǎng)絡(luò)加載性能客服問題隱私安全流量14App崩潰率變化趨勢15App故

2、障原因分布Androidexception異常lua57%2%2%6%21%11%1%exception異常luaexception異常jsexception異常javaexception異常cexception異常ccrash崩潰javaNDK 異常C+16App故障原因分布IOS4%exception異常js86%3%7%exception異常luaexception異常jsexception異常ccrash崩潰object-c17來自Testin Lab的數(shù)據(jù)顯示1.92%安裝失敗11.07%啟動運(yùn)行失敗0.5運(yùn)行崩潰5181.92% 無法安裝19,200個用戶無法安裝 瞬間成為其他應(yīng)用

3、的用戶、甚至是付費(fèi)用戶如果你的app有100萬下載1911.07% 運(yùn)行、登錄失敗110,700個用戶無法運(yùn)行 App Store差評 微博、朋友圈、社交網(wǎng)絡(luò)吐槽 瞬間成為別人的粉絲 如果你的app有100萬下載200.55% 使用時(shí)閃退、掛死、崩潰5,00050,000個進(jìn)程、支付失敗 購物的時(shí)候，不能下單，然后 下了單，不能付費(fèi)，然后 付費(fèi)了，不能交付，然后 關(guān)鍵時(shí)刻，客服不暢，然后 如果客單價(jià)是99元，那么損失 如果你的app有100萬下載21App問題變化趨勢0.00%4.50%9.00%13.50%18.00%22.50%Jan-25-15Feb-1-15Feb-8-15Feb-15

4、-15Feb-22-15Mar-1-15Mar-8-15Crash RateRun Failure Rate Installation Failure Rate0.86%0.61%0.72%0.61%0.31%0.39%0.51%12.77%11.49%12.87%11.49%7.93%12.01%12.34%2.76%4.12%4.30%3.40%4.50%2.4%4.82%運(yùn)行失敗崩潰閃退安裝失敗22傳統(tǒng)的移動測試流程用戶故事設(shè)計(jì)尋找隱藏假設(shè)發(fā)布計(jì)劃迭代sprint估算驗(yàn)收測試時(shí)間設(shè)計(jì)概要測試用例編碼及單元測試估算測試框架搭建重構(gòu)集成詳細(xì)設(shè)計(jì)測試用例編寫測試用例 開發(fā)活動 測試活動spri

5、nt結(jié)束執(zhí)行測試用例下一個sprint開始執(zhí)行回歸測試發(fā)布發(fā)布23App需要做如下項(xiàng)的測試24測試過程中需要掌握的技能樹25企業(yè)面對質(zhì)量管理的四大難題快速發(fā)布用戶反饋測試人手不足機(jī)型覆蓋不全上線后無法監(jiān)控傳統(tǒng)測試無法滿足核心訴求26公司簡介云測測試設(shè)備超過5萬+部涵蓋Android/iOS兩大主流平臺眾測測試專家1000+專業(yè)測試者1萬+可調(diào)度測試人員16萬+Testin云測成立于2011年，是全球最大的移動APP真機(jī)云測試平臺；總部位于北京，在上海、深圳、廣州、成都、杭州、硅谷都設(shè)有服務(wù)機(jī)構(gòu)；目前服務(wù)開發(fā)者超過45萬，為100萬+APP提供了了超過1億次的測試擁有專利40余項(xiàng)，先后獲得了多輪

6、IDG資本、高榕資本、海銀資本數(shù)千萬美元的投資優(yōu)化迭代流程降低測試成本提高測試效率保證產(chǎn)品質(zhì)量27Testin 全覆蓋APP質(zhì)量生命周期管理7x24開發(fā)完成開發(fā)完成產(chǎn)品發(fā)布產(chǎn)品發(fā)布二次更新二次更新重點(diǎn)功能保障重點(diǎn)功能保障用例測試全功能覆蓋全功能覆蓋bug探索測試兼容保障兼容保障兼容性測試發(fā)布保障發(fā)布保障崩潰分析托管內(nèi)測分發(fā)托管內(nèi)測分發(fā)內(nèi)測我們做的只是，不要因?yàn)橘|(zhì)量問題而丟掉用戶功能沒問題功能沒問題用戶體驗(yàn)沒問題用戶體驗(yàn)沒問題主流手機(jī)沒問題主流手機(jī)沒問題發(fā)布沒問題發(fā)布沒問題設(shè)計(jì)沒問題設(shè)計(jì)沒問題281 - 開發(fā)者上傳應(yīng)用2 用戶收到新版通知3 - 內(nèi)測用戶獲取應(yīng)用4 開發(fā)者收集崩潰信息 內(nèi)測用戶發(fā)

7、送反饋5 - 開發(fā)迭代內(nèi)測29用例測試提交需求收取報(bào)告修復(fù)問題1、開發(fā)者在線溝通設(shè)計(jì)用例提交評審2、測試專家執(zhí)行用例查找BUG提交結(jié)果3、專業(yè)測試者審核結(jié)果修訂bug提交報(bào)告4、測試專家30bug探索測試開發(fā)者提測專家在線溝通發(fā)測試任務(wù)多名專業(yè)測試者真實(shí)在線測試專家審核提交報(bào)告24小時(shí)內(nèi)反饋報(bào)告31兼容測試32嵌入SDK上傳APP收取數(shù)據(jù)修復(fù)問題1、開發(fā)者跟蹤堆棧收集信息提交報(bào)告2、崩潰分析SDK整合報(bào)告分析問題3、崩潰分析平臺崩潰分析33App質(zhì)量提升性能兼容34App質(zhì)量提升35App質(zhì)量提升36App質(zhì)量提升37App質(zhì)量提升38App質(zhì)量提升39App質(zhì)量提升40App質(zhì)量提升41Ap

8、p質(zhì)量提升42App質(zhì)量提升43App質(zhì)量提升44App質(zhì)量提升45App質(zhì)量提升46App質(zhì)量提升47項(xiàng)目背景： 4G管家是中國移動【官方】推出的流量自助服務(wù)客戶端軟件。面向全國移動智能終端用戶，提供方便快捷的功能，隨時(shí)隨地查詢監(jiān)控流量。質(zhì)量管理上遇到的問題： 無測試團(tuán)隊(duì)不能保障基本功能點(diǎn)的測試覆蓋，但移動的用戶群體廣大，經(jīng)常會在用戶實(shí)際使用過程中發(fā)現(xiàn)測試覆蓋不到的Bug或缺陷，極大影響產(chǎn)品的體驗(yàn)4G管家 中國移動+運(yùn)營商48客戶反饋： 測試用例設(shè)置詳盡全面，充分考慮了各功能模塊的正常和異常業(yè)務(wù)流程；測試設(shè)計(jì)過程中雙方溝通及時(shí)高效，配合默契；測試執(zhí)行高效嚴(yán)謹(jǐn)；測試報(bào)告結(jié)果準(zhǔn)確、內(nèi)容全面、分類

9、明確、描述詳盡、重點(diǎn)突出，全面幫助我們發(fā)現(xiàn)了很多隱藏的bug，對我們定位問題、產(chǎn)品優(yōu)化方向給予了強(qiáng)大的指導(dǎo)，充分體現(xiàn)了測試行業(yè)的領(lǐng)先水平。服務(wù)情況： 針對4G管家APP的安卓和ios兩個版本，進(jìn)行了包括兼容+功能用例+bug探索+用戶體驗(yàn)在內(nèi)的全方位測試服務(wù)Testin提供的服務(wù)： 用例設(shè)計(jì)、用例執(zhí)行、回歸測試、驗(yàn)收測試、兼容測試49項(xiàng)目背景： E袋洗作為o2o行業(yè)的領(lǐng)軍企業(yè)，是最早一波加入燒錢戰(zhàn)爭的！但公司有章法、有套路，很早就探索出了o2o企業(yè)的核心價(jià)值是什么！是如何做好線下服務(wù)，線上只是手段和入口。所以他們從始至終都秉承一個觀點(diǎn)“與核心價(jià)值無關(guān)的事全由第三方來做”，也就是大家常說的讓專業(yè)

10、的人做專業(yè)的事！ E袋洗有龐大的線下團(tuán)隊(duì)，但技術(shù)團(tuán)隊(duì)相對人員較少，最初與云測接觸時(shí)技術(shù)團(tuán)隊(duì)只有20幾人，測試人員只有1人，和CTO兩次溝通過后便決定將全部測試工作交給云測來做E袋洗 榮昌洗衣行+互聯(lián)網(wǎng)50客戶反饋： Testin云測提供的一站式測試服務(wù)在幫助創(chuàng)業(yè)公司節(jié)省大量人力和時(shí)間成本的同時(shí)，保證了應(yīng)用的上線時(shí)間和質(zhì)量，讓我們創(chuàng)業(yè)公司能放開手腳全力做核心業(yè)務(wù)，在領(lǐng)先對手上贏得非常寶貴的先發(fā)優(yōu)勢！服務(wù)情況： E袋洗目前眾測已經(jīng)提供了Android和iOS平臺總計(jì)超過20個版本的用例測試，執(zhí)行用例4000+，共計(jì)發(fā)現(xiàn)Bug 超過500個； 使用眾測用例服務(wù)后，E袋洗取消了原有招聘測試團(tuán)隊(duì)的計(jì)劃。

11、Testin提供的服務(wù)： 用例設(shè)計(jì)、用例執(zhí)行、回歸測試、驗(yàn)收測試、兼容測試、崩潰分析51項(xiàng)目背景： 蘑菇街是專注于時(shí)尚女性消費(fèi)者的電子商務(wù)網(wǎng)站，為愛美的姑娘們提供衣服、鞋子、箱包、配飾和美妝等等領(lǐng)域適合年輕女性的商品，蘑菇街APP也成為時(shí)尚女性購買和互相分享的必備APP蘑菇街 杭州時(shí)趣+互聯(lián)網(wǎng)質(zhì)量管理上遇到的問題： 蘑菇街app，android版本線上存在很多用戶反饋問題；一直以來都是研發(fā)團(tuán)隊(duì)兼顧測試，并不能保證產(chǎn)品質(zhì)量；蘑菇街測試團(tuán)隊(duì)： 3+人測試團(tuán)隊(duì)，負(fù)責(zé)Android、iOS平臺產(chǎn)品測試52客戶反饋： Testin 是業(yè)界最專業(yè)的測試團(tuán)隊(duì)，幫助蘑菇街團(tuán)隊(duì)測試出眾多機(jī)型，啟動閃退，運(yùn)行崩潰

12、等諸多問題；Testin技術(shù)團(tuán)隊(duì)技術(shù)支持及時(shí)，對接同事服務(wù)周到服務(wù)情況： 針對蘑菇街APP的安卓和ios兩個版本，進(jìn)行了包括兼容+功能用例+bug探索在內(nèi)的全方位測試服務(wù)，目前已經(jīng)提供了Android和iOS平臺總計(jì)超過4個版本的測試Testin提供的服務(wù)： 用例設(shè)計(jì)、用例執(zhí)行、回歸測試、驗(yàn)收測試、兼容測試53 “國內(nèi)最專業(yè)的手機(jī)地圖，超過3.2億用戶在使用！高德地圖是應(yīng)用商店上數(shù)據(jù)準(zhǔn)確率最高、最省流量、躲避擁堵功能最強(qiáng)大的手機(jī)地圖，平均每天為用戶省油61萬升！”高德測試團(tuán)隊(duì)： 10+人測試團(tuán)隊(duì)，負(fù)責(zé)Android、iOS、WinPhone、BlackBerry平臺產(chǎn)品測試質(zhì)量管理上遇到的問題

13、： 測試團(tuán)隊(duì)可以保障基本功能點(diǎn)的測試覆蓋，但地圖、導(dǎo)航數(shù)據(jù)經(jīng)常更新變化，在辦公室環(huán)境無法覆蓋到地圖真實(shí)的使用環(huán)境，發(fā)版和地圖更新后，經(jīng)常會在用戶實(shí)際使用過程中發(fā)現(xiàn)測試覆蓋不到的Bug或缺陷，極大影響產(chǎn)品的體驗(yàn)高德地圖 高德+互聯(lián)網(wǎng)54服務(wù)情況 一個月2次可用性測試，Android+iOS平臺，100名測試專家多地域場景參與測試，每次發(fā)現(xiàn)自有團(tuán)隊(duì)測試外Bug或缺陷超200個Testin提供的服務(wù) 在發(fā)版前的測試流程中引入Testin的可用性測試服務(wù)，對基本功能點(diǎn)之外的真實(shí)用戶使用場景測試起到有效的補(bǔ)充，在發(fā)版前盡可能發(fā)現(xiàn)功能和地圖數(shù)據(jù)上的Bug客戶反饋： 反饋了很多我們發(fā)現(xiàn)不了的Bug和問題，實(shí)

14、際上都錄入到我們的JIRA庫中，在很大程度上彌補(bǔ)了我們測試環(huán)境的測試機(jī)型的不足55項(xiàng)目背景： 平安科技和3大運(yùn)營商合作的一款免費(fèi)連接運(yùn)營商WiFi網(wǎng)絡(luò)的應(yīng)用，應(yīng)用開發(fā)完后需測試全國各地此款A(yù)pp實(shí)際連接運(yùn)營商WiFi的情況，做應(yīng)用可用性的測試可用性測試需求： 國內(nèi)30個主流城市WiFi連接情況 各城市連接3大運(yùn)營商WiFi的連接情況 各城市具體商圈的WiFi連接情況，如火車站、機(jī)場、某個商場 各商圈具體位置的WiFi連接情況，如機(jī)場2層大廳，商場4樓東南角 運(yùn)營商WiFi打開網(wǎng)頁速度的感受，如打開門戶網(wǎng)站的速度 運(yùn)營商WiFi查看視頻的感受 實(shí)際網(wǎng)絡(luò)速度測試，使用Speedtest進(jìn)行實(shí)際網(wǎng)速測試 WiFi反復(fù)連接情況，忽略運(yùn)營商SSID后再進(jìn)行連接平安WiFi 平安+金融56Testin提供的服務(wù)： T