農(nóng)業(yè)大數(shù)據(jù)項目測試報告

農(nóng)業(yè)大數(shù)據(jù)項目測試報告XX科技股份有限公司編制

目錄1. 系統(tǒng)功能測試概述 31.1. 測試方法和步驟 31.2. 測試部署及環(huán)境 51.2.1.測試數(shù)據(jù)準(zhǔn)備 51.2.2.測試結(jié)果測試數(shù)據(jù) 62. 性能測試報告 102.1. 測試目標(biāo) 102.2. 測試內(nèi)容 102.3. 測試環(huán)境 102.4. 測試過程和結(jié)果 12

系統(tǒng)功能測試概述系統(tǒng)測試為了監(jiān)測系統(tǒng)開發(fā)完成之后的功能指標(biāo)、性能指標(biāo)、以及系統(tǒng)缺陷檢驗它是否有不符合系統(tǒng)說明書的地方。這種測試可以發(fā)現(xiàn)系統(tǒng)分析和設(shè)計中的錯誤。如安全測試是測試安全措施是否完善，能不能保證系統(tǒng)不受非法侵入。再例如，壓力測試是測試系統(tǒng)在正常數(shù)據(jù)量以及超負(fù)荷量(如多個用戶同時存取)等情況下是否還能正常地工作。測試方法和步驟表1產(chǎn)量變化分析測試方法表測試項編號X001測試項名稱產(chǎn)量變化分析測試方法和步驟序號測試操作預(yù)期結(jié)果備注01點擊產(chǎn)量變化分析圖形展示近年來各類農(nóng)產(chǎn)品的產(chǎn)量變化情況表2產(chǎn)品價格分析測試方法表測試項編號X002測試項名稱產(chǎn)品價格分析測試方法和步驟序號測試操作預(yù)期結(jié)果備注01點擊產(chǎn)品價格分析圖形展示各類農(nóng)產(chǎn)品價格變化情況。表3進(jìn)出口分析測試方法表測試項編號X003測試項名稱進(jìn)出口分析測試方法和步驟序號測試操作預(yù)期結(jié)果備注01點擊進(jìn)出口分析圖形展示近年來各類農(nóng)產(chǎn)品的進(jìn)出口情況。表4農(nóng)產(chǎn)品銷售分析測試方法表測試項編號X004測試項名稱農(nóng)產(chǎn)品銷售分析測試方法和步驟序號測試操作預(yù)期結(jié)果備注01點擊農(nóng)產(chǎn)品銷售分析圖形展示全國各類農(nóng)產(chǎn)品的銷售情況。表5全國種植分析測試方法表測試項編號X005測試項名稱全國種植分析測試方法和步驟序號測試操作預(yù)期結(jié)果備注01點擊全國種植分析圖形展示全國農(nóng)產(chǎn)品的計劃種植面積情況。表6銷售渠道分析測試方法表測試項編號X006測試項名稱銷售渠道分析測試方法和步驟序號測試操作預(yù)期結(jié)果備注01點擊銷售渠道分析圖形展示農(nóng)產(chǎn)品的銷售渠道占比情況。表7災(zāi)害統(tǒng)計分析測試方法表測試項編號X007測試項名稱災(zāi)害統(tǒng)計分析測試方法和步驟序號測試操作預(yù)期結(jié)果備注01點擊災(zāi)害統(tǒng)計分析圖形展示全國災(zāi)害發(fā)生數(shù)量情況。表8種植面積變化分析測試方法表測試項編號X008測試項名稱種植面積變化分析測試方法和步驟序號測試操作預(yù)期結(jié)果備注01點擊種植面積變化分析圖形展示近年來各類農(nóng)作物的種植面積變化情況。測試部署及環(huán)境測試數(shù)據(jù)準(zhǔn)備產(chǎn)量變化數(shù)據(jù)產(chǎn)品價格數(shù)據(jù)進(jìn)出口數(shù)據(jù)農(nóng)產(chǎn)品銷售數(shù)據(jù)全國種植數(shù)據(jù)銷售渠道數(shù)據(jù)災(zāi)害統(tǒng)計數(shù)據(jù)種植面積變化數(shù)據(jù)測試結(jié)果測試數(shù)據(jù)表9產(chǎn)量變化分析測試結(jié)果表測試項編號X001測試項名稱產(chǎn)量變化分析測試時間2020-09-23測試人員XXX測試地點測試方法和步驟序號測試操作預(yù)期結(jié)果實際結(jié)果備注01點擊產(chǎn)量變化分析圖形展示近年來各類農(nóng)產(chǎn)品的產(chǎn)量變化情況。圖形展示近年來各類農(nóng)產(chǎn)品的產(chǎn)量變化情況。測試人員（簽字）：XXX表10產(chǎn)品價格分析測試結(jié)果表測試項編號X002測試項名稱產(chǎn)品價格分析測試時間2020-09-23測試人員XXX測試地點測試方法和步驟序號測試操作預(yù)期結(jié)果實際結(jié)果備注01點擊產(chǎn)品價格分析圖形展示各類農(nóng)產(chǎn)品價格變化情況。圖形展示各類農(nóng)產(chǎn)品價格變化情況。測試人員（簽字）：XXX表11進(jìn)出口分析測試結(jié)果表測試項編號X003測試項名稱進(jìn)出口分析測試時間2020-09-23測試人員XXX測試地點測試方法和步驟序號測試操作預(yù)期結(jié)果實際結(jié)果備注01點擊進(jìn)出口分析圖形展示近年來各類農(nóng)產(chǎn)品的進(jìn)出口情況。圖形展示近年來各類農(nóng)產(chǎn)品的進(jìn)出口情況。測試人員（簽字）：XXX表12農(nóng)產(chǎn)品銷售分析測試結(jié)果表測試項編號X004測試項名稱農(nóng)產(chǎn)品銷售分析測試時間2020-09-23測試人員XXX測試地點測試方法和步驟序號測試操作預(yù)期結(jié)果實際結(jié)果備注01點擊農(nóng)產(chǎn)品銷售分析圖形展示全國各類農(nóng)產(chǎn)品的銷售情況。圖形展示全國各類農(nóng)產(chǎn)品的銷售情況。測試人員（簽字）：XXX表13全國種植分析測試結(jié)果表測試項編號X005測試項名稱全國種植分析測試時間2020-09-23測試人員XXX測試地點測試方法和步驟序號測試操作預(yù)期結(jié)果實際結(jié)果備注01點擊全國種植分析圖形展示全國農(nóng)產(chǎn)品的計劃種植面積情況。圖形展示全國農(nóng)產(chǎn)品的計劃種植面積情況。測試人員（簽字）：XXX表14銷售渠道分析測試結(jié)果表測試項編號X006測試項名稱銷售渠道分析測試時間2020-09-23測試人員XXX測試地點測試方法和步驟序號測試操作預(yù)期結(jié)果實際結(jié)果備注01點擊銷售渠道分析圖形展示農(nóng)產(chǎn)品的銷售渠道占比情況。圖形展示農(nóng)產(chǎn)品的銷售渠道占比情況。測試人員（簽字）：XXX表15災(zāi)害統(tǒng)計分析測試結(jié)果表測試項編號X007測試項名稱災(zāi)害統(tǒng)計分析測試時間2020-09-23測試人員XXX測試地點測試方法和步驟序號測試操作預(yù)期結(jié)果實際結(jié)果備注01點擊災(zāi)害統(tǒng)計分析圖形展示全國災(zāi)害發(fā)生數(shù)量情況。圖形展示全國災(zāi)害發(fā)生數(shù)量情況。測試人員（簽字）：XXX表16種植面積變化分析測試結(jié)果表測試項編號X008測試項名稱種植面積變化分析測試時間2020-09-23測試人員XXX測試地點測試方法和步驟序號測試操作預(yù)期結(jié)果實際結(jié)果備注01點擊種植面積變化分析圖形展示近年來各類農(nóng)作物的種植面積變化情況。圖形展示近年來各類農(nóng)作物的種植面積變化情況。測試人員（簽字）：XXX性能測試報告測試目標(biāo)以農(nóng)業(yè)大數(shù)據(jù)分析系統(tǒng)為例，日均訪問記錄數(shù)近萬條，每月數(shù)據(jù)量近1TB，移動互聯(lián)網(wǎng)用戶快速增加，智能終端迅速普及、戶均流量顯著增長，上網(wǎng)記錄數(shù)據(jù)將進(jìn)一步猛增，每6個月，流量翻一番，如此大的數(shù)據(jù)量已經(jīng)超越了傳統(tǒng)關(guān)系型數(shù)據(jù)庫可管理的容量上限，關(guān)系型數(shù)據(jù)庫上對大規(guī)模數(shù)據(jù)進(jìn)行操作會造成系統(tǒng)性能嚴(yán)重下降。通過本測試，驗證農(nóng)業(yè)大數(shù)據(jù)分析平臺，是否可以有效解決數(shù)據(jù)采集、加載、存儲、查詢、分析等問題。測試內(nèi)容1）存儲節(jié)點數(shù)和存儲量驗證；2）并發(fā)加載數(shù)據(jù)的效率驗證；3）分別選取簡單查詢（指定農(nóng)產(chǎn)品類型價格變化情況查詢），單表統(tǒng)計（查詢各類農(nóng)產(chǎn)品最高價格）兩個應(yīng)用場景驗證產(chǎn)品性能。測試環(huán)境軟硬件環(huán)境配置如下：表17服務(wù)器配置服務(wù)器推薦配置及說明節(jié)點數(shù)量5臺服務(wù)器CPU兩路6核處理器2*E5-2620內(nèi)存64GBECCDDR3硬盤2個600G的SAS硬盤，15000RPM，RAID1，作為系統(tǒng)盤12個2TB的SATA硬盤，7200RPM，不做RAID1網(wǎng)絡(luò)雙電口萬兆（10Gbps）以太網(wǎng)卡部署環(huán)境如下：表18集群配置PC服務(wù)器5臺NameNode節(jié)點2臺DataNode節(jié)點5臺Zookeeper節(jié)點3臺集群監(jiān)控節(jié)點1臺入庫服務(wù)節(jié)點5臺Web查詢應(yīng)用服務(wù)節(jié)點1臺網(wǎng)絡(luò)拓?fù)淝闆r如下：圖1拓?fù)浣Y(jié)構(gòu)圖測試過程和結(jié)果1）現(xiàn)有HDFS集群已被占用10.5TB，3個副本，壓縮率在1/3左右，因此實際HBase表數(shù)據(jù)也已經(jīng)有3.5TB左右。目前數(shù)據(jù)存放6個月，每天導(dǎo)入日志數(shù)據(jù)在21GB左右，每月導(dǎo)入新增日志數(shù)據(jù)量為630GB，近一個月為常用熱數(shù)據(jù)，數(shù)據(jù)量增長較快。2）并發(fā)加載數(shù)據(jù)的效率農(nóng)業(yè)大數(shù)據(jù)分析集群每秒平均達(dá)到150萬記錄/秒，峰值時達(dá)到500萬/秒，集群導(dǎo)入性能沒有問題。3）支持并發(fā)查詢數(shù)目：遠(yuǎn)高于1000請求/秒上網(wǎng)記錄查詢速度：不高于1秒（含用戶訪問查詢頁面的時間）場景一：指定農(nóng)產(chǎn)品類型價格變化情況查詢表19指定農(nóng)產(chǎn)品類型價格變化記錄表測試相關(guān)表數(shù)據(jù)量表名條數(shù)tb_agricultural_sale19134測試語句SELECT*FROMtb_agricultural_saleWHEREtype=?;場景說明使用程序查詢指定農(nóng)產(chǎn)品價格變化情況SQL性能并發(fā):5000單SQL平均執(zhí)行時間:12msAPI性能并發(fā)：>30W單SQL平均執(zhí)行時間：3ms場景二：查詢各類農(nóng)產(chǎn)品最高價格查詢：表20查