




版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
1、目錄1.被測(cè)對(duì)象IBM SAN Volume Controller41.1.硬件架構(gòu)41.2.架構(gòu)62.測(cè)試環(huán)境7測(cè)試網(wǎng)絡(luò)拓?fù)?配合設(shè)備7測(cè)試工具和測(cè)試方法73.1.測(cè)試工具7測(cè)試用例部分83.4.4.1.整合能力測(cè)試8虛擬化操作過(guò)程84.1.1.4.1.2.4.1.3.4.1.4.4.1.5.資源調(diào)整(消除熱點(diǎn)盤)9技術(shù)中立性9虛擬化整合方式10資源可擴(kuò)展性及擴(kuò)展的靈活性104.2.數(shù)據(jù)保護(hù)能力114.2.1.4.2.2.4.2.3.4.2.4.異構(gòu)容災(zāi)11本地異構(gòu)間實(shí)時(shí)鏡像(HA架構(gòu))12異構(gòu)卷克隆12異構(gòu)卷快照134.3.設(shè)備自身及使用安全性144.3.1.4.3.2.4.3.3.4.3
2、.4.4.3.5.4.3.6.4.3.7.4.3.8.虛擬化設(shè)備安全性14虛擬化設(shè)備升級(jí)的安全性14虛擬化通道安全性15主機(jī)到主通道安全性15數(shù)據(jù)卷安全性16管理安全性16用戶賬號(hào)與權(quán)限管理17用戶操作日志審計(jì)174.4.靈活性184.4.1.4.4.2.4.4.3.4.4.4.4.4.5.4.4.6.4.4.7.4.4.8.虛擬化環(huán)境遷入到虛擬化環(huán)境)18虛擬化環(huán)境遷入到虛擬化環(huán)境)19遷入(遷出(部分虛擬化20分區(qū)20基于粒度的IO SLA管理21動(dòng)態(tài)容量供應(yīng)(thin proviing)21環(huán)境改變度22數(shù)據(jù)遷移及信息生命周期管理234.5.4.6.擴(kuò)展性24性能244.6.1.4.6.
3、2.4.6.3.性能(直接遷入)24性能(遷入優(yōu)化后)25主機(jī)主機(jī)異構(gòu)卷克隆、快照性能254.6.4. 異構(gòu)容災(zāi)性能264.7.兼容性264.7.1.4.7.2.4.7.3.4.7.4.品牌和型號(hào)支持情況26主機(jī)系統(tǒng)支持情況27主機(jī)HBA卡支持情況27交換機(jī)支持情況284.8.可管理性284.8.1.4.8.2.4.8.3.性能管理28規(guī)劃建議29報(bào)表管理291. 被測(cè)對(duì)象IBMSANVolumeController1.1.硬件架構(gòu)SVC 節(jié)點(diǎn)備注:下表示例為兩節(jié)點(diǎn),SVC 一個(gè) cluster 可擴(kuò)展為 8 節(jié)點(diǎn)。* HARDWARE*ProductDescriptionQty2145-8G
4、4103002530581159726IBM System Storage SAN Volume ControllerStorageEngine111411Storage EngineStorage Engine 5M Fibre OpticPreload- Additional Cable LC-LCUnerruptibleer Supply-SingleUPS-8115er Cord (China)2145-8F4 PriceAnnual Maenance2145-8G41018300140015305IBM System Storage SAN Volume ControllerStor
5、ageEngine111114StorageStorage StorageEngineEngine EnginePreload Preload-AAS- InitialMaster Console5M Fibre OpticCable LC-LC53258115972625M Fibre Optic Cable LC-LC211Unerruptibleer Supply-SingleUPS-8115er Cord (China)2145-8F4 PriceAnnual Maenance* SOFTWARE*ProductDescriptionQty5608-VC639545809IBM Tot
6、alStorage Productivity Per Terabyte w 1Yr SW MaCD-ROM MultilingualCenterLimitedEdition1215608-VNCA2KCIBM TotalStg Prod CenterLimited Edition Reg/Ren:1Charge 1Y RegYr12Per Terabyte SW MANO5639-SSA3043System Storage SVC 1YrBase Per Terabyte 1-12SW Ma1Yr SWenance Reg/Ren11MaReg5639-VC444075005IBM Syste
7、m Storage SAN Base Per Terabyte 1-12PreinstallVolumeControllerSWV4.1111w/1Yr SW Ma5639-VC4 OTC1.2.架構(gòu)2. 測(cè)試環(huán)境2.1.測(cè)試網(wǎng)絡(luò)拓?fù)鋫渥ⅲ翰粶y(cè)試容災(zāi)子項(xiàng)是時(shí),C可以連接到“生產(chǎn)中心”豐富異構(gòu)環(huán)境,進(jìn)行其它子項(xiàng)測(cè)試。2.2.配合設(shè)備主機(jī)節(jié)點(diǎn)oracle 數(shù)據(jù)庫(kù)3. 測(cè)試工具和測(cè)試方法3.1.測(cè)試工具Oracle 數(shù)據(jù)庫(kù)及相關(guān)交易UNIX dd 工具4. 測(cè)試用例部分4.1.整合能力測(cè)試測(cè)試虛擬化設(shè)備是否是真正的中立產(chǎn)品,測(cè)試所有設(shè)備能否被虛擬化為一個(gè)資源池,虛擬化后能提供靈活、動(dòng)態(tài)的架構(gòu)管理,能
8、夠進(jìn)行性能調(diào)優(yōu),從而提供動(dòng)態(tài)架構(gòu)并滿足不斷變化的應(yīng)用層的需求。(請(qǐng)參考Excellent表中的整合能力部分)備注:SVC 代表IBM 虛擬樣意義。引擎設(shè)備,在后文中,SVC和虛擬引擎具有同mdisk代表底層,并給SVC使用;vdisk代表經(jīng)過(guò)SVC虛劃分的擬化后分配的卷(volume),并給主機(jī)使用。4.1.1. 虛擬化操作過(guò)程項(xiàng)目:虛擬化基本功能測(cè)試分項(xiàng)目:創(chuàng)建與管理資源池用例:版本:1.0參考文檔:參考組網(wǎng):重要性:高優(yōu)先級(jí):6測(cè)試目的:虛擬能夠物理的異構(gòu)設(shè)備預(yù)置條件:兩臺(tái)異構(gòu)磁盤陣列虛擬引擎到位測(cè)試步驟:磁盤陣列劃分資源()SVC管理磁盤陣列劃分的資源形成MdiskSVC將資源整池Mdi
9、sk GroupSVC在Mdisk Group中劃分vdisk。(vdisk可用選擇Sequential模式或Striped模式,且可以vdisk對(duì)應(yīng)的底層Mdisks)SVC將vdsik分配給主機(jī)使用預(yù)期結(jié)果:異構(gòu)磁盤陣列上的資源可以整一個(gè)資源池主機(jī)只能看到SVC分配給它的vdisks備注:4.1.2.資源調(diào)整(消除熱點(diǎn)盤)4.1.3.技術(shù)中立性項(xiàng)目:技術(shù)中立性測(cè)試分項(xiàng)目:虛擬化設(shè)備的技術(shù)中立性用例:版本:1.0參考文檔:參考組網(wǎng):重要性:高優(yōu)先級(jí):6測(cè)試目的:虛擬化功能是否真正做到技術(shù)中立,不綁定本廠商現(xiàn)有設(shè)備預(yù)置條件:1、虛擬化已部署完畢2、主機(jī)可以使用虛擬資源(vdisk)測(cè)試步驟:1
10、. 觀測(cè)虛擬化設(shè)備硬件和所有功能是獨(dú)立于該廠商現(xiàn)有的磁盤子系統(tǒng)還是綁定了該廠商現(xiàn)有的磁盤子系統(tǒng)。預(yù)期結(jié)果:1. SVC完全獨(dú)立于IBM任何磁盤系統(tǒng)(DS8000、DS4000、N series、 XIV等),做到真正的中立,現(xiàn)在和未來(lái)都不會(huì)綁定IBM磁盤子系統(tǒng)銷售,使用戶獲得真正的選擇及投資決策度。項(xiàng)目:靈活消除熱點(diǎn)盤功能測(cè)試分項(xiàng)目:資源調(diào)整,消除熱點(diǎn)用例:版本:1.0參考文檔:參考組網(wǎng):重要性:高優(yōu)先級(jí):6測(cè)試目的:能否實(shí)現(xiàn)“數(shù)據(jù)塊”級(jí)別(非級(jí)別)的數(shù)據(jù)遷移,從而根據(jù)業(yè)務(wù)的變化,動(dòng)態(tài)消除形成的熱點(diǎn)盤,充分利用后端整合資源的性能。預(yù)置條件:1、虛擬化已部署完畢2、主機(jī)可以使用虛擬資源(vdis
11、k)測(cè)試步驟:vdisk創(chuàng)建在3個(gè)mdisk(上)分別為門mdisk1、mdisk2、mdisk3假設(shè)隨著應(yīng)用的使用,mdisk1非常的繁忙,成為熱點(diǎn)。通過(guò)SVC將mdisk1上的部分?jǐn)?shù)據(jù)塊移動(dòng)到mdisk2、mdisk3,或新增加進(jìn)來(lái)的mdisk4、mdisk5上。預(yù)期結(jié)果:熱點(diǎn)盤可以通過(guò)“塊級(jí)別”的數(shù)據(jù)移動(dòng)重新分布或消除。整個(gè)調(diào)整過(guò)程對(duì)應(yīng)用透明備注:對(duì)應(yīng)用透明指應(yīng)用一直交易4.1.4.虛擬化整合方式4.1.5.資源可擴(kuò)展性及擴(kuò)展的靈活性項(xiàng)目:資源可擴(kuò)展性及擴(kuò)展的靈活性測(cè)試分項(xiàng)目:虛擬整合的擴(kuò)展性和靈活性用例:版本:1.0參考文檔:參考組網(wǎng):重要性:高優(yōu)先級(jí):6測(cè)試目的:在不影響業(yè)務(wù)系統(tǒng)運(yùn)行
12、情況下,支持多種形式的/Volume擴(kuò)展,并能將擴(kuò)展的空間分配給數(shù)據(jù)庫(kù)或文件系統(tǒng)使用預(yù)置條件:虛擬化已部署完畢(虛擬池中包含mdisk1mdisk5五個(gè))主機(jī)可以使用虛擬資源(vdisk條帶化的使用mdisk1mdisk5五個(gè))測(cè)試步驟:場(chǎng)景1:簡(jiǎn)單擴(kuò)容1. 通過(guò)SVC,增加vdisk容量。場(chǎng)景2:伴隨底層擴(kuò)容的擴(kuò)容項(xiàng)目:虛擬化整合方式測(cè)試分項(xiàng)目:虛擬化整合方式用例:版本:1.0參考文檔:參考組網(wǎng):重要性:高優(yōu)先級(jí):6測(cè)試目的:能否對(duì)底層的實(shí)現(xiàn)條帶化數(shù)據(jù)重分布從而獲得整體更好的性能。(數(shù)據(jù)遷移模式,遷移后連續(xù)or條帶化模式)預(yù)置條件:1、虛擬建立(虛擬池中包含mdisk1mdisk5五個(gè))測(cè)試
13、步驟:以Sequential模式創(chuàng)建vdisk1,使其連續(xù)位于mdisk1上以Striped模式創(chuàng)建vdisk1,使其條帶化的位于mdisk1mdisk5五的關(guān)于image模式,詳情見(jiàn)遷入、遷出部分預(yù)期結(jié)果:經(jīng)過(guò)虛擬化的資源可以以靈活的模式供主機(jī)使用。用戶可以根據(jù)自己性能要求或業(yè)務(wù)特點(diǎn),的決定虛擬化資源的最優(yōu)使用方式備注:備注:4.2.數(shù)據(jù)保護(hù)能力測(cè)試可以在異構(gòu)設(shè)備之間進(jìn)行數(shù)據(jù)容災(zāi)保護(hù),例如同步、異步、卷克隆、卷快照等。(請(qǐng)參考Excellent表中的數(shù)據(jù)保護(hù)能力部分)4.2.1. 異構(gòu)容災(zāi)項(xiàng)目:異構(gòu)容災(zāi)分項(xiàng)目:容災(zāi)用例:版本:1.0參考文檔:參考組網(wǎng):重要性:高優(yōu)先級(jí):5測(cè)試目的:測(cè)試Any
14、 To Any(任意)的異構(gòu)間容災(zāi)功能,且能否保證數(shù)據(jù)一致性。預(yù)置條件:生產(chǎn)中心一套SVC1管理了系統(tǒng)A和B,容災(zāi)中心一套SVC2管理了系統(tǒng)C(A、B、C為異構(gòu)廠商系統(tǒng))生產(chǎn)中心主機(jī)X部署oracle在SVC創(chuàng)建的vdisk1、vdisk2上。(其中vdisk1物理在A上;vdisk2物理在B上)兩中心間建立光纖鏈路測(cè)試步驟:創(chuàng)建SVC1和SVC2的partnership關(guān)系在SVC2上創(chuàng)建DR_vdisk1和DR_vdisk2(DR_vdisk1和DR_vdisk2物理在C上)創(chuàng)建一致性組及同步&異步容災(zāi)關(guān)系向oracle數(shù)據(jù)塊中百萬(wàn)條數(shù)據(jù)在數(shù)據(jù)過(guò)程中突然宕掉生產(chǎn)中心主機(jī)容災(zāi)中心啟用,主機(jī)Y
15、容災(zāi)中心數(shù)據(jù)對(duì)于同步容災(zāi),比對(duì)是否丟失數(shù)據(jù)對(duì)于異步容災(zāi),看主機(jī)Y是否能啟動(dòng)數(shù)據(jù)庫(kù),并比對(duì)數(shù)據(jù)丟失量預(yù)期結(jié)果:異構(gòu)A、B、C通過(guò)SVC可以實(shí)現(xiàn)同步&異步容災(zāi)同步容災(zāi)保障數(shù)據(jù)一致性且不丟失數(shù)據(jù)異步容災(zāi)保障數(shù)據(jù)一致性但有少量數(shù)據(jù)丟失底層創(chuàng)建新的兩個(gè)分配給SVC將這兩個(gè)添加到現(xiàn)有的mdisk group(mdisk6、mdisk7)通過(guò)SVC,增加vdisk容量。通過(guò)SVC,調(diào)整條帶化的重新分布,使vidks條帶化到mdisl1mdisk7這七個(gè)上。預(yù)期結(jié)果:主機(jī)不需要停機(jī)就可使用新增加的容量即便底層擴(kuò)容,vdisk擴(kuò)容依然能夠保障條帶化的重新分布衡備注:4.2.2.本地異構(gòu)間實(shí)時(shí)鏡像(HA 架構(gòu))4
16、.2.3.異構(gòu)卷克隆項(xiàng)目:異構(gòu)卷克隆分項(xiàng)目:異構(gòu)卷克隆用例:版本:1.0參考文檔:參考組網(wǎng):重要性:中優(yōu)先級(jí):5測(cè)試目的:測(cè)試Any To Any(任意)的異構(gòu)間數(shù)據(jù)卷克隆功能數(shù)據(jù)一致性。測(cè)試一個(gè)源卷支持多少個(gè)克隆以及克隆方式的靈活性(一對(duì)多模式,層疊模式,混合模式)項(xiàng)目:本地異構(gòu)間實(shí)時(shí)鏡像(異構(gòu)HA架構(gòu))分項(xiàng)目:本地異構(gòu)間實(shí)時(shí)鏡像(異構(gòu)HA架構(gòu))用例:版本:1.0參考文檔:參考組網(wǎng):重要性:高優(yōu)先級(jí):6測(cè)試目的:在主機(jī)層面實(shí)現(xiàn)普遍HA架構(gòu)后,越來(lái)越多的企業(yè)開(kāi)始關(guān)注 的HA,畢竟數(shù)據(jù)高可用及對(duì)外持續(xù)服務(wù)能力才是企業(yè)信息系統(tǒng)的 。本項(xiàng)將測(cè)試是否提供本地異構(gòu) (Any To Any)高可用性HA架
17、構(gòu)。預(yù)置條件:虛擬化已部署完畢,SVC管理了系統(tǒng)A主機(jī)可以使用虛擬資源(vdisk)測(cè)試步驟:添加系統(tǒng)B到SVC環(huán)境中利用SVC的vdisk mirror功能產(chǎn)生數(shù)據(jù)的第二份實(shí)時(shí)鏡像到系統(tǒng)B在向oracle中數(shù)據(jù)過(guò)程中斷掉任何系統(tǒng)(A或B)觀察應(yīng)用是否停止觀測(cè)SVC是否發(fā)現(xiàn)了一套系統(tǒng)的掉電重新接入先前斷掉的系統(tǒng),觀測(cè)數(shù)據(jù)是否自動(dòng)開(kāi)始增量同步,觀測(cè)SVC是否恢復(fù)后的狀態(tài)預(yù)期結(jié)果:所有過(guò)程對(duì)上層主機(jī)即應(yīng)用透明(主機(jī)看到單一的vdisk,不知發(fā)生了鏡像與否)SVC可以實(shí)告的狀況在故障恢復(fù)時(shí),無(wú)需人為干預(yù),SVC自動(dòng)實(shí)現(xiàn)增量同步備注:備注:同步和異步分別測(cè)試生產(chǎn)站點(diǎn)的X系統(tǒng)在模擬后要能恢復(fù),以便比對(duì)容
18、災(zāi)系統(tǒng)是否丟失數(shù)據(jù)及數(shù)據(jù)丟失量。4.2.4. 異構(gòu)卷快照項(xiàng)目:異構(gòu)卷快照分項(xiàng)目:異構(gòu)卷快照用例:版本:1.0參考文檔:參考組網(wǎng):重要性:中優(yōu)先級(jí):5測(cè)試目的:測(cè)試Any To Any(任意)的異構(gòu)間數(shù)據(jù)卷快照功能數(shù)據(jù)一致性。測(cè)試一個(gè)源卷支持多少個(gè)快照以及快照方式的靈活性(一對(duì)多模式,層疊模式,混合模式)預(yù)置條件:虛擬化已部署完畢主機(jī)可以使用虛擬資源(vdisk在系統(tǒng)A上)測(cè)試步驟:場(chǎng)景1:一對(duì)多模式通過(guò)SVC對(duì)vdisk以一對(duì)多模式創(chuàng)建多份異構(gòu)卷快照(快照卷在系統(tǒng)B上)快照卷分配給主機(jī)檢驗(yàn)數(shù)據(jù)的一致性場(chǎng)景2:層疊模式通過(guò)SVC對(duì)vdisk以層疊模式創(chuàng)建多份異構(gòu)卷快照(快照卷在系統(tǒng)B上)快照卷分
19、配給主機(jī)檢驗(yàn)數(shù)據(jù)的一致性場(chǎng)景3:混合模式3. 通過(guò)SVC對(duì)vdisk以混合模式(一對(duì)多層疊)創(chuàng)建多份異構(gòu)卷快照(快照卷在系統(tǒng)B上)預(yù)置條件:虛擬化已部署完畢主機(jī)可以使用虛擬資源(vdisk在系統(tǒng)A上)測(cè)試步驟:場(chǎng)景1:一對(duì)多模式通過(guò)SVC對(duì)vdisk以一對(duì)多模式創(chuàng)建多份異構(gòu)卷克?。寺【碓谙到y(tǒng)B上)克隆卷分配給主機(jī)檢驗(yàn)數(shù)據(jù)的一致性場(chǎng)景2:層疊模式通過(guò)SVC對(duì)vdisk以層疊模式創(chuàng)建多份異構(gòu)卷克?。寺【碓谙到y(tǒng)B上)克隆卷分配給主機(jī)檢驗(yàn)數(shù)據(jù)的一致性場(chǎng)景3:混合模式通過(guò)SVC對(duì)vdisk以混合模式(一對(duì)多層疊)創(chuàng)建多份異構(gòu)卷克?。寺【碓谙到y(tǒng)B上)克隆卷分配給主機(jī)檢驗(yàn)數(shù)據(jù)的一致性預(yù)期結(jié)果:用戶可以
20、靈活的創(chuàng)建基于一對(duì)多模式,層疊模式,混合模式的異構(gòu)卷克隆異構(gòu)卷克隆具有數(shù)據(jù)一致性保護(hù)備注:SVC對(duì)于一個(gè)源卷,最多支持256個(gè)快照4.3.設(shè)備自身及使用安全性測(cè)試虛擬設(shè)備提供自身及使用過(guò)程中的安全性問(wèn)題,包括虛擬設(shè)備自身安全性,虛擬設(shè)備升級(jí)/替換的安全性、管理的安全性、用戶操作日志審計(jì)等考Excellent表中的設(shè)備自身及使用安全性部分)(請(qǐng)參4.3.1.虛擬化設(shè)備安全性4.3.2.虛擬化設(shè)備升級(jí)的安全性項(xiàng)目:虛擬化設(shè)備升級(jí)的安全性分項(xiàng)目:虛擬化設(shè)備升級(jí)的安全性用例:版本:1.0參考文檔:參考組網(wǎng):項(xiàng)目:虛擬化設(shè)備安全性分項(xiàng)目:虛擬化設(shè)備安全性用例:版本:1.0參考文檔:參考組網(wǎng):重要性:高優(yōu)
21、先級(jí):6測(cè)試目的:虛擬化設(shè)備自身是否是冗余&高可用。當(dāng)虛擬化設(shè)備物理節(jié)點(diǎn)宕機(jī),主機(jī)讀寫虛擬化卷是否中斷,數(shù)據(jù)是否丟失。預(yù)置條件:虛擬化已部署完畢主機(jī)可以使用虛擬資源測(cè)試步驟:虛擬化設(shè)備管理了外部A,在對(duì)A的數(shù)據(jù)進(jìn)行讀寫時(shí),(例如:oracle數(shù)據(jù)過(guò)程中)宕掉虛擬化設(shè)備一個(gè)節(jié)點(diǎn),觀察主機(jī)端IO反應(yīng)預(yù)期結(jié)果:主機(jī)應(yīng)用繼續(xù)進(jìn)行單節(jié)點(diǎn)故障將導(dǎo)致SVC 進(jìn)入write through模式以保護(hù)數(shù)據(jù)的安全性備注:4. 快照卷分配給主機(jī)檢驗(yàn)數(shù)據(jù)的一致性預(yù)期結(jié)果:用戶可以靈活的創(chuàng)建基于一對(duì)多模式,層疊模式,混合模式的異構(gòu)卷快照異構(gòu)卷快照具有數(shù)據(jù)一致性保護(hù)備注:SVC對(duì)于一個(gè)源卷,最多支持256個(gè)快照4.3.3
22、.虛擬化通道安全性4.3.4.主機(jī)到主通道安全性項(xiàng)目:主機(jī)到主通道安全性分項(xiàng)目:主機(jī)到主通道安全性用例:版本:1.0項(xiàng)目:虛擬化通道安全性分項(xiàng)目:虛擬化通道安全性用例:版本:1.0參考文檔:參考組網(wǎng):重要性:高優(yōu)先級(jí):6測(cè)試目的:SVC與被虛擬化之間通道部分?jǐn)嚅_(kāi),主機(jī)讀寫虛擬化卷是否中斷,數(shù)據(jù)是否丟失。預(yù)置條件:虛擬化已部署完畢主機(jī)可以使用虛擬資源(部署了oracle應(yīng)用)測(cè)試步驟:虛擬化設(shè)備管理了外部A,兩者有光纖鏈路多條在對(duì)A的數(shù)據(jù)進(jìn)行讀寫時(shí)(oracle數(shù)據(jù)),斷開(kāi)部分光纖鏈路觀察oracle應(yīng)用是否停止預(yù)期結(jié)果:1. 主機(jī)及應(yīng)用持續(xù)運(yùn)行備注:重要性:高優(yōu)先級(jí):6測(cè)試目的:虛擬化設(shè)備是否
23、能 升級(jí)(特別是硬件整體升級(jí))。當(dāng)虛擬化設(shè)備物理節(jié)點(diǎn)硬件整體升級(jí)(硬件淘汰),主機(jī)讀寫虛擬化卷是否中斷,數(shù)據(jù)是否丟失,容災(zāi)是否中斷。預(yù)置條件:虛擬化已部署完畢主機(jī)可以使用虛擬資源(部署了oracle應(yīng)用)測(cè)試步驟:在oracle應(yīng)用交易過(guò)程中(例如:oracle)SVC由舊的硬件設(shè)備替換(升級(jí))到新的硬件設(shè)備及新的微碼版本預(yù)期結(jié)果:1. 即便是硬件淘汰、替換也不需要主機(jī)應(yīng)用停機(jī)備注:隨著技術(shù)的發(fā)展,虛擬化設(shè)備應(yīng)支持無(wú)縫升級(jí)。不需要停機(jī)窗口和服務(wù)中斷。移動(dòng)資源由虛擬化設(shè)備管理后,虛擬化設(shè)備軟、硬件(特別是硬件整體,因?yàn)楝F(xiàn)在的硬件數(shù)年后可能會(huì)淘汰,需要更新)設(shè)備的淘汰或升級(jí)帶來(lái)的風(fēng)險(xiǎn)和安全性影響特
24、別是服務(wù)中斷將移動(dòng)造成極大損失。4.3.5.數(shù)據(jù)卷安全性4.3.6.管理安全性項(xiàng)目:管理安全性分項(xiàng)目:管理安全性用例:版本:1.0參考文檔:參考組網(wǎng):項(xiàng)目:數(shù)據(jù)卷安全性分項(xiàng)目:數(shù)據(jù)卷安全性用例:版本:1.0參考文檔:參考組網(wǎng):重要性:高優(yōu)先級(jí):6測(cè)試目的:在實(shí)施了RAID保護(hù)的被虛擬化上某磁盤損壞的情況下,主機(jī)讀寫虛擬化卷是否中斷,數(shù)據(jù)是否丟失。預(yù)置條件:虛擬化已部署完畢主機(jī)可以使用虛擬資源(部署了oracle應(yīng)用)測(cè)試步驟:SVC管理了外部A拔掉A的某RAID組的其中1塊盤觀察主機(jī)端的oracle應(yīng)用反應(yīng)預(yù)期結(jié)果:1. 主機(jī)及應(yīng)用持續(xù)運(yùn)行備注:參考文檔:參考組網(wǎng):重要性:高優(yōu)先級(jí):6測(cè)試目的
25、:主機(jī)到SVC之間通道部分?jǐn)嚅_(kāi),主機(jī)讀寫虛擬化卷是否中斷,數(shù)據(jù)是否丟失預(yù)置條件:虛擬化已部署完畢主機(jī)可以使用虛擬資源(部署了oracle應(yīng)用)測(cè)試步驟:SVC管理了外部A,主機(jī)和SVC間有多條鏈路在對(duì)A的數(shù)據(jù)進(jìn)行讀寫時(shí)(oracle數(shù)據(jù)),斷開(kāi)部分主機(jī)到SVC的光纖鏈路觀察oracle應(yīng)用是否停止預(yù)期結(jié)果:1. 主機(jī)及應(yīng)用持續(xù)運(yùn)行備注:4.3.7.用戶賬號(hào)與權(quán)限管理4.3.8.用戶操作日志審計(jì)項(xiàng)目:用戶操作日志審計(jì)分項(xiàng)目:用戶操作日志審計(jì)用例:版本:1.0參考文檔:參考組網(wǎng):重要性:高優(yōu)先級(jí):6測(cè)試目的:能夠追蹤審計(jì)什么人、什么時(shí)間、什么地點(diǎn)、做了安全管理的基石。本項(xiàng)測(cè)試將針對(duì)以上問(wèn)題。項(xiàng)目:
26、用戶賬號(hào)與權(quán)限管理分項(xiàng)目:用戶賬號(hào)與權(quán)限管理用例:版本:1.0參考文檔:參考組網(wǎng):重要性:高優(yōu)先級(jí):6測(cè)試目的:基于角色的權(quán)限管理是安全的基礎(chǔ)和有效。本項(xiàng)測(cè)試虛擬化設(shè)備是否具有基于角色的賬號(hào)和權(quán)限管理功能預(yù)置條件:無(wú)測(cè)試步驟:1. 演示虛擬化設(shè)備是否具有不同角色賬號(hào)和權(quán)限管理的功能。預(yù)期結(jié)果:1. SVC不同角色的賬號(hào)用戶具有嚴(yán)格的管理權(quán)限的限定備注:重要性:高優(yōu)先級(jí):6測(cè)試目的:虛擬化設(shè)備自身的安全性非常重要,需要考量管理數(shù)據(jù)是否加密,是否需要密鑰才能管理。預(yù)置條件:無(wú)測(cè)試步驟:網(wǎng)絡(luò)中用戶獲得SVCIP及用戶名、口令。測(cè)試其能否SVC,能否管理SVC的資源預(yù)期結(jié)果:無(wú)私有密鑰和相應(yīng)共有密鑰的
27、以太網(wǎng)用戶無(wú)法和管理SVCSVC管理數(shù)據(jù)為密文發(fā)送備注:4.4.靈活性測(cè)試虛擬設(shè)備提供豐富的資源管理功能,例如遷入機(jī)制、回退機(jī)制、部分虛擬化、Thin Proviing、分區(qū)、基于粒度的IO SLA管理、數(shù)據(jù)遷移及信息生命周期管理等 (請(qǐng)參考Excellent表中靈活性部分)4.4.1. 遷入(虛擬化環(huán)境遷入到虛擬化環(huán)境)項(xiàng)目:虛擬化環(huán)境遷入到虛擬化環(huán)境分項(xiàng)目:虛擬化環(huán)境遷入到虛擬化環(huán)境用例:版本:1.0參考文檔:參考組網(wǎng):重要性:高優(yōu)先級(jí):6測(cè)試目的:驗(yàn)證虛擬化是否支持遷入、遷入復(fù)雜度、遷入后能否正確啟動(dòng)數(shù)據(jù)庫(kù)、需要采取什么措施。確認(rèn)現(xiàn)有數(shù)據(jù)是否能安全遷入虛擬化環(huán)境。預(yù)置條件:主機(jī)直連環(huán)境主
28、機(jī)應(yīng)用(oracle)直接資源測(cè)試步驟:向 oracle 數(shù)據(jù)庫(kù)中數(shù)據(jù),并變更停止 oracle 數(shù)據(jù)庫(kù)(包括backup server)主機(jī)上刪除現(xiàn)有設(shè)備(varyoffvg、exportvg、rmdev)修改masking(在上刪除masking 給 host1 關(guān)系)修改 zone 配置(刪除host to storage zone|增加 SVC to storage zone、SVC to host zone)修改masking(改為 masking 給 SVC)SVC 掃描新盤,發(fā)現(xiàn)個(gè)新的 mdisk預(yù)置條件:無(wú)測(cè)試步驟:演示虛擬設(shè)備是否具有操作日志審計(jì)功能。是否能夠追蹤審計(jì)“什么人
29、、什么時(shí)間、什么地點(diǎn)、做了什么”預(yù)期結(jié)果:1. SVC具有操作日志審計(jì)功能。備注:4.4.2. 遷出(虛擬化環(huán)境遷入到虛擬化環(huán)境)項(xiàng)目:由虛擬化環(huán)境遷出到非虛擬化環(huán)境分項(xiàng)目:由虛擬化環(huán)境遷出到非虛擬化環(huán)境用例:版本:1.0參考文檔:參考組網(wǎng):重要性:高優(yōu)先級(jí):6測(cè)試目的:驗(yàn)證虛擬化是否支持回退、回退復(fù)雜度、回退后能否正確啟動(dòng)數(shù)據(jù)庫(kù)、需要采取什么措施。確認(rèn)是否會(huì)被虛擬化技術(shù)鎖死。預(yù)置條件:虛擬化已部署完畢主機(jī)可以使用虛擬資源(部署了oracle應(yīng)用)測(cè)試步驟:停止 oracle 數(shù)據(jù)庫(kù)主機(jī)上刪除現(xiàn)有設(shè)備(varyoffvg、exportvg、rmdev)刪除 mdisk group(此步驟將刪除
30、 image mvdisk 會(huì)將 mdisk 變回 unmanaged m)修改 zone 配置(增加host to storage zone|刪除 SVC to storage zone、SVC to host zone)修改masking(改為 masking 給host)主機(jī)識(shí)別設(shè)備并啟動(dòng)數(shù)據(jù)庫(kù)應(yīng)用(cfgmgr、importvg、startserver)驗(yàn)證遷移后數(shù)據(jù)一致性SVC 將卷(s)由 unmanaged mdisk 模式遷移到 image mvdisk主機(jī)安裝 SDD(如需要,主機(jī)卸載mutilpath)SVC 將 vdisk(image m) masking 給 host主
31、機(jī)識(shí)別設(shè)備并啟動(dòng)數(shù)據(jù)庫(kù)應(yīng)用(cfgmgr、importvg、startserver)驗(yàn)證遷移前后數(shù)據(jù)的一致性預(yù)期結(jié)果:1. 通過(guò)SVC,應(yīng)用成功虛擬化環(huán)境遷入到虛擬化環(huán)境,且數(shù)據(jù)一致備注:4.4.3.部分虛擬化4.4.4.分區(qū)項(xiàng)目:用戶操作日志審計(jì)分項(xiàng)目:用戶操作日志審計(jì)用例:版本:1.0參考文檔:參考組網(wǎng):重要性:中優(yōu)先級(jí):5測(cè)試目的:測(cè)試SVC和被虛擬化這個(gè)整體能否進(jìn)行基于緩存、通道的分區(qū),以保證服務(wù)質(zhì)量預(yù)置條件:SVC虛擬化設(shè)備虛擬化外部A,B,C把A、B、C的通道、空間和緩存劃分為3個(gè)分區(qū)(A分區(qū)、B分區(qū)、C分區(qū))A分區(qū)主機(jī)節(jié)點(diǎn)為X,部署應(yīng)用oracleB分區(qū)主機(jī)節(jié)點(diǎn)為YC分區(qū)主機(jī)節(jié)點(diǎn)
32、為Z項(xiàng)目:部分虛擬化分項(xiàng)目:部分虛擬化用例:版本:1.0參考文檔:參考組網(wǎng):重要性:高優(yōu)先級(jí):6測(cè)試目的:能否實(shí)現(xiàn)容量的一部分虛擬化,另一部分可以被主機(jī)直接;是否實(shí)現(xiàn)分步式虛擬化預(yù)置條件:虛擬化已部分部署完畢(SVC管理了系統(tǒng)A的部分容量,另一部分容量由主機(jī)直接)主機(jī)X可以使用虛擬資源(部署了oracle應(yīng)用)主機(jī)Y可以直接系統(tǒng)A的資源(部署了oracle應(yīng)用)測(cè)試步驟:驗(yàn)證此架構(gòu)的可行性(虛擬化和非虛擬化共存)將剩余未虛擬化部分遷移到虛擬化環(huán)境,并驗(yàn)證主機(jī)Y遷移前后數(shù)據(jù)一致性。(詳細(xì)步驟見(jiàn)遷入部分)預(yù)期結(jié)果:SVC具部分虛擬化能力,具有逐步遷入應(yīng)用的能力備注:預(yù)期結(jié)果:1. 通過(guò)SVC,應(yīng)用
33、成功由虛擬化環(huán)境遷出到非虛擬化環(huán)境,且數(shù)據(jù)一致備注:4.4.5.基于粒度的 IO SLA 管理4.4.6.動(dòng)態(tài)容量供應(yīng)(thin proviing)項(xiàng)目:thin proviing功能分項(xiàng)目:thin proviing功能用例:版本:1.0參考文檔:參考組網(wǎng):重要性:中優(yōu)先級(jí):5項(xiàng)目:基于粒度的IO SLA管理分項(xiàng)目:基于粒度的IO SLA管理用例:版本:1.0參考文檔:參考組網(wǎng):重要性:中優(yōu)先級(jí):5測(cè)試目的:測(cè)試虛擬化設(shè)備所管理的虛擬化能否實(shí)現(xiàn)針對(duì)每個(gè)/volume的 SLA管理(限定/volume的IOPS or Throughput)預(yù)置條件:虛擬化已部署完畢主機(jī)可以使用虛擬資源(部署了
34、oracle應(yīng)用)測(cè)試步驟:將oracle使用的資源vdisk的IOPS or Throughput設(shè)置為n運(yùn)行oracle,交易完成花費(fèi)時(shí)間將oracle使用的資源vdisk的IOPS or Throughput設(shè)置為2n運(yùn)行oracle,交易完成花費(fèi)時(shí)間比對(duì)兩次交易完成時(shí)間(由于針對(duì)每個(gè)vdisk的SLA管理(限定了vdisk的IOPS or Throughput)預(yù)期結(jié)果:1. 針對(duì)vdisk的IOPS or Throughput 設(shè)定可以控制、影響應(yīng)用對(duì)虛擬資源的使用備注:此測(cè)試也可通過(guò)SVC vdisk性能數(shù)據(jù),從而獲得更加直觀的結(jié)果。測(cè)試步驟:在B、C分區(qū)Y、Z主機(jī)不做任何IO操作
35、時(shí),對(duì)oracle大量數(shù)據(jù),交易完成時(shí)間。在B、C分區(qū)Y、Z主機(jī)做繁忙IO操作時(shí)(例如:大數(shù)據(jù)塊dd),對(duì)oracle大量數(shù)據(jù),交易完成時(shí)間。對(duì)比X節(jié)點(diǎn)在兩種情況下交易完成時(shí)間有無(wú)區(qū)別。是否做到的分區(qū)隔離預(yù)期結(jié)果:1. 兩次交易時(shí)間無(wú)區(qū)別,SVC分區(qū)有效。備注:4.4.7. 環(huán)境改變度項(xiàng)目:環(huán)境改變度分項(xiàng)目:環(huán)境改變度用例:版本:1.0參考文檔:參考組網(wǎng):重要性:中優(yōu)先級(jí):5測(cè)試目的:同4.1.1虛擬化環(huán)境遷入到虛擬化環(huán)境預(yù)置條件:同4.1.1虛擬化環(huán)境遷入到虛擬化環(huán)境測(cè)試步驟:同4.1.1虛擬化環(huán)境遷入到虛擬化環(huán)境預(yù)期結(jié)果:同4.1.1虛擬化環(huán)境遷入到虛擬化環(huán)境測(cè)試目的:測(cè)試虛擬化卷能否支持
36、thin proviing 功能, 是否支持 thin proviing的自動(dòng)擴(kuò)展功能及容量上限閾值。預(yù)置條件:虛擬化已部署完畢主機(jī)可以使用虛擬資源測(cè)試步驟:SVC創(chuàng)建容量為100GB池(該池包含一個(gè)100GB的mdisk)利用SVC的thin proviing功能,在100GB池中創(chuàng)建出150GB的vdisk分配給主機(jī)使用。設(shè)定當(dāng)物理容量使用大于80GB時(shí)產(chǎn)生(容量上限閾值)主機(jī)識(shí)別vdisk,觀測(cè)主機(jī)上顯示的vdisk容量。主機(jī)寫入80GB的數(shù)據(jù),觀測(cè)SVC是否。動(dòng)態(tài)調(diào)整vdisk容量為200GB觀測(cè)主機(jī)上顯示的vdisk容量。池中加入新的mdisk2(容量100GB)動(dòng)態(tài)調(diào)整當(dāng)物理容量使
37、用大于120GB時(shí)產(chǎn)生(修改容量上限閾值)預(yù)期結(jié)果:thin proviing基本功能:邏輯容量物理容量。主機(jī)識(shí)別的是邏輯容量。thin proviing具有容量上限閾值邏輯容量可以動(dòng)態(tài)增加物理容量可以動(dòng)態(tài)增加上限閾值容量可以動(dòng)態(tài)調(diào)整(增加或減少)備注:4.4.8. 數(shù)據(jù)遷移及信息生命周期管理項(xiàng)目:數(shù)據(jù)遷移及信息生命周期管理分項(xiàng)目:數(shù)據(jù)遷移及信息生命周期管理用例:版本:1.0參考文檔:參考組網(wǎng):重要性:高優(yōu)先級(jí):6測(cè)試目的:以往數(shù)據(jù)遷移是基于主機(jī)和數(shù)據(jù)庫(kù)級(jí)別的,靈活性差,風(fēng)險(xiǎn)高;所以發(fā)生概率低(有時(shí)想遷移卻不敢冒風(fēng)險(xiǎn))。 虛擬化的基本功能應(yīng)提供( )架構(gòu)的動(dòng)態(tài)化,應(yīng)提供有效信息生命周期管理功能
38、。 虛擬化后,中國(guó)移動(dòng)對(duì) 的視角將有原來(lái)的孤島變?yōu)椤叭?”,數(shù)據(jù)根據(jù)其時(shí)間價(jià)值及性能要求的不同應(yīng)該能夠靈活的在全局 中 移動(dòng)。本子項(xiàng)將測(cè)試Any To Any(任意)的異構(gòu) 間數(shù)據(jù)遷移,并測(cè)試遷移粒度(卷或“塊”級(jí)別遷移),遷移過(guò)程同時(shí)實(shí)現(xiàn)數(shù)據(jù)重新分布。需要保證數(shù)據(jù)遷移時(shí)對(duì)主機(jī)透明和數(shù)據(jù)一致性。同時(shí)遷移過(guò)程對(duì)應(yīng)用的影響可以控制。預(yù)置條件:虛擬化已部署完畢(虛擬化異構(gòu)A/B/C)主機(jī)可以使用虛擬資源(部署了oracle應(yīng)用)測(cè)試步驟:主機(jī)應(yīng)用oracle使用A上資源oracle進(jìn)行交易 場(chǎng)景一:應(yīng)用數(shù)據(jù)整體遷移通過(guò)SVC將oracle應(yīng)用數(shù)據(jù)整體到B或C上。假設(shè)原來(lái)vdisk為Sequenti
39、al模式,遷移到目標(biāo)后變?yōu)镾triped模式。遷移過(guò)程設(shè)定遷移線程1-4(其中1對(duì)應(yīng)用影響最小,遷移時(shí)間長(zhǎng);4遷移速度最快,對(duì)應(yīng)用影響大)場(chǎng)景一:應(yīng)用數(shù)據(jù)部分遷移(“塊粒度”)通過(guò)SVC將oracle應(yīng)用數(shù)據(jù)以“塊”級(jí)別部分遷移到B或C上(詳細(xì)見(jiàn):4.1.2 靈活消除熱點(diǎn)盤功能測(cè)試)遷移過(guò)程設(shè)定遷移線程1-4(其中1對(duì)應(yīng)用影響最小,遷移時(shí)間長(zhǎng);4遷移速度最快,對(duì)應(yīng)用影響大)預(yù)期結(jié)果:遷移過(guò)程對(duì)主機(jī)和應(yīng)用透明可以控制遷移的速度,從而控制對(duì)應(yīng)用的性能影響可以在不同類型的池間遷移數(shù)據(jù)( Sequential 模式遷移到Striped模式)備注:備注:同4.1.1虛擬化環(huán)境遷入到虛擬化環(huán)境4.5.擴(kuò)展
40、性4.6.性能測(cè)試虛擬化后對(duì)影響是否可控。性能的影響;測(cè)試各種高級(jí)數(shù)據(jù)拷貝服務(wù)對(duì)生產(chǎn)系統(tǒng)造成的4.6.1. 主機(jī)性能(直接遷入)項(xiàng)目:主機(jī)性能(直接遷入)分項(xiàng)目:主機(jī)性能(直接遷入)用例:版本:1.0參考文檔:參考組網(wǎng):重要性:高優(yōu)先級(jí):6測(cè)試目的:測(cè)試數(shù)據(jù)被虛擬化前后的讀和寫性能比較預(yù)置條件:遷移前架構(gòu)應(yīng)用性能測(cè)試遷移后架構(gòu)應(yīng)用性能測(cè)試測(cè)試步驟:虛擬化前,主機(jī)應(yīng)用oracle直接讀寫A,觀察性能(交易完成時(shí)間);虛擬化設(shè)備虛擬化外部A后,主機(jī)應(yīng)用oracle通過(guò)虛擬化設(shè)備來(lái)讀寫A,觀察性能(交易完成時(shí)間)。比對(duì)數(shù)據(jù)項(xiàng)目:被虛擬化的個(gè)數(shù)和容量分項(xiàng)目:被虛擬化的個(gè)數(shù)和容量用例:版本:1.0參考文
41、檔:參考組網(wǎng):重要性:中優(yōu)先級(jí):2測(cè)試目的:測(cè)試在多、大容量情況下的性能表現(xiàn)預(yù)置條件:受制于測(cè)試的數(shù)量和容量無(wú)法實(shí)測(cè)。續(xù)提供相關(guān)可靠資料供用戶參考。測(cè)試步驟:無(wú)預(yù)期結(jié)果:參見(jiàn)備注備注:個(gè)數(shù)和容量可提供廠家技術(shù)白皮書作為證明。但性能應(yīng)以第測(cè)試標(biāo)準(zhǔn)數(shù)據(jù)才有意義。(類似小型機(jī)TPCC值)4.6.2.主機(jī)性能(遷入優(yōu)化后)4.6.3.異構(gòu)卷克隆、快照性能項(xiàng)目:異構(gòu)卷克隆、快照性能分項(xiàng)目:異構(gòu)卷克隆、快照性能用例:版本:1.0參考文檔:參考組網(wǎng):重要性:高優(yōu)先級(jí):6測(cè)試目的:測(cè)試在Any To Any(任意)的異構(gòu) 克隆或快照過(guò)程中,能否動(dòng)態(tài)控制克隆或快照的數(shù)據(jù)流量,從而減少對(duì) 應(yīng)用性能的影響。即克隆和
42、快照是否能夠?qū)崿F(xiàn)流量控制,從而減少對(duì)生產(chǎn)的影響。預(yù)置條件:虛擬化已部署完畢(虛擬化異構(gòu)A/B/C)主機(jī)可以使用虛擬資源(部署了oracle應(yīng)用)測(cè)試步驟:主機(jī)應(yīng)用oracle通過(guò)虛擬化讀寫A(vdiskn),觀察性能(交易完成時(shí)間)通過(guò)SVC作vdiskn的快照或克隆到B或C。項(xiàng)目:主機(jī)性能(遷入優(yōu)化后)分項(xiàng)目:主機(jī)性能(遷入優(yōu)化后)用例:版本:1.0參考文檔:參考組網(wǎng):重要性:高優(yōu)先級(jí):6測(cè)試目的:測(cè)試數(shù)據(jù)被虛擬化前和完成虛擬化并利用SVC動(dòng)態(tài)架構(gòu)優(yōu)化后(經(jīng)過(guò)虛擬化調(diào)優(yōu))的讀和寫性能比較預(yù)置條件:遷移前架構(gòu)應(yīng)用性能測(cè)試遷移后架構(gòu)應(yīng)用性能測(cè)試測(cè)試步驟:虛擬化前,主機(jī)應(yīng)用oracle直接讀寫A,
43、觀察性能(交易完成時(shí)間);虛擬化設(shè)備虛擬化外部A并并利用SVC動(dòng)態(tài)架構(gòu)優(yōu)化后,主機(jī)應(yīng)用oracle通過(guò)虛擬化設(shè)備來(lái)讀寫A,觀察性能(交易完成時(shí)間)。比對(duì)數(shù)據(jù)預(yù)期結(jié)果:獲得直接遷入并優(yōu)化后應(yīng)用性能影響數(shù)據(jù)。備注:預(yù)期結(jié)果:獲得直接遷入后性能影響數(shù)據(jù)。備注:4.6.4.異構(gòu)容災(zāi)性能4.7.兼容性考量虛擬化產(chǎn)品的兼容性,從而確認(rèn)此產(chǎn)品是否保護(hù)現(xiàn)有投資并衡量對(duì)未來(lái)選型的靈活性的影響。4.7.1.品牌和型號(hào)支持情況項(xiàng)目:品牌和型號(hào)支持情況分項(xiàng)目:品牌和型號(hào)支持情況項(xiàng)目:異構(gòu)容災(zāi)性能分項(xiàng)目:異構(gòu)容災(zāi)性能用例:版本:1.0參考文檔:參考組網(wǎng):重要性:低優(yōu)先級(jí):3測(cè)試目的:測(cè)試Any To Any(任意)的異構(gòu)間容災(zāi)實(shí)現(xiàn)的吞吐量。預(yù)置條件:生產(chǎn)中心一套SVC1管理了系統(tǒng)A和B,容災(zāi)中心一套SVC2管理了系統(tǒng)C(A、B、C為異構(gòu)廠商系統(tǒng))生產(chǎn)中心主機(jī)X部署oracle在SVC創(chuàng)建的vdisk1、vdisk2上。(其中vdisk1物理在A上;vdisk2物理在B上)兩中心間建立光纖鏈路測(cè)試步驟:建立容災(zāi)關(guān)系開(kāi)始初始化拷貝拷貝完成時(shí)間或帶寬流量調(diào)整SVC中帶寬控制設(shè)置重新開(kāi)始初始化拷貝觀測(cè)調(diào)整后對(duì)初始化
溫馨提示
- 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 小學(xué)語(yǔ)文一年級(jí)教學(xué)工作計(jì)劃2
- 二零二五年度企業(yè)內(nèi)訓(xùn)師徒結(jié)對(duì)合作協(xié)議
- 藥房2025年度員工培訓(xùn)與聘用一體化協(xié)議
- 二零二五年度智能制造專利申請(qǐng)與轉(zhuǎn)化委托代理合同
- 二零二五年度賬戶變更補(bǔ)充安全防護(hù)協(xié)議
- 2025年食堂工作人員聘用及績(jī)效考核協(xié)議
- 二零二五年度航空航天入股分紅管理合同
- 二零二五年度特種材料采購(gòu)專項(xiàng)合同
- 二零二五年度代理記賬及財(cái)務(wù)報(bào)表編制協(xié)議
- 二零二五年度體育賽事燈光師聘用協(xié)議
- 8.3 摩擦力(共28張) 2024-2025學(xué)年人教版物理八年級(jí)下冊(cè)
- 2025年陜西延長(zhǎng)石油物流集團(tuán)有限公司招聘筆試參考題庫(kù)含答案解析
- 2025年部編版語(yǔ)文三年級(jí)下冊(cè)全冊(cè)單元測(cè)試題附答案(共8個(gè)單元)
- 兒童腺樣體肥大治療方案-深度研究
- 2025年合肥經(jīng)濟(jì)技術(shù)職業(yè)學(xué)院?jiǎn)握新殬I(yè)適應(yīng)性測(cè)試題庫(kù)帶答案
- 2025年懷化職業(yè)技術(shù)學(xué)院?jiǎn)握新殬I(yè)技能測(cè)試題庫(kù)必考題
- 2025年第六屆(中小學(xué)組)國(guó)家版圖知識(shí)競(jìng)賽測(cè)試題庫(kù)及答案
- 2025年中國(guó)床墊機(jī)械行業(yè)市場(chǎng)發(fā)展監(jiān)測(cè)及投資戰(zhàn)略咨詢報(bào)告
- C小學(xué)一起諾如病毒胃腸炎疫情的調(diào)查與處置課件
- 2025年鎵礦采選項(xiàng)目投資可行性研究分析報(bào)告
- 歐泰科-吊掛軟件使用教程
評(píng)論
0/150
提交評(píng)論