云時代的存儲及虛擬化技術(shù)交流_第1頁
云時代的存儲及虛擬化技術(shù)交流_第2頁
云時代的存儲及虛擬化技術(shù)交流_第3頁
云時代的存儲及虛擬化技術(shù)交流_第4頁
云時代的存儲及虛擬化技術(shù)交流_第5頁
已閱讀5頁,還剩60頁未讀, 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報或認(rèn)領(lǐng)

文檔簡介

云時代的存儲及虛擬化技術(shù)交流宏杉科技西區(qū)總監(jiān)李濤交流前幾個小問題有多少臺服務(wù)器?存儲?備份和容災(zāi)是怎么做的?有沒有以下現(xiàn)象:多數(shù)服務(wù)器利用率很低,卻需要經(jīng)常購買新的服務(wù)器上線一個應(yīng)用要很長時間實(shí)際業(yè)務(wù)熱點(diǎn)與規(guī)劃不符PC維護(hù)工作量大個人端數(shù)據(jù)涉密管理難有應(yīng)用要發(fā)布到移動設(shè)備數(shù)據(jù)中心運(yùn)營過程中最頭疼的問題有哪些?您認(rèn)為服務(wù)器加硬盤做RAID和存儲有什么區(qū)別?目錄宏杉科技簡介為什么要用專業(yè)存儲云時代的IT架構(gòu)建設(shè)方向虛擬化數(shù)據(jù)中心及存儲相關(guān)技術(shù)小結(jié)服務(wù)器、PC:天河一號、曙光、浪潮、聯(lián)想….網(wǎng)絡(luò)通信:華為、中興、H3C、銳捷…存儲需要自主創(chuàng)新:全球存儲市場每年$500億,中國存儲市場每年¥100億;是未來最大、增長最快的市場。中國當(dāng)前排名前列的IBM、EMC、HP、HDS、DELL全部為國外企業(yè),占據(jù)超過90%的市場,合資品牌和OEM產(chǎn)品占據(jù)8%的市場,自主廠商嚴(yán)重缺失;存儲是決定數(shù)據(jù)安全、系統(tǒng)整體性能、IT系統(tǒng)架構(gòu)的關(guān)鍵性產(chǎn)品;存儲是自主創(chuàng)新空白,中國數(shù)據(jù)安全面臨巨大風(fēng)險。101010101011101101101010101011101101101010101010101010011010傳輸存儲計算三大IT基礎(chǔ)設(shè)施存儲:?中國IT基礎(chǔ)設(shè)施產(chǎn)業(yè)格局5宏杉科技的管理、研發(fā)、市場、供應(yīng)鏈、用服團(tuán)隊骨干均來自原H3C公司存儲產(chǎn)品線,是中國企業(yè)級存儲產(chǎn)品開發(fā)經(jīng)驗(yàn)最豐富、市場成就卓著的團(tuán)隊。

2010年5月成立宏杉科技、總部在杭州。H3C自2005年進(jìn)入存儲領(lǐng)域,到2009年Q4,H3C自主開發(fā)存儲產(chǎn)品年銷售收入約$50M,超越HDS、Netapp、SUN等存儲業(yè)界老牌廠商,銷售份額排名中國市場第五(前四名分別為:IBM、EMC、HP、DELL),國產(chǎn)第一。在iSCSI存儲領(lǐng)域,H3C開創(chuàng)了中國IPSAN市場,從2006年Q4H3C推出第一代存儲產(chǎn)品后,連續(xù)三年在中國IPSAN市場排名第一(市場份額30%以上)。在存儲市場最大的中端Midrange市場中,H3C已超越DELL位居第四,國產(chǎn)第一。截止到2009年12月,H3C在線運(yùn)行的存儲系統(tǒng)總和超過9000臺,存儲總裝機(jī)容量超過70,000TB。在把握中國需求,幫助中國用戶實(shí)現(xiàn)共享災(zāi)備和物聯(lián)網(wǎng)時代的監(jiān)控存儲2個領(lǐng)域結(jié)合本土需求進(jìn)行創(chuàng)新,從技術(shù)和市場上均超越國際品牌?!獢?shù)據(jù)來自IDCChinaStorageReport2009歷史成績卓越的本土專業(yè)化團(tuán)隊《老兵新傳》目前中國唯一具有存儲軟、硬件全面核心自主知識產(chǎn)權(quán)的全內(nèi)資、專業(yè)存儲廠商。產(chǎn)品技術(shù)自主、可控。世界領(lǐng)先的硬件能力,MS5000主控板為12層設(shè)計,超4000元器件。自主設(shè)計的底層存儲架構(gòu),百萬行C語言代碼。已申報18項國家專利,多項軟件著作權(quán)。中央政府采購入圍企業(yè);中直機(jī)關(guān)采購入圍企業(yè)。目前是SNIA(國際存儲工業(yè)協(xié)會)唯一中國內(nèi)資企業(yè)投票會員,是IEEE(國際電子電器工程師協(xié)會)會員,擁有專有的OUI地址段。國家十二五電子政務(wù)規(guī)劃起草單位之一。國家電子政務(wù)內(nèi)網(wǎng)方案起草和評審專家單位。專業(yè)、自主:中國唯一7MS5000MS3000MS1000ICMTCRAIDIDDC全系列硬件產(chǎn)品ODSP軟件平臺快照復(fù)制鏡像IDSM存儲中間件面向云計算面向物聯(lián)網(wǎng)流媒體應(yīng)用(廣域監(jiān)控)面向共享災(zāi)備IDSM:IntelligentDataServiceManagement,智能數(shù)據(jù)服務(wù)管理自主可控ODSP:OpenDataStoragePlatform,開放式數(shù)據(jù)存儲平臺高性能硬件架構(gòu),高/中/低端三大系列主要研發(fā)方向MS3300高端存儲中端存儲低端存儲MS5080MS1000擁有國內(nèi)存儲企業(yè)中最完整的企業(yè)級存儲產(chǎn)品線;單臺設(shè)備覆蓋10萬~數(shù)百萬的產(chǎn)品區(qū)間;MS5020/5040單控制器最大16GB緩存最大266塊硬盤CRAID0/1/10/5/6支持4個GE低功耗MS3100Intel64位處理器單、雙控制器選配最大16GB緩存最大266/516塊硬盤CRAID0/1/10/5/64個主機(jī)接口插槽Intel多核64位處理器雙控制器最大32GB緩存最大516/1016塊硬盤CRAID0/1/10/5/64個主機(jī)接口插槽IntelJasper處理器雙控制器最大144GB緩存最大516/1016塊硬盤CRAID0/1/10/5/64個主機(jī)接口插槽IntelJasper處理器雙控制器最大288GB緩存最大516/1016塊硬盤CRAID0/1/10/5/64個主機(jī)接口插槽唯一能與國外巨頭抗衡的從高到低全線產(chǎn)品打造最適合云計算時代的數(shù)據(jù)中心存儲田忌賽馬,打造最優(yōu)秀的中端存儲將最先進(jìn)的技術(shù)下移到用量最大的中端市場,打破國外巨頭為中端存儲人為制造的技術(shù)封鎖針對虛擬化設(shè)計,輕松應(yīng)對云計算時代的需求MS5000緩存容量高達(dá)288G,是國外同檔次存儲的5倍以上,系統(tǒng)內(nèi)部帶寬達(dá)到百G級,是國外同檔次產(chǎn)品的2-3倍,特別適合虛擬化環(huán)境以CELL為中心的ICMT,輕松的應(yīng)對云計算時代無處不在的動態(tài)熱點(diǎn)。更有遠(yuǎn)程復(fù)制容災(zāi),WSAN,SRM,CDP等方案保障虛擬化數(shù)據(jù)中心的數(shù)據(jù)安全和業(yè)務(wù)連續(xù)。研發(fā)級現(xiàn)場服務(wù),讓用戶高枕無憂存儲有其特殊性,對服務(wù)的要求比其他硬件都高存儲目前是IT領(lǐng)域標(biāo)準(zhǔn)化和兼容性最差的產(chǎn)品。相比網(wǎng)絡(luò)設(shè)備等硬件,存儲跟上層服務(wù)器、操作系統(tǒng)、數(shù)據(jù)庫等結(jié)合緊密,疑難雜癥出現(xiàn)的概率相比其他硬件產(chǎn)品要高。國外廠商不可能派“大鼻子”研發(fā)到國內(nèi)提供現(xiàn)場服務(wù),遠(yuǎn)程登錄導(dǎo)致的泄密屢見不鮮。宏杉與其他國內(nèi)品牌不同宏杉其他品牌軟件系統(tǒng)、核心電路板自主研發(fā),技術(shù)上自主、可控OEM國外產(chǎn)品,或者軟件、硬件部分OEM來自國外廠商,技術(shù)上不可控委托富士康、飛旭制造,高品質(zhì)為了降低成本自己攢產(chǎn)品,質(zhì)量差研發(fā)級現(xiàn)場服務(wù),有任何問題都可以快速解決掌握不了核心技術(shù),疑難雜癥老外不來,只能“拖”和“躲”CRAID5組Cell1Cell2Cell3重建CRAID:20年來RAID技術(shù)最重要要的創(chuàng)新90%的存儲故障障與硬盤相相關(guān)CRAID5在多塊磁盤發(fā)生生介質(zhì)錯誤誤時,保證證數(shù)據(jù)不丟丟失!大幅度改進(jìn)RAID算法,將RAID重建時間減減少85%!保留Cell重建整盤重建拷貝面向本土客戶需需求的快速速創(chuàng)新能力力WSAN:唯一規(guī)模應(yīng)應(yīng)用的、適適合國情的的“災(zāi)備云云”方案站點(diǎn)1…站點(diǎn)2站點(diǎn)nWAN中心站點(diǎn)靈活的實(shí)現(xiàn)現(xiàn)多點(diǎn)到一一點(diǎn)災(zāi)備組組網(wǎng)。有40-50用戶共享統(tǒng)統(tǒng)一災(zāi)備中中心的歷史史案例。靈活的數(shù)據(jù)據(jù)同步技術(shù)術(shù),各分支支機(jī)構(gòu)的應(yīng)應(yīng)用系統(tǒng)相相互獨(dú)立,,互不干擾擾。國家級部委委國家級電子子政務(wù)內(nèi)網(wǎng)網(wǎng)國家水利部部國家計生委委國家住建部部國家民政部部東區(qū)浙江省建設(shè)設(shè)廳浙江省公安安廳浙江省計生生委委浙江省監(jiān)獄獄管理局浙江省經(jīng)濟(jì)濟(jì)信息中心心浙江省臺州州檔案局浙江省余姚姚城建檔案案館浙江省海鹽鹽檔案館浙能溫州電電廠喬司監(jiān)獄容容災(zāi)備份12吳興農(nóng)村合合作銀行杭州市交通通警察支隊隊南昌鐵路中中院數(shù)字法法庭南區(qū)廣州荔灣區(qū)區(qū)政府廣州省高速速公路管理理局廣東外語藝藝術(shù)職業(yè)學(xué)學(xué)院廣東省高速速公路公司司廣東外語藝藝術(shù)職業(yè)學(xué)學(xué)院廣東藥學(xué)院院附屬第二二醫(yī)院中山市公安安局南頭分分局南寧市交警警支隊存儲儲項目西區(qū)中國兵器器工業(yè)集集團(tuán)公司司中石油長長慶油田田采氣五五廠中鋼集團(tuán)團(tuán)西安重重機(jī)有限限公司甘肅省隴隴南市地地震局咸陽師范范學(xué)院中國人民民解放軍軍邊防學(xué)學(xué)院中國兵器器工業(yè)第第203研究所西安市碑碑林區(qū)政政府云南省運(yùn)運(yùn)輸管理理局某軍區(qū)三三甲醫(yī)院院HIS系統(tǒng)文山州財財政保山市財財政文山市公公共衛(wèi)生生信息管管理曲靖供電電公司云南藝術(shù)術(shù)學(xué)院新新校區(qū)北區(qū)中國航天天科工集集團(tuán)信息息研究院院用友軟件件集團(tuán)公公司私有有云IT黑龍江檢檢察院信信息查詢詢系統(tǒng)赤峰電力力SG186濟(jì)南鍋爐爐集團(tuán)宏杉新產(chǎn)產(chǎn)品各行行業(yè)典型型案例目錄宏杉科技技簡介為什么要要用專業(yè)業(yè)存儲云時代的的IT架構(gòu)建設(shè)設(shè)方向虛擬化數(shù)數(shù)據(jù)中心心及存儲儲相關(guān)技技術(shù)小結(jié)為什么需需要專業(yè)業(yè)存儲??1、容量??有多少用用戶的業(yè)業(yè)務(wù)數(shù)據(jù)據(jù)超過2T?為服務(wù)器器增加硬硬盤數(shù)量量即可解解決服務(wù)器外外掛JBOD(盤柜))2、性能??數(shù)量眾多多的服務(wù)務(wù)器使用用率在10%以下服務(wù)器內(nèi)內(nèi)多塊硬硬盤通過過RAID卡做RAID也提升性性能(RAID卡誕生的的原因::通過多多個廉價價磁盤實(shí)實(shí)現(xiàn)更大大容量、、更快性性能和壞壞盤容錯錯)某品牌JBOD某品牌服務(wù)器RAID卡3、設(shè)備共共享,提提升利用用率?4、數(shù)據(jù)共共享?文件服務(wù)務(wù)器就可可以做NAS的本質(zhì)就就是文件件服務(wù)器器,所謂謂NAS機(jī)頭都是是服務(wù)器器,或者者把NAS服務(wù)器虛虛擬化到到存儲控控制器中中為什么需需要專業(yè)業(yè)存儲??如果只因因?yàn)橐陨仙线@4點(diǎn)原因,,絕大多多數(shù)用戶戶都只需需要服務(wù)務(wù)器為什么需需要專業(yè)業(yè)存儲??數(shù)據(jù)能丟丟嗎?“我在服務(wù)務(wù)器內(nèi)部部也可以以做RAID,數(shù)據(jù)一一樣不會會丟?!闭媸沁@樣樣的嗎??業(yè)務(wù)能停停嗎?雙雙機(jī)高可可用(HA)-盤陣誕生,大量應(yīng)用用服務(wù)器廠廠商高興興了,可可以賣更更多的服服務(wù)器,,順便也也賣點(diǎn)盤盤陣盤陣對服服務(wù)器廠廠商來說說是附屬屬,從來來沒有花花太多精精力:OEM低端盤陣陣的產(chǎn)品品形態(tài)::面向單單一業(yè)務(wù)務(wù),小緩緩存,性性能低,,數(shù)據(jù)管管理功能能幾乎沒沒有或不不可用服務(wù)器與與專業(yè)存存儲有啥啥區(qū)別??——看硬件((控制器器)17有的廠商商把能裝裝很多硬硬盤的服服務(wù)器做做成存儲儲服務(wù)器器當(dāng)存儲儲賣,能能買嗎??存儲服務(wù)器/存儲服務(wù)器/服務(wù)器存儲存儲服務(wù)器服務(wù)器和和專業(yè)存存儲有啥啥區(qū)別??—看系統(tǒng)架架構(gòu)SATADiskSASDiskSSDDiskDDRIII內(nèi)存DDRIII內(nèi)存...Jasper多核處理理器SAS控制器SASExpanderPCIex840GbSASx424Gb南橋管理GE口串口指示燈按鍵SAS接口SAS接口SASx424Gb存儲控制制器RAID引擎DMI9根256Gb1GbiSCSI10GbiSCSI10GbFCoE8GbFCIO模塊(IOH)QPIIOSlotIOSlotPCIex840Gb>100Gb主機(jī)通道道DDRIII內(nèi)存DDRIII內(nèi)存...Jasper多核處理器SAS控制器SAS

ExpanderPCIex840GbSASx424Gb南橋管理GE口串口指示燈按鍵SAS接口SAS接口SASx424Gb存儲控制器RAID引擎

DMI9根256Gb1GbiSCSI10GbiSCSI10Gb

FCoE8GbFCIO模塊(IOH)QPIIOSlotIOSlotPCIex840Gb>100Gb主機(jī)通道PCIex840Gb緩存鏡像服務(wù)器和和專業(yè)存存儲有啥啥區(qū)別??——看數(shù)據(jù)管管理19前端總線線后端總線線讀緩存寫緩存前端總線線后端總線線磁盤CPUCPUCPUCPU讀緩存寫緩存鏡像通道主機(jī)接口口主機(jī)接口口磁盤接口口磁盤接口口數(shù)據(jù)流數(shù)據(jù)管理理涉及很很多方面面,在此此僅以數(shù)數(shù)據(jù)寫入入流向?yàn)闉榘咐M(jìn)進(jìn)行分析析前端總線線后端總線線內(nèi)存磁盤CPUCPU主機(jī)接口口磁盤接口口數(shù)據(jù)流服務(wù)器存儲全面看待待服務(wù)器器和專業(yè)業(yè)存儲的的區(qū)別服務(wù)器(含服務(wù)器存儲/存儲服務(wù)器)專業(yè)外置存儲硬件架構(gòu)本質(zhì)與PC類似,是一套單機(jī)系統(tǒng),故障單點(diǎn)多。CPU,主板,內(nèi)存,RAID卡,緩存等任何單一部件故障都可能引起數(shù)據(jù)丟失和業(yè)務(wù)宕機(jī)本質(zhì)上是一套完全冗余的、面向容錯的雙機(jī)系統(tǒng)。硬件構(gòu)成:2套高端服務(wù)器做控制器+硬件全冗余的盤陣+負(fù)責(zé)雙機(jī)之間內(nèi)存鏡像和內(nèi)存掉電保護(hù)的專業(yè)系統(tǒng)。任何單一部件故障都不會引起數(shù)據(jù)丟失和業(yè)務(wù)宕機(jī)。內(nèi)嵌操作系統(tǒng)本質(zhì)是一套單機(jī)操作系統(tǒng)。類似一套Linuxserver本質(zhì)是2套操作系統(tǒng),增加雙活機(jī)制,再增加緩存鏡像和掉電保護(hù)機(jī)制。類似2套Linuxserver+雙機(jī)HA軟件+專業(yè)的雙機(jī)緩存鏡像和緩存掉電保護(hù)軟件。支持的數(shù)據(jù)管理功能單純的計算、存取功能面向“萬無一失”的、強(qiáng)大的數(shù)據(jù)管理功能:寫緩存鏡像緩存掉電保護(hù)快照同步、異步復(fù)制/鏡像自動數(shù)據(jù)遷移/分層自動精簡配置……為什么需需要專業(yè)業(yè)存儲??大集中、、虛擬化化、云計計算、物物聯(lián)網(wǎng)……應(yīng)用數(shù)量量和數(shù)據(jù)量迅速膨膨脹,數(shù)據(jù)中心心走向大大型化;;存儲從原原來的前前端只需需接1-2臺單任務(wù)務(wù)服務(wù)器器變成需需要接入入眾多的的物理或虛擬服服務(wù)器、、虛擬終端端,眾多高IO和高帶寬應(yīng)用用混合,,緩存、、帶寬、、性能急急需上臺臺階虛擬化環(huán)環(huán)境下的的漂移和和HA等高級功功能要求求將原來來裝在服服務(wù)器端端的操作作系統(tǒng)和和數(shù)據(jù)完完全虛化化后轉(zhuǎn)移移到存儲儲中,服服務(wù)器端端只承擔(dān)擔(dān)簡單的的計算功功能,存存儲成為整個個IT系統(tǒng)性能能、彈性性、數(shù)據(jù)據(jù)保護(hù)、、業(yè)務(wù)連連續(xù)的核核心存儲還需需要支持持眾多的的數(shù)據(jù)管理理和保護(hù)護(hù)功能::快照、、鏡像、、遠(yuǎn)程容災(zāi)、自動精精簡配置置、自動動數(shù)據(jù)遷移移等,更更對緩存和和性能提提出新的要求求FC-SANIP-SAN光纖交換機(jī)以太網(wǎng)交換機(jī)公文系統(tǒng)公眾服務(wù)OA辦公網(wǎng)站郵件存儲替代代服務(wù)器器成為主主角不止是用用戶需要要專業(yè)存存儲,服務(wù)器廠廠商也開開始“慌慌忙”收收購存儲技術(shù)術(shù)公司離開專業(yè)業(yè)存儲,,用戶最最關(guān)心的的要素都都是紙上上談兵??!IT基礎(chǔ)架構(gòu)構(gòu)層最重重要的因因素盡量少丟丟數(shù)據(jù)(RPO恢復(fù)點(diǎn)目目標(biāo))盡量不停停業(yè)務(wù)(RTO恢復(fù)時間間目標(biāo)))性能高+彈性大信息安全全管理簡單單采購成本本低運(yùn)營成本本低業(yè)務(wù)應(yīng)用數(shù)據(jù)目錄宏杉科技技簡介為什么要要用專業(yè)業(yè)存儲云時代的的IT架構(gòu)建設(shè)設(shè)方向虛擬化數(shù)數(shù)據(jù)中心心及存儲儲相關(guān)技技術(shù)小結(jié)云“云”像用水和電電一樣享享用服務(wù)務(wù)云是一種種服務(wù)模模式的描描述,并并不是IT人的發(fā)明明經(jīng)濟(jì)學(xué)本本質(zhì),是是以信息息交換為為基礎(chǔ)的的全局性性資源配置“云計算算”像用水和和電一樣樣使用IT資源和服服務(wù)用戶重新新將注意意力聚焦焦到業(yè)務(wù)務(wù)本身,,而不是是IT技術(shù)實(shí)現(xiàn)現(xiàn)的分水水嶺構(gòu)建私有有云,租租用公有有云是用用戶提升升自身業(yè)業(yè)務(wù)競爭爭力的必必然結(jié)果果是IT走向成熟熟的必然然結(jié)果工業(yè)和信信息化部部和國家家發(fā)展改改革委于于2010年10月18日聯(lián)合印印發(fā)《關(guān)于做好好云計算算服務(wù)創(chuàng)創(chuàng)新發(fā)展展試點(diǎn)示示范工作作的通知知》,確定在在北京、、上海、、深圳、、杭州、、無錫等等五個城城市先行行開展云云計算服服務(wù)創(chuàng)新新發(fā)展試試點(diǎn)示范范工作。。原則:自主、可可控、高高效總體思路路:加強(qiáng)統(tǒng)統(tǒng)籌規(guī)劃劃、突出出安全保保障、創(chuàng)創(chuàng)造良好好環(huán)境、、推進(jìn)產(chǎn)產(chǎn)業(yè)發(fā)展展、著力力試點(diǎn)示示范、實(shí)實(shí)現(xiàn)重點(diǎn)點(diǎn)突破主要內(nèi)容容:(一)針針對政府府、大中中小企業(yè)業(yè)和個人人等不同同用戶需需求,研研究推進(jìn)進(jìn)SaaS(軟件即即服務(wù)))、PaaS(平臺即即服務(wù)))和IaaS(基礎(chǔ)設(shè)設(shè)施即服服務(wù))等等服務(wù)模模式創(chuàng)新新發(fā)展。。可選擇擇若干信信息服務(wù)務(wù)骨干企企業(yè)作為為試點(diǎn)企企業(yè),建建設(shè)云計計算中心心(平臺臺),面面向全國國開展相相關(guān)服務(wù)務(wù)。(二)以信息息服務(wù)骨干企企業(yè)牽頭、產(chǎn)產(chǎn)學(xué)研用聯(lián)合合方式,加強(qiáng)強(qiáng)虛擬化技術(shù)術(shù)、分布式存存儲技術(shù)、海海量數(shù)據(jù)管理理技術(shù)等核心心技術(shù)研發(fā)和和產(chǎn)業(yè)化。(三)組建全全國性云計算算產(chǎn)業(yè)聯(lián)盟,,形成云計算算創(chuàng)新發(fā)展的的合力。(四)加強(qiáng)云云計算技術(shù)標(biāo)標(biāo)準(zhǔn)、服務(wù)標(biāo)標(biāo)準(zhǔn)和有關(guān)安安全管理規(guī)范范的研究制定定。25政府力推云計算的的原因及關(guān)注注點(diǎn)云,為中國提提供了一個重重要機(jī)遇,即即跨越簡單的的物理集中階階段,直接進(jìn)進(jìn)入資源整合合和業(yè)務(wù)重構(gòu)構(gòu)的高級階段段。IT建設(shè)三朵“云云”基礎(chǔ)架構(gòu)云建設(shè)大型虛擬擬化數(shù)據(jù)中心心,集中托管管各部門應(yīng)用用橫向建設(shè)公有有云涉及安全全、部門利益益及中央、地地方縱向管理理,推進(jìn)困難難縱向行業(yè)內(nèi)建建設(shè)私有云比比較可行災(zāi)備云建設(shè)集中共享享的應(yīng)用級/數(shù)據(jù)級災(zāi)備中中心解決投資和人人力缺乏的問問題可以短期內(nèi)成成規(guī)模、可盈盈利的云應(yīng)用用高性能計算云云為政府、企業(yè)業(yè)、科研機(jī)構(gòu)構(gòu)提供高性能能計算服務(wù)公益性運(yùn)營比較多被誤導(dǎo),建設(shè)設(shè)最多、收效效最小的建設(shè)設(shè)模式云時代的IT架構(gòu)服務(wù)器/計算池存儲池接入多樣化網(wǎng)絡(luò)無邊界基礎(chǔ)架構(gòu)虛擬擬化桌面/應(yīng)用虛擬化使用者專注業(yè)務(wù),,無需關(guān)心技技術(shù)實(shí)現(xiàn)任何地點(diǎn)任何終端數(shù)據(jù)中心任何時間任何服務(wù)云時代的IT基礎(chǔ)架構(gòu)建設(shè)核心是虛擬化的數(shù)數(shù)據(jù)中心目錄宏杉科技簡介介為什么要用專專業(yè)存儲云時代的IT架構(gòu)建設(shè)方向向虛擬化數(shù)據(jù)中中心及存儲相相關(guān)技術(shù)小結(jié)服務(wù)器虛擬化化VMwareOperatingSystemApplications虛擬化的關(guān)鍵鍵特征硬件獨(dú)立可以在其他服務(wù)器上不加修改的運(yùn)行虛擬機(jī)兼容性虛擬機(jī)完全兼容標(biāo)準(zhǔn)的操作系統(tǒng),以及在這些操作系統(tǒng)之上建立的硬件驅(qū)動和應(yīng)用隔離每一個虛擬機(jī)都與同在一個服務(wù)器上的其他虛擬機(jī)相隔離封裝虛擬機(jī)將整個系統(tǒng),包括硬件配置、操作系以及應(yīng)用等封裝在文件里…………...………………...………………...……用VMotion減少計劃內(nèi)宕宕機(jī)時間在服務(wù)不中斷斷的情況下進(jìn)進(jìn)行有計劃的的服務(wù)器維護(hù)護(hù)和升級遷移工作負(fù)載載,資源利用用率最大化x86ArchitectureVMwareESXServerx86ArchitectureVMwareESXServerVMotion遷移虛擬機(jī)共享存儲通過HA確保系統(tǒng)高可可用VMwareHA發(fā)生服務(wù)器故故障時在其他他的物理服務(wù)務(wù)器上自動重重啟虛擬機(jī)客戶優(yōu)勢對所有的應(yīng)用用實(shí)現(xiàn)了高可可用性,并且且成本很低不需要完全一一致的重復(fù)硬硬件比傳統(tǒng)的集群群有更高的成成本優(yōu)勢,同同時易于使用用和操作資源池X共享存儲…在不同的主機(jī)機(jī)上同步運(yùn)行行相同的虛擬擬機(jī)出現(xiàn)硬件故障障時,所有虛虛擬機(jī)均可實(shí)實(shí)現(xiàn)零停機(jī)時時間、零數(shù)據(jù)據(jù)損失故障切換VMwarevSphere?操作系統(tǒng)應(yīng)用程序操作系統(tǒng)應(yīng)用程序操作系統(tǒng)應(yīng)用程序X通過FT確保應(yīng)用高可用共享存儲…使用DRS進(jìn)行資源優(yōu)化化DRS是什么?跨資源池動態(tài)態(tài)平衡計算資資源基于預(yù)先設(shè)定定的規(guī)則智能能分配資源對客戶的優(yōu)勢勢基于業(yè)務(wù)優(yōu)先先級分配IT資源動態(tài)添加硬件件資源而避免免在繁忙時段段服務(wù)器的過過載動態(tài)硬件維護(hù)護(hù)能力簡化運(yùn)行,大幅度度提高系統(tǒng)管管理員的生產(chǎn)產(chǎn)率資源池業(yè)務(wù)需求共享存儲…資源池業(yè)務(wù)需求關(guān)閉群集需要的資資源越少,就就將工作負(fù)載載整合到越少少的服務(wù)器上上將不需要的服服務(wù)器置于待待機(jī)模式工作負(fù)載需要要增加時,再再恢復(fù)服務(wù)器器在線狀態(tài)保證服務(wù)級別別的同時減少少電力消耗虛擬機(jī)不中斷斷、不停機(jī)DPM:分布式電源源管理共享存儲…虛擬化對節(jié)省能源源的貢獻(xiàn)=60007000度電元使用專用的轉(zhuǎn)轉(zhuǎn)換工具在線線無縫地將物理理系統(tǒng)

轉(zhuǎn)換換為虛擬機(jī)CitrixMetaframe服務(wù)器MicrosoftIISWeb服務(wù)器MicrosoftSQLServerMicrosoftExchange服務(wù)器物理機(jī)到虛擬擬機(jī)的遷移非非常簡單SAN/NAS/iSCSIVirtualCenterESXServer宕機(jī)!虛擬化數(shù)據(jù)中中心存儲系統(tǒng)統(tǒng)可靠性更加加重要存儲宕機(jī)!整個虛擬化平臺崩潰?。?!應(yīng)用VCB保護(hù)數(shù)據(jù)VCB是什么?集中的、無代代理的虛擬機(jī)機(jī)備份將備份移出虛虛擬機(jī)減少備份代理理和數(shù)量消除生產(chǎn)虛擬擬機(jī)的備份負(fù)負(fù)載充分利用虛擬擬機(jī)快照功能能支持SAN、iSCSI和NAS和主流的第三三方的備份產(chǎn)產(chǎn)品預(yù)集成客戶優(yōu)勢在白天就可以以執(zhí)行備份任任務(wù)集中的、文件件級的備份實(shí)實(shí)現(xiàn)了簡單、、可靠的數(shù)據(jù)據(jù)保護(hù)集中的數(shù)據(jù)遷遷移器存儲復(fù)制+SRM實(shí)現(xiàn)虛擬化環(huán)境下下應(yīng)用級災(zāi)備備40X86服務(wù)器ESXServersVC管理中心SRMSiteRecoveryManager服務(wù)X86服務(wù)器ESXServersVC管理中心SRM受保護(hù)的虛擬擬機(jī)基于IP的遠(yuǎn)程復(fù)制生產(chǎn)中心災(zāi)備中心MS3000存儲MS3000存儲概述通過存儲陣列列遠(yuǎn)程復(fù)制與與VMwareSRM融合,使VMware用戶能夠快速速部署災(zāi)備系系統(tǒng),并實(shí)現(xiàn)現(xiàn)數(shù)據(jù)同步和和完美切換。按照預(yù)先的規(guī)規(guī)劃進(jìn)行測試試和一鍵切換換容災(zāi)等級國家標(biāo)準(zhǔn)5級RPO<10minRTO分鐘級適用于VM環(huán)境下的業(yè)務(wù)務(wù)StorageVMotion:遷移虛擬機(jī)文件和和優(yōu)化存儲虛擬機(jī)磁盤存存儲獨(dú)立遷移移無需虛擬機(jī)停停機(jī)LUN獨(dú)立支持光纖通道道SAN應(yīng)用程序操作

系統(tǒng)應(yīng)用程序操作

系統(tǒng)應(yīng)用程序操作

系統(tǒng)無中斷:刷新到新陣列列遷移到不同類類別的存儲器器升級到新文件件系統(tǒng)格式虛擬機(jī)粒度,,LUN獨(dú)立桌面/應(yīng)用虛擬化遷移桌面映像到數(shù)據(jù)中心桌面安全的運(yùn)行在數(shù)據(jù)中心通過網(wǎng)絡(luò)交付桌面全新的托管服服務(wù)模式用戶個性化應(yīng)用程序操作系統(tǒng)集中式管理桌面交付革新桌面遠(yuǎn)程容災(zāi)存儲儲雙機(jī)HAFC/IP-SAN在線存儲生產(chǎn)數(shù)據(jù)中心遠(yuǎn)程災(zāi)備中心備份存儲\磁帶庫漂移SRA插件服務(wù)器虛擬化化HBA卡…數(shù)據(jù)網(wǎng)服務(wù)器存儲網(wǎng)存儲兼容和整合其其他品牌存儲儲數(shù)據(jù)備份雙機(jī)雙陣列近線連續(xù)數(shù)據(jù)保護(hù)護(hù)CDP遠(yuǎn)程復(fù)制桌面/應(yīng)用虛擬化SRM站點(diǎn)恢復(fù)管理SRA插件虛擬化數(shù)據(jù)中中心的整體架架構(gòu)存儲是虛擬化化數(shù)據(jù)中心的的核心,直接接決定整個系系統(tǒng)的數(shù)據(jù)安安全和整體性性能。全球PC-網(wǎng)絡(luò)-服務(wù)器-存儲投資比例例中國占比15%中國占比9%中國占比9%中國占比3%存儲投資急需需擴(kuò)大存儲是未來用用戶最需要關(guān)關(guān)注的大型基基礎(chǔ)設(shè)施141.高性能物理/虛擬服務(wù)器數(shù)數(shù)量劇增,海海量數(shù)據(jù)、復(fù)復(fù)雜多任務(wù)處處理;大緩存、高帶帶寬、高性能能;多協(xié)議支持、、負(fù)載均衡;;3.安全磁盤高故障率率,單盤容量量巨增,傳統(tǒng)統(tǒng)RAID風(fēng)險加大;磁盤故障主動動檢測及修復(fù)復(fù);RAID機(jī)制的優(yōu)化及及快速重建;;冗余和數(shù)據(jù)保保護(hù);2.彈性未知的容量需需求,突發(fā)的的性能熱點(diǎn),,靜態(tài)設(shè)置失失效;空間按需分配配,容量動態(tài)態(tài)擴(kuò)展;數(shù)據(jù)自動遷移移,自動分級級存儲;234.管理大規(guī)模部署,,使用管理復(fù)復(fù)雜,數(shù)據(jù)中中心運(yùn)營自動動化;面向應(yīng)用向?qū)?dǎo)式配置,自自動調(diào)優(yōu);面向業(yè)務(wù)的集集中式管理;;開放數(shù)據(jù)接口口。數(shù)據(jù)中心存儲虛擬化數(shù)據(jù)中中心對存儲的的關(guān)鍵需求46141.性能基于IntelJasper的創(chuàng)新架構(gòu)設(shè)計288G超大緩存;百百G級端到端內(nèi)部部總線,硬RAID,高性能;PCI-E2.0、SAS2.0、SSD;10GE/FC/FCoE接口、負(fù)載均均衡;3.安全高可靠性設(shè)計計;主動磁盤檢測測與修復(fù);基于Cell的RAID重建優(yōu)化;高級數(shù)據(jù)保護(hù)護(hù)特性;2.彈性基于Cell的虛擬化技術(shù)術(shù);空間按需分配配,容量動態(tài)態(tài)擴(kuò)展;數(shù)據(jù)自動遷移移,自動分級級存儲;開放體系架構(gòu)構(gòu);234.管理智能數(shù)據(jù)服務(wù)務(wù)管理;配置向?qū)?、性性能監(jiān)控、告告警聯(lián)動。MS5000:虛擬化數(shù)據(jù)中中心解決之道道4748存儲性能的衡衡量指標(biāo)IOPS———數(shù)據(jù)庫型小數(shù)數(shù)據(jù)塊高并發(fā)發(fā)帶寬(MB/s)——文件型大數(shù)據(jù)據(jù)塊持續(xù)傳輸輸影響存儲性能能的因素緩存容量及調(diào)調(diào)度磁盤介質(zhì)類型型和數(shù)量內(nèi)部總線帶寬寬主機(jī)接口類型型及帶寬磁盤接口類型型及帶寬處理器計算能能力RAID類型及條帶大大小前端總線后端總線緩存磁盤CPUCPU主機(jī)接口磁盤接口數(shù)據(jù)流鏡像通道高速(計算、傳輸輸)低速(硬盤介質(zhì)))矛盾緩存存磁盤盤決定定存存儲儲性性能能和和檔檔次次的的因因素素MS5000的緩緩存存可可達(dá)達(dá)到到288G如果果控控制制器器是是發(fā)發(fā)動動機(jī)機(jī)緩存存就就是是排排氣氣量量廠商商為為什什么么不不把把緩緩存存設(shè)設(shè)計計大大點(diǎn)點(diǎn)??1、技技術(shù)術(shù)上上難難,,絕絕大大部部分分廠廠商商沒沒掌掌握握,,比比如如::寫緩緩存存要要鏡鏡像像,,產(chǎn)產(chǎn)品品內(nèi)內(nèi)部部帶帶寬寬能能力力要要匹匹配配。。緩存存如如何何實(shí)實(shí)現(xiàn)現(xiàn)掉掉電電保保護(hù)護(hù)。。緩存存大大了了難難管管,,性性能能和和調(diào)調(diào)度度算算法法要要求求高高。。2、個個別別廠廠商商掌掌握握技技術(shù)術(shù),,但但怕怕沖沖擊擊高高端端壟壟斷斷市市場場49緩存存機(jī)機(jī)制制異異常常復(fù)復(fù)雜雜,,緩緩存存容容量量決決定定性性能能。。因因此此緩緩存存大大小小成成為為衡衡量量產(chǎn)產(chǎn)品品檔檔次次的的關(guān)關(guān)鍵鍵指指標(biāo)標(biāo)??!EMC緩存容量VMAX雙引擎256GBVNX750048GBVNX570032GBVNX550024GBVNX530016GBVNX51008GB產(chǎn)品品檔檔次次注::EMC產(chǎn)品品規(guī)規(guī)格格數(shù)數(shù)據(jù)據(jù)均均來來自自EMC網(wǎng)站站公公開開資資料料最專業(yè)業(yè)的的緩緩存存掉掉電電保保護(hù)護(hù)技技術(shù)術(shù)作用用斷電電保保護(hù)護(hù)只只針針對對寫寫緩緩存存,,防防止止系系統(tǒng)統(tǒng)意意外外斷斷電電導(dǎo)導(dǎo)致致的的寫寫緩緩存存數(shù)數(shù)據(jù)據(jù)丟丟失失。。保護(hù)護(hù)機(jī)機(jī)制制電池池保保護(hù)護(hù)::斷電電時時,,通通過過存存儲儲控控制制器器內(nèi)內(nèi)置置電電池池為為寫寫緩緩存存提提供供小小時時級級的的供供電電。。數(shù)據(jù)據(jù)刷刷到到專專用用SSD磁盤盤::斷電電時時,,存存儲儲控控制制器器將將數(shù)數(shù)據(jù)據(jù)下下刷刷到到內(nèi)內(nèi)置置的的SSD磁盤盤中中,,此此過過程程一一般般為為數(shù)數(shù)分分鐘鐘,,由由控控制制器器內(nèi)內(nèi)置置電電池池供供電電。。數(shù)據(jù)據(jù)刷刷到到保保留留磁磁盤盤::斷電電時時,,存存儲儲控控制制器器將將數(shù)數(shù)據(jù)據(jù)下下刷刷保保留留磁磁盤盤中中,,此此過過程程一一般般為為數(shù)數(shù)分分鐘鐘,,由由控控制制器器內(nèi)內(nèi)置置電電池池供供電電。。保護(hù)機(jī)制斷電保護(hù)時間數(shù)據(jù)可靠性緩存大小用戶磁盤空間占用位置電池保護(hù)數(shù)十小時低較小不占用控制器內(nèi)置電池數(shù)據(jù)刷到專用SSD磁盤永久保存中,單塊SSD存在風(fēng)險大不占用控制器內(nèi)置SSD磁盤數(shù)據(jù)刷到保留磁盤永久保存高,完善的RAID保護(hù)大占用少量用戶磁盤空間一般位于系統(tǒng)前4塊盤可靠靠性性51PCI-E2.0最高高速速的的總總線線帶帶寬寬技技術(shù)術(shù),,單單通通道道帶帶寬寬5Gb,16通道道帶帶寬寬80GbSAS2.0單端端口口帶帶寬寬達(dá)達(dá)到到6Gb四路路寬寬端端口口帶帶寬寬達(dá)達(dá)到到24GbIntelJasper首次次在在CPU內(nèi)置置RAID加速速引引擎擎支持持288GB的大大容容量量緩緩存存支持持SSDPhyPhyPhyPhyPhyPhyPhyPhy四路路SAS寬端端口口四路路SAS寬端端口口6Gb*4SASX25-EExtreme(SLC),32GB,SATA,

ZeusIOPS,1TB,SATA,3.5”(MLC),256GB,

SATAII,2.5”SSD盤隨機(jī)機(jī)訪訪問問性性能能提提升升100倍價格格大大幅幅降降低低,,容容量量接接近近機(jī)機(jī)械械硬硬盤盤PCI-E2.0通道編碼數(shù)據(jù)速率單向雙向×15Gbps10Gbps×420Gbps40Gbps×840Gbps80Gbps×1680Gbps160GbpsDDR31333(9*Slot)XOR引擎16PCI-EGen2QPIJasperForest多核處理器DMI南橋IO模塊新一一代代存存儲儲博采采眾家家之之長的的新新一一代代硬硬件件架架構(gòu)構(gòu)更專專業(yè)業(yè)的的設(shè)設(shè)計計,,內(nèi)內(nèi)部部總總線線更更寬寬某廠廠商商基基于于Jasper的新新品品主機(jī)機(jī)接接口口、、鏡鏡像像通通道道、、磁磁盤盤通通道道總帶帶寬寬60G宏杉杉基基于于Jasper的MS5000主機(jī)機(jī)通通道道、、鏡鏡像像通通道道、、磁磁盤盤通通道道總帶帶寬寬>180G挑戰(zhàn)戰(zhàn)業(yè)業(yè)界界難題題::硬硬盤盤故障障率率高高+RAID技術(shù)術(shù)無無創(chuàng)創(chuàng)新新類型業(yè)務(wù)壓力重建時間1TBSATA(7200轉(zhuǎn))無業(yè)務(wù)壓力20小時持續(xù)寫壓力5-6天600GB

SAS(15000轉(zhuǎn))無業(yè)務(wù)壓力4小時持續(xù)寫壓力22小時表::硬硬盤盤初初始始化化/重建建時時間間測試試環(huán)環(huán)境境::RAID5,15+1塊硬硬盤盤:1TBSATA磁盤盤在在無無流流量量壓壓力力下下的的重重建建時時間間??!20小時據(jù)統(tǒng)統(tǒng)計計,,存存儲儲系系統(tǒng)統(tǒng)的的硬硬件件故故障障90%以上上是是硬硬盤盤故故障障!!故障障硬硬盤盤中中,,只只有有12%是完完全全的的物物理理損損壞壞,,88%屬于于部部分分/完全全可可用用到第第3年,,相相比比中中等等壓壓力力的的硬硬盤盤,,空閑閑硬硬盤盤的的故故障障率率更更高高隨著著硬硬盤盤容容量量的的加加大大,,RAID重建建時時間間不不斷斷加加長長,數(shù)數(shù)據(jù)據(jù)丟丟失失風(fēng)風(fēng)險險急急劇劇加加大大。。硬盤盤第第1年的的故故障障率率為為2-5%,并并隨隨使使用用年年限限增增加加而而增高業(yè)界難題題!RAID:廉價磁磁盤冗余余陣列,,為了利利用廉價磁盤盤實(shí)現(xiàn)高性性能、大大容量、、更可靠靠而誕生生的CRAID5組Cell1Cell2Cell3數(shù)據(jù)盤數(shù)據(jù)盤數(shù)據(jù)盤熱備盤重建CRAID:基于Cell的RAID技術(shù)故障修復(fù)磁盤檢測故障處理主動預(yù)防快速修復(fù)減少誤判CRAID大幅度改改進(jìn)RAID算法,將將硬盤細(xì)細(xì)化為上上千個存存儲單元元進(jìn)行管管理將RAID重建時間間減少85%!CRAID5在多塊磁盤發(fā)發(fā)生介質(zhì)質(zhì)錯誤時時,保證證數(shù)據(jù)不不丟失??!IDDC主動探測測和修復(fù)復(fù)磁盤介介質(zhì)錯誤誤將硬盤故故障導(dǎo)致致的RAID失效幾率率減少80%!IDDC:智能磁盤盤檢測中中心技術(shù)術(shù)保留Cell重建整盤重建拷貝CRAID:20年來RAID技術(shù)最重重要的創(chuàng)創(chuàng)新LUN規(guī)劃700GB,但初次次實(shí)際使使用300GBLUN經(jīng)過一年年,數(shù)據(jù)據(jù)增量為為200GB實(shí)際分配配500GBLUN…新增配置置200GB實(shí)際分配配300GBLUN…規(guī)劃700GB的LUN,應(yīng)用可可識別實(shí)際分配配700GB系統(tǒng)智能能增配Cell12LUN再經(jīng)過一一年,數(shù)數(shù)據(jù)再增增長200GB,達(dá)到700GB的規(guī)劃值值3…LUN………新增配置置200GB系統(tǒng)智能能增配Cell容量按需需分配自動分層層存儲/自動數(shù)據(jù)據(jù)遷移SSDSAS15K轉(zhuǎn)SAS7.2K轉(zhuǎn)支持硬盤盤混插+基于CELL的自動遷遷移56數(shù)據(jù)卷快照快照快照連續(xù)數(shù)據(jù)快照實(shí)現(xiàn)快速智能的本地數(shù)據(jù)多點(diǎn)備份,有效防范各種軟錯誤WAN數(shù)據(jù)卷復(fù)制卷網(wǎng)絡(luò)復(fù)制制實(shí)現(xiàn)跨廣廣域的遠(yuǎn)遠(yuǎn)程災(zāi)備備,應(yīng)對對各種自自然災(zāi)難難或人為為破壞數(shù)據(jù)鏡像實(shí)現(xiàn)鏡像數(shù)據(jù),有效避免單數(shù)據(jù)卷故障導(dǎo)致的業(yè)務(wù)中斷數(shù)據(jù)卷鏡像卷=快照拷貝貝對某一時時間點(diǎn)數(shù)數(shù)據(jù)的完完全拷貝貝,可用用于備份份、測試試業(yè)務(wù)數(shù)據(jù)級保護(hù)應(yīng)用級保護(hù)備份級保護(hù)數(shù)據(jù)卷快照卷快照資源區(qū)支持高級級數(shù)據(jù)管管理功能能572010-2014年:FC仍將占據(jù)據(jù)主導(dǎo)地地位;FC、iSCSI、FCoE等多協(xié)議議共存來源:IDC2009Q4PRCStorageMarketOverview1979870803SCSI2000882010~2014FCiSCSIFCoEESCON1990NFS9685CIFS傳輸協(xié)議議從封閉到開放!主機(jī)接口口可配置置MS5000:虛擬化化數(shù)據(jù)中中心最佳佳選擇/最好的中中端存儲儲MS5000友商同檔次中端產(chǎn)品最大的緩存288G(配合百G級帶寬,輕松處理更多業(yè)務(wù)和虛擬機(jī),達(dá)到性能巔峰)幾十G最寬的內(nèi)部總線全球首家在中端實(shí)現(xiàn)百G級內(nèi)部帶寬<20-30G最高的性能Jasper處理器(Xeon+集成硬RAID)E友商用Xeon(軟RAID)H友商用Xeon+ASIC芯片(ASIC做硬RAID,但發(fā)展與Xeon不匹配,總線慢一代,緩存做不大)最可靠的RAID技術(shù)獨(dú)家專利CRAID允許N塊盤出現(xiàn)介質(zhì)故障不丟數(shù)據(jù),重建效率提升N倍最完善的磁盤管理IDDC主動式磁盤檢測、診斷和修復(fù),將硬盤故障導(dǎo)致的宕機(jī)減少80%最適合云計算數(shù)據(jù)中心的虛擬化和彈性資源分配ICMT智能數(shù)據(jù)資源管理,支持?jǐn)?shù)據(jù)按需在不同性能的磁盤上自動遷移,自動分層,容量彈性

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論