




版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
數(shù)據(jù)中心虛擬化攻略PagePAGE2PagePAGE2of30數(shù)據(jù)中心虛擬化完全攻略數(shù)據(jù)中心虛擬化完全攻略如今,有許多企業(yè)數(shù)據(jù)中心都在采用服務(wù)器虛擬化技術(shù)。這對(duì)企業(yè)有很大影響,特別是在如今困難的經(jīng)濟(jì)狀況下,服務(wù)器虛擬化可以給企業(yè)在服務(wù)器硬件、機(jī)架空間、能源消耗以及冷卻等方面節(jié)省很大的開(kāi)支。但是,大多數(shù)企業(yè)的虛擬機(jī)部署都顯得過(guò)于保守。這些企業(yè)單是依靠物理服務(wù)器整合就取得了許多顯著的成就。如果他們?cè)龠M(jìn)行虛擬機(jī)的部署,那就要比物理服務(wù)器整合的效果好很多。那么,究竟如何在數(shù)據(jù)中心服務(wù)器上搭載虛擬機(jī)?如何制定服務(wù)器虛擬資源分配原則?如何在虛擬機(jī)上運(yùn)行數(shù)據(jù)庫(kù)?服務(wù)器虛擬化的成本有多高,意義如何?本手冊(cè)將一一問(wèn)你解答。數(shù)據(jù)中心服務(wù)器虛擬化服務(wù)器虛擬化的結(jié)果令人吃驚,它使每臺(tái)主機(jī)服務(wù)器可以運(yùn)行更多的虛擬機(jī),從而降低你主機(jī)服務(wù)器架構(gòu)的成本,或者說(shuō)至少增加資金的回籠速度。在如今這種困難的經(jīng)濟(jì)形勢(shì)下,我們還有其它更好的選擇嗎?數(shù)據(jù)中心服務(wù)器虛擬機(jī)的部署不能過(guò)于保守如何在數(shù)據(jù)中心服務(wù)器上搭載虛擬機(jī)如何制定服務(wù)器虛擬資源分配規(guī)則hypervisor數(shù)據(jù)庫(kù)虛擬化VM(虛擬機(jī))行,現(xiàn)在看來(lái)這種觀念似乎有些站不住腳了。事實(shí)上,有許多IT工作站已經(jīng)學(xué)會(huì)了如何利用如今的多孔插口和運(yùn)行著虛擬環(huán)境的多核商用服務(wù)器的強(qiáng)大功能。在虛擬機(jī)上運(yùn)行數(shù)據(jù)庫(kù):時(shí)機(jī)已經(jīng)成熟如何選擇數(shù)據(jù)庫(kù)虛擬化平臺(tái)虛擬化數(shù)據(jù)庫(kù)處理器的選擇及服務(wù)器的配置服務(wù)器虛擬化和成本和意義ITCFO服務(wù)器虛擬化的成本和意義分析(一)服務(wù)器虛擬化的成本和意義分析(二)服務(wù)器虛擬化的成本和意義分析(三)服務(wù)器虛擬化的成本和意義分析(四)數(shù)據(jù)中心服務(wù)器虛擬機(jī)的部署不能過(guò)于保守大多數(shù)企業(yè)的虛擬機(jī)部署都顯得過(guò)于保守。這些企業(yè)單是依靠物理服務(wù)器整合就取得了許多顯著的成就。如果他們?cè)龠M(jìn)行虛擬機(jī)的部署,那就要比物理服務(wù)器整合的效果好很多。當(dāng)如果可以將這幾種虛擬機(jī)部署方式混合使用,效果會(huì)更為明顯,整合比率可以達(dá)到10比1。但是,有些企業(yè)的整合比率竟高達(dá)15比1,他們的虛擬機(jī)部署策略更具侵略性。他們會(huì)實(shí)行一些高難度的遷移項(xiàng)目,比如說(shuō)將網(wǎng)絡(luò)服務(wù)器的部署與虛擬機(jī)的部署結(jié)合起來(lái),并將其運(yùn)行環(huán)境與虛擬機(jī)的部署混合進(jìn)行。結(jié)果令人很震驚,因?yàn)檫@樣的話每臺(tái)主機(jī)服務(wù)器就可以運(yùn)行更多的虛擬機(jī),從而降低你主機(jī)服務(wù)器架構(gòu)的成本,或者說(shuō)至少增加資金的回籠速度。在如今這種困難的經(jīng)濟(jì)形勢(shì)下,我們還有其它更好的選擇嗎?通過(guò)各種各樣的網(wǎng)絡(luò)端口,你可以在同一主機(jī)的不同網(wǎng)絡(luò)區(qū)域內(nèi)部署虛擬機(jī),使它們?cè)谝粋€(gè)完全隔離的環(huán)境下運(yùn)行。這樣做還有一個(gè)好處,可以增加你虛擬機(jī)部署的密度。主機(jī)上各種各樣的網(wǎng)絡(luò)端口還使你可以將同一主機(jī)上不同運(yùn)行環(huán)境中的虛擬機(jī)進(jìn)行批量遷移。這意味著你可以在同一主機(jī)上部署多臺(tái)虛擬機(jī),分別用于培訓(xùn)、測(cè)試、研發(fā)和生產(chǎn)等領(lǐng)域,而與此同時(shí)你也可以將其分隔開(kāi)來(lái),讓它們使用不同的虛擬網(wǎng)絡(luò)適配器。此外,你還可以給用于測(cè)試、培訓(xùn)、及研發(fā)領(lǐng)域的虛擬機(jī)指定一定的流量控制原則,確保它們不會(huì)占據(jù)產(chǎn)品虛擬機(jī)的資源。如果有必要的話可以將這整個(gè)流程自動(dòng)化,并備有空閑的主機(jī),在業(yè)務(wù)高峰時(shí)虛擬機(jī)可以使用備用的空閑主機(jī)。這樣的話,所有設(shè)備都可以從中自動(dòng)受益。結(jié)果是,主機(jī)服務(wù)器可以運(yùn)行更高密度的虛擬機(jī)工作負(fù)載。(如圖所示)PagePAGEPagePAGE5of30數(shù)據(jù)中心虛擬化完全攻略關(guān)于服務(wù)器虛擬化還有好多東西需要學(xué)習(xí)。你很快就會(huì)發(fā)現(xiàn),這是一個(gè)多么強(qiáng)大的運(yùn)營(yíng)模式,投資回報(bào)也很高。此外,你在系統(tǒng)管理方面的工作量最終也會(huì)有所下降。有許多東西你在物理機(jī)上無(wú)法實(shí)現(xiàn),但在虛擬機(jī)上卻可以做到。要想使你的虛擬機(jī)部署更具侵略性,要牢記以下幾點(diǎn)技巧:著虛擬機(jī)需求的增長(zhǎng),這些服務(wù)器的性能也要提高。對(duì)虛擬工作負(fù)載進(jìn)行辨別和分類,明確每一種工作負(fù)載需要哪些資源。開(kāi)來(lái)。PagePAGEPagePAGE6of30數(shù)據(jù)中心虛擬化完全攻略要,從非產(chǎn)品環(huán)境中調(diào)用相應(yīng)的資源?;诟鞣N原則來(lái)分配虛擬機(jī)的部署任務(wù)。使虛擬機(jī)的部署項(xiàng)目更具侵略性,實(shí)現(xiàn)主機(jī)服務(wù)器虛擬機(jī)密度的最大化。支持產(chǎn)品虛擬機(jī)的運(yùn)行。這種方法將會(huì)使你主機(jī)服務(wù)器上的虛擬機(jī)密度實(shí)現(xiàn)最大化,同時(shí)也可以提高你的物理服務(wù)器整合比率。當(dāng)你實(shí)施極具侵略性的虛擬機(jī)部署策略時(shí),要多關(guān)注部件的許可問(wèn)題。與物理機(jī)相比,虛擬機(jī)需要的相關(guān)許可相對(duì)要少,這也是它對(duì)于動(dòng)態(tài)數(shù)據(jù)中心的意義所在。此外,虛擬機(jī)的創(chuàng)建也很容易,無(wú)論何時(shí)你都要將這點(diǎn)牢記在心。PagePAGEPagePAGE7of30數(shù)據(jù)中心虛擬化完全攻略如何在數(shù)據(jù)中心服務(wù)器上搭載虛擬機(jī)如今,有許多企業(yè)都在采用服務(wù)器虛擬化技術(shù)。這對(duì)企業(yè)有很大影響,特別是在如今困難的經(jīng)濟(jì)狀況下,服務(wù)器虛擬化可以給企業(yè)在服務(wù)器硬件、機(jī)架空間、能源消耗以及冷卻等方面節(jié)省很大的開(kāi)支。但是,許多組織發(fā)現(xiàn),要想將虛擬化技術(shù)運(yùn)用到服務(wù)器上,他們必須要啟用許多新的物理服務(wù)器技術(shù)。這是因?yàn)椋钚碌南到y(tǒng)管理程序都是基于載有虛擬化處理器的X64服務(wù)器硬件來(lái)運(yùn)行的。從某種程度上說(shuō),這些新的硬件也很有用,它們可以降低服務(wù)器的冷卻需求,同樣可以降低數(shù)據(jù)中心的運(yùn)維成本。然而,問(wèn)題是有太多的組織目前已滿足于他們的物理服務(wù)器整合效果。事實(shí)上,通過(guò)在主機(jī)服務(wù)器上搭載虛擬機(jī),你可以進(jìn)一步提升服務(wù)器整合的效果并減少所需的服務(wù)器數(shù)量。要想在保持主機(jī)和虛擬機(jī)的高性能的同時(shí)來(lái)實(shí)現(xiàn)這些目標(biāo),你必須從事一些艱難的工作。即使要提高物理資源的利用率,你終究還是想要確保所有的系統(tǒng)性能都能達(dá)到最佳。因此,現(xiàn)在是時(shí)候該仔細(xì)考慮一下你要運(yùn)行的虛擬服務(wù)產(chǎn)品了。如果你試圖將一些與終端用戶相關(guān)的服務(wù)運(yùn)行在虛擬機(jī)上,就會(huì)觸及一系列的資源分配原則。此外,你還應(yīng)該深入考察一下自己服務(wù)器虛擬化平臺(tái)的特點(diǎn),使自己的虛擬化部署更具侵略性,從而收獲更多成果。首先,從對(duì)現(xiàn)有的服務(wù)和應(yīng)用進(jìn)行歸類開(kāi)始。對(duì)服務(wù)和應(yīng)用的歸類載進(jìn)行分類開(kāi)始。嘗試著將所分類別降至最少,并根據(jù)資源需求將其分為幾個(gè)小組。例如,Web服務(wù)器主要要求網(wǎng)絡(luò)資源,電子郵件傳輸服務(wù)器也是一樣。數(shù)據(jù)庫(kù)服務(wù)線上運(yùn)行的幾大系統(tǒng),但是,你或許還會(huì)需要測(cè)試系統(tǒng)、培訓(xùn)系統(tǒng)、研發(fā)系統(tǒng)等等。此外,網(wǎng)絡(luò)服務(wù)稍顯復(fù)雜。網(wǎng)絡(luò)服務(wù)器的部署指的就是在一個(gè)端對(duì)端的分配體系下對(duì)虛擬機(jī)的位置進(jìn)行調(diào)配。通常有三種位置可供選擇:PagePAGEPagePAGE8of30數(shù)據(jù)中心虛擬化完全攻略在內(nèi)聯(lián)網(wǎng)內(nèi)部在安全區(qū)周圍——DMZ(非軍事區(qū)),DMZ。企業(yè)外部當(dāng)工作負(fù)載被虛擬化之后,服務(wù)器的部署會(huì)變得更加模糊。一臺(tái)物理主機(jī)上的虛擬機(jī)會(huì)集中在一個(gè)區(qū)域內(nèi),而同樣主機(jī)上的其它虛擬機(jī)會(huì)位于另一個(gè)區(qū)域,所有的虛擬機(jī)都會(huì)基于主機(jī)服務(wù)器虛擬網(wǎng)絡(luò)的特點(diǎn)來(lái)分配。盡管這樣,在網(wǎng)絡(luò)內(nèi)進(jìn)行虛擬服務(wù)器分區(qū)時(shí),你還是要考慮到服務(wù)器的部署問(wèn)題。100%工作負(fù)載上運(yùn)行。Vmware20077361名客戶中大多數(shù)人可以在自己的虛擬化機(jī)器上運(yùn)行高級(jí)的工作負(fù)載。圖一VMware客戶中常見(jiàn)的虛擬工作負(fù)載越來(lái)越多的組織開(kāi)始在虛擬機(jī)器上運(yùn)行MicrosoftSQLServer、MicrosoftExchangeServer以及其它復(fù)雜的工作負(fù)載,其性能甚至超過(guò)了他們對(duì)于物理機(jī)性能的期望。有時(shí)候你似乎找不到理由選擇服務(wù)虛擬化。例如,你可能會(huì)決定繼續(xù)在一臺(tái)老舊的位機(jī)器上運(yùn)行一些服務(wù),只是因?yàn)槟氵€沒(méi)有做好遷向新的系統(tǒng)的準(zhǔn)備。但是,仔細(xì)考慮一下運(yùn)行虛擬機(jī)的好處。因?yàn)樗麄兪翘摂M的,因此你可以將其搭載到硬件系統(tǒng)上。此外,他們更易部署、更易保護(hù)——只需將磁盤(pán)文件拷貝到其它地方則已。PagePAGEPagePAGE9of30數(shù)據(jù)中心虛擬化完全攻略讓它們來(lái)搭載系統(tǒng)。MicrosoftHyper-VCitrixXenServer32位的平臺(tái),MicrosoftVirtualServer、SunxVMVirtualBoxVMwareServer32位的系統(tǒng)上運(yùn)行,還能讓舊服務(wù)器顯得更有生機(jī),而只是機(jī)械地給用戶提供服務(wù)。也就是說(shuō),你所有的物理機(jī)——不管是32位還是64位,都可以成為主機(jī),你所有的服務(wù)都可以被虛擬化。然而,有一點(diǎn)要牢記,運(yùn)行在32位主機(jī)上的系統(tǒng)管理程序是不會(huì)支持64位機(jī)器的。還要記住,所有的現(xiàn)代操作系統(tǒng)和應(yīng)用供應(yīng)商都在向X64平臺(tái)轉(zhuǎn)移,這意味著32位硬件的使用壽命會(huì)明顯變短?;谶@樣的結(jié)果,花大量時(shí)間和精力來(lái)安裝這些舊設(shè)備似乎是一種浪費(fèi)。PagePAGE10PagePAGE10of30數(shù)據(jù)中心虛擬化完全攻略如何制定服務(wù)器虛擬資源分配規(guī)則20臺(tái)虛擬機(jī),那這些虛擬機(jī)就不能也不應(yīng)該在同一時(shí)刻去競(jìng)爭(zhēng)相同的資源。Windows服務(wù),就應(yīng)該是這樣的:域控制器在高峰時(shí)期往往需要網(wǎng)絡(luò)和處理器資源,比如說(shuō)在清晨或午飯后的時(shí)間。文件和打印服務(wù)器在非高峰需要時(shí)刻需要使用處理器和網(wǎng)絡(luò)資源,比如說(shuō)早晨十點(diǎn)左右或下午三四點(diǎn)左右。網(wǎng)絡(luò)服務(wù)器往往需要網(wǎng)絡(luò)資源,如果規(guī)劃得當(dāng),應(yīng)該保證有穩(wěn)定的流量。SQLExchange24器資源。月或每?jī)芍苓\(yùn)行一次。律。培訓(xùn)系統(tǒng)一般是在白天運(yùn)行,但通常的資源需求不是很大。不同工作負(fù)載的服務(wù)器資源需求對(duì)比并不是所有的工作負(fù)載在任何時(shí)間都很忙。事實(shí)上,一些工作負(fù)載經(jīng)常處于“停車”或“空載”狀態(tài),幾乎很少運(yùn)行。這就需要對(duì)其進(jìn)行合理的規(guī)劃——降低實(shí)際所運(yùn)行的工作負(fù)載數(shù)量。主機(jī)服務(wù)器工作負(fù)載分配服務(wù)器工作負(fù)載在不同的時(shí)段會(huì)有不同的資源需求,這就需要你對(duì)其進(jìn)行合理配置,使其不會(huì)在同一時(shí)段、在同一主機(jī)上去競(jìng)爭(zhēng)同樣的物理資源——CPU、RAM、網(wǎng)絡(luò)或存儲(chǔ)資源。因此,你要盡可能多地配置各種虛擬工作負(fù)載,避免主機(jī)服務(wù)器承載過(guò)多的工作負(fù)載。這意味著一臺(tái)主機(jī)服務(wù)器可以運(yùn)行一個(gè)數(shù)據(jù)中心、一臺(tái)網(wǎng)絡(luò)基礎(chǔ)設(shè)施服務(wù)器、一臺(tái)文件服務(wù)器、一臺(tái)或多臺(tái)Web服務(wù)器、甚至或許是一套企業(yè)應(yīng)用。當(dāng)然了,關(guān)鍵是要對(duì)那些在不同時(shí)段擁有不同資源需求的工作負(fù)載給與足夠的關(guān)注。利用hypervisor網(wǎng)絡(luò)為虛擬機(jī)部署服務(wù)hypervisor使你可以為每臺(tái)主機(jī)服務(wù)器提供多個(gè)虛擬網(wǎng)絡(luò),可分為公共網(wǎng)絡(luò)、私有網(wǎng)絡(luò)、僅限主機(jī)使用這三種網(wǎng)絡(luò)類型。虛擬機(jī)可以通過(guò)各種方式來(lái)使用這些不同的網(wǎng)絡(luò)資源,因此,你應(yīng)該把每個(gè)網(wǎng)絡(luò)都控制在準(zhǔn)備使用的主機(jī)系統(tǒng)之內(nèi)。每臺(tái)虛擬機(jī)都被設(shè)計(jì)成可以給終端用戶提供服務(wù),但是必須通過(guò)公共網(wǎng)絡(luò)端口。因接。公共網(wǎng)絡(luò)同樣允許搭載在不同主機(jī)上的虛擬機(jī)彼此間進(jìn)行聯(lián)系。有一種很好的辦法可以嘗試,那就是在每臺(tái)主機(jī)上創(chuàng)建許多公共網(wǎng)絡(luò)路徑來(lái)提供網(wǎng)絡(luò)服務(wù)的冗余。僅限主機(jī)使用的虛擬網(wǎng)絡(luò)適配器被用于支持內(nèi)部虛擬機(jī)和主機(jī)虛擬機(jī)間的通信。如果你需要更新虛擬機(jī),你就可以使用僅限主機(jī)使用的通信渠道,從而避免公共端口承載過(guò)多的流量。僅限主機(jī)使用的通信任務(wù)是直接通過(guò)主機(jī)和虛擬機(jī)來(lái)完成的,使用的是主機(jī)的內(nèi)部通信渠道。私有虛擬網(wǎng)絡(luò)適配器可以被用來(lái)降低公共網(wǎng)絡(luò)端口的流量。當(dāng)你需要完全隔離虛擬機(jī)流量的時(shí)候,你就可以將其連接到私有網(wǎng)絡(luò)適配器。這可以允許虛擬機(jī)間進(jìn)行內(nèi)部通信,但不支持與其它設(shè)備的通信,包括主機(jī)服務(wù)器在內(nèi)。說(shuō)到這里,你可能會(huì)想使用私有網(wǎng)絡(luò)來(lái)為周邊網(wǎng)絡(luò)的通信管理提供支持,來(lái)保護(hù)它們免受其它通信形式的干擾。最好的辦法是給每臺(tái)主機(jī)分配一種不同類型的網(wǎng)絡(luò),然后將各種各樣的虛擬機(jī)組件連接到合適的虛擬網(wǎng)卡。此外,你還可以用這些網(wǎng)絡(luò)來(lái)將虛擬機(jī)彼此隔離開(kāi)來(lái),即使它們是運(yùn)行在同樣的主機(jī)上。在虛擬機(jī)上運(yùn)行數(shù)據(jù)庫(kù):時(shí)機(jī)已經(jīng)成熟VM(虛擬機(jī))上得到良好的IT工作站已經(jīng)學(xué)會(huì)了如行整合,他們節(jié)省了大量開(kāi)支,同時(shí)還提高了災(zāi)難恢復(fù)和性能管理的效率。因此,是該重新評(píng)估一下數(shù)據(jù)庫(kù)虛擬化的可能性了。在不久之前,我預(yù)計(jì)那些沒(méi)有任何虛擬化規(guī)劃的企業(yè)運(yùn)營(yíng)中心會(huì)在三到四年的時(shí)間內(nèi)發(fā)現(xiàn)自己在許多方面已被虛擬化了?,F(xiàn)在看來(lái)我錯(cuò)了。Oracle用戶站點(diǎn),經(jīng)理們CPUOracleCPU許可模式的企業(yè),數(shù)據(jù)庫(kù)許及災(zāi)難恢復(fù)的管理。OracleOS團(tuán)隊(duì)的一員,我有幸可以看到與部署數(shù)據(jù)庫(kù)相關(guān)的虛擬化技Oracle與其它數(shù)據(jù)庫(kù)擁有不同的特性,但總的意圖是一致的。虛擬化軟件和服務(wù)器硬件的優(yōu)點(diǎn)——包括嵌入式虛擬化在內(nèi),強(qiáng)迫大家要對(duì)傳統(tǒng)的虛擬化目標(biāo)重新進(jìn)行OracleVMware技術(shù)成功地整合在一起。為了能夠積累一定的經(jīng)驗(yàn)和自信,我們建議大家從低風(fēng)險(xiǎn)的數(shù)據(jù)庫(kù)開(kāi)始實(shí)施。而對(duì)于虛擬化技術(shù)的選擇,可以參照以下次序:普通的虛擬化選項(xiàng)研發(fā)數(shù)據(jù)庫(kù)LDAP(輕量級(jí)目錄訪問(wèn)協(xié)議)或是其它元數(shù)據(jù)數(shù)據(jù)庫(kù)I/O產(chǎn)品數(shù)據(jù)庫(kù)中級(jí)虛擬化選項(xiàng)大型OLTP(在線處理流程)數(shù)據(jù)庫(kù)未來(lái)虛擬化選項(xiàng)單一的大型單節(jié)點(diǎn)數(shù)據(jù)庫(kù)集群數(shù)據(jù)庫(kù)對(duì)于那些對(duì)虛擬核的需求超過(guò)你目前的虛擬化工具支持上限的數(shù)據(jù)庫(kù)部署項(xiàng)目,我們可以立刻將其排除。ROI品生命周期、以及業(yè)務(wù)連續(xù)性方面的優(yōu)勢(shì)已經(jīng)得到了很好的證實(shí)。但是,對(duì)于數(shù)據(jù)庫(kù)而言,其性能是不是最終決定了你的成???我們肯定曾聽(tīng)到有人說(shuō),“我們嘗試著進(jìn)行數(shù)據(jù)庫(kù)虛擬化,但其性能不是很好,因此我們又退了回來(lái)?!睆亩x來(lái)看,虛擬化數(shù)據(jù)庫(kù)要比傳統(tǒng)數(shù)據(jù)庫(kù)更為復(fù)雜。但是,現(xiàn)如今這種方法已經(jīng)脫Oracle最終也開(kāi)始支持虛擬化。我們有一個(gè)擁有數(shù)千家經(jīng)OracleERP了虛擬化改造。盡管說(shuō)他們的企業(yè)資源規(guī)劃規(guī)模很小,但我認(rèn)為如果他們不采取虛擬化措施,就很難去改善這種局面。即使沒(méi)有專門(mén)的虛擬化套件,安裝工作也可以正常進(jìn)行。大家的使用次數(shù)有可能不哪些領(lǐng)域需要進(jìn)行調(diào)整。如何選擇數(shù)據(jù)庫(kù)虛擬化平臺(tái)要實(shí)施像虛擬化這樣的新技術(shù),無(wú)論對(duì)于哪個(gè)業(yè)務(wù)層面而言,都需要做出一定選擇,使它們彼此間能夠配合默契。盡管說(shuō)虛擬化的美妙之處在于它可以使你將許多應(yīng)用從商用硬件中移除,但其相關(guān)軟硬件都很新而且不盡相同。就我們的情況而言,我們喜歡在Linux和VMware上運(yùn)行Oracle,盡管其流程稍顯復(fù)雜。長(zhǎng)遠(yuǎn)來(lái)看,我們對(duì)于虛擬化品牌的投資將會(huì)迅速得到拓展,但是到目前為止,我們還沒(méi)有看到VMware的競(jìng)爭(zhēng)者在市場(chǎng)上推出成熟、穩(wěn)定的虛擬化工具組合。有跡象表明,對(duì)于VMware而言,競(jìng)爭(zhēng)似乎更多是來(lái)自微軟而不是Xen。微軟的虛擬化戰(zhàn)略開(kāi)了又停,停了又開(kāi),但其忍耐力似乎得到了很好的證實(shí)。因此,在今后的幾年內(nèi),你或許就可以針對(duì)自己的環(huán)境來(lái)選擇相應(yīng)的虛擬化平臺(tái)了。Gartner200491%X86和X6490%Linux相關(guān),RISC(精簡(jiǎn)指令運(yùn)算集)Oracle時(shí),如果企業(yè)文化LinuxWindows。即使是在本地環(huán)境中,LinuxWindows簡(jiǎn)單,運(yùn)行速度卻更Oracle85%到90%LinuxLinux的高采用率說(shuō)明了一個(gè)事實(shí)——OracleLinuxLinux的用戶,OracleWindows上的運(yùn)行,我們有客戶正在這樣使用。Linux而言,SUSEVMware進(jìn)一步降低虛擬化性能瓶頸的SUSEVMware32SUSE的虛擬化運(yùn)營(yíng)標(biāo)準(zhǔn)。毫無(wú)疑64位服務(wù)器的用戶而言,在不久的將來(lái)也可以看到類似的東西。VMware643232位服務(wù)器。越大,CPU性能就應(yīng)該越好。但是對(duì)于虛擬機(jī)而言卻不是這樣。比如說(shuō),將多余的核分配給虛擬機(jī)會(huì)導(dǎo)致不必要的性能浪費(fèi)。對(duì)于內(nèi)存而言也是這樣。我勸你還是不要過(guò)于興VMwareESXServer3.5RAM64GB,SAN緩存的性能和服務(wù)器端文件系統(tǒng)緩存中任選一個(gè),來(lái)與增長(zhǎng)中的數(shù)據(jù)庫(kù)管理緩存做比較,看看是什么結(jié)果。繼續(xù)對(duì)虛擬機(jī)的低性能保持關(guān)注,你可能會(huì)希望重新對(duì)數(shù)據(jù)庫(kù)的集合能力進(jìn)行評(píng)估,這也可以節(jié)省虛擬機(jī)的內(nèi)存。提高性能的最佳措施就是從空盤(pán)安裝操作系統(tǒng),而不是對(duì)現(xiàn)有的本地機(jī)器進(jìn)行轉(zhuǎn)換。這樣可以將那些本地環(huán)境只用一次的進(jìn)程排除。如果這些進(jìn)程在另一個(gè)虛擬機(jī)中被啟動(dòng),它們會(huì)導(dǎo)致虛擬機(jī)進(jìn)行不必要的硬件環(huán)境轉(zhuǎn)換。虛擬化數(shù)據(jù)庫(kù)處理器的選擇及服務(wù)器的配置首先要聲明一下,我們不賣(mài)硬件,也沒(méi)拿任何其它硬件供應(yīng)商的回扣。我們期待四核AMDBarcelona處理芯片主要基于兩方面考慮:硬件輔助內(nèi)存虛擬化和基于socket的軟件許可。AMDOpteronIntel的Woodcrest處理器都包括硬件輔助指令集虛擬化。這是走向正軌的第一步,但是與Barcelona芯片二代硬件輔助內(nèi)存虛擬化(AMDNPT)相比,它還是略遜一籌。如果不按其它方式配置,ESXServer3.5Barcelona64位客戶操作系統(tǒng)的NPT。Intel一直在關(guān)注其硬件輔助內(nèi)存虛擬化技術(shù)的發(fā)布,將其稱之為擴(kuò)展頁(yè)表。OracleOracle數(shù)據(jù)RAM64客戶操作系統(tǒng)都將對(duì)你的數(shù)據(jù)庫(kù)性能有益。從軟件特許這點(diǎn)來(lái)看,VMware許可證。當(dāng)年,Oracle僅在它的基礎(chǔ)版本中引進(jìn)了基于插槽的許可證。Oracle數(shù)據(jù)庫(kù)標(biāo)6416648核上的多。OracleRAC,這說(shuō)明著在正確配置的情況下集群數(shù)據(jù)庫(kù)計(jì)算有很好的可擴(kuò)展性。虛擬數(shù)據(jù)庫(kù)服務(wù)器的熱配置128MBIntelAMDNUMA(非均衡存儲(chǔ)器訪問(wèn))模型Oracle這樣的內(nèi)存密集型有效負(fù)荷上。NUMAIntel的產(chǎn)品上依然存在,IntelNUMA規(guī)劃。OLTP(聯(lián)機(jī)事務(wù)處理)I/O化。VMwareESXServer3.5I/O和網(wǎng)絡(luò)性能有很大提升。I/O虛擬化漸進(jìn)過(guò)程的縮小對(duì)于所有類型的數(shù)據(jù)庫(kù)來(lái)說(shuō)都是有力的:包括更新后的只讀數(shù)據(jù)庫(kù),OLTP和決策支持?jǐn)?shù)據(jù)庫(kù)等等。ESXServer3.5也引入了InfiniBand(無(wú)限帶寬)證書(shū)。不管是在本地中還是在虛擬環(huán)境中,我們都強(qiáng)烈推薦InfiniBand,因?yàn)樗膱?zhí)行時(shí)間較長(zhǎng),具有較好的CPUI/O進(jìn)程卸載能力。為了提高性能,我建議將無(wú)限帶寬卡插入PCI擴(kuò)展槽中。ESXServer3i(VMware超輕量32MB管理程序)吧。HP、DellIBMESX3i整合到他們的服務(wù)器中。服務(wù)器虛擬化的成本和意義分析(一)在將機(jī)器遷移到虛擬環(huán)境中時(shí),需要考慮虛擬化軟件授權(quán)和支持多虛擬機(jī)的更大功率服務(wù)器所帶來(lái)的成本。毫無(wú)疑問(wèn),從長(zhǎng)期來(lái)看服務(wù)器虛擬化是可以節(jié)約成本的。硬件成本的下降、能耗的減少、以及運(yùn)營(yíng)環(huán)境開(kāi)支的削減是促使IT管理者和CFO們都密切關(guān)注這項(xiàng)技術(shù)的幾個(gè)因素。但是,服務(wù)器虛擬化帶來(lái)的益處如此引人注目,以致人們很容易忘記采用這項(xiàng)技術(shù)的實(shí)際成本。首先,你必須采購(gòu)并獲得虛擬化軟件授權(quán),通常來(lái)講還需要更強(qiáng)大的服務(wù)器來(lái)支持多虛擬機(jī)(VMs)的運(yùn)行。此外,還需要添加額外的存儲(chǔ)器來(lái)為虛擬鏡像文件的存儲(chǔ)和VMs的備份存儲(chǔ)庫(kù)提供支持。相關(guān)的測(cè)試和培訓(xùn)也可能增加總體擁有成本(TCO),這從一定程度上抵消了虛擬化技術(shù)本身所帶來(lái)的成本節(jié)省。數(shù)據(jù)中心管理者需要檢查服務(wù)器虛擬化產(chǎn)生的有形和無(wú)形的開(kāi)銷并考慮每個(gè)因素對(duì)投資回報(bào)(ROI)的影響。在TCO/ROI方面的優(yōu)缺點(diǎn)TCO/ROIROI。但是,在服務(wù)器虛擬化帶來(lái)的實(shí)際ROI價(jià)值方面大家卻持有不同的觀點(diǎn)。ChicagoCyberklix公司(一家安全及網(wǎng)絡(luò)工具供應(yīng)商)EricPerkins說(shuō):“我們絕大部分客戶——90%TCOROI來(lái)分配預(yù)算”。但他也承認(rèn),服務(wù)器虛擬化的倡議可能會(huì)給相關(guān)機(jī)構(gòu)帶來(lái)重大影響,即導(dǎo)致財(cái)政計(jì)算的復(fù)雜化。并不是每個(gè)人都同意這種評(píng)估方法?!皫缀鯖](méi)人確切計(jì)算過(guò)這項(xiàng)技術(shù)的ROI,”N.JParsippanySierraManagementConsultingLLC公司總裁兼CEOAllenZuk說(shuō),“隨著虛擬化技術(shù)對(duì)于一系列問(wèn)題的解決,人們將會(huì)把更多的目光投向該技術(shù)的部署與實(shí)施?!痹诒疚牡牡诙糠种?,我們將為大家介紹如何對(duì)服務(wù)器虛擬化項(xiàng)目進(jìn)行成本評(píng)估。服務(wù)器虛擬化的成本和意義分析(二)在本文的第一部分中,我們?yōu)榇蠹医榻B了服務(wù)器虛擬化成本評(píng)估的必要性,接下來(lái)我們介紹如何進(jìn)行成本評(píng)估。成本評(píng)估通常來(lái)講,ROI50000美元部署和維護(hù)一個(gè)服務(wù)器虛擬化項(xiàng)目——同2000040%,在那(兩年半)之后節(jié)約的資金就是利潤(rùn)。重要的是要知道如何實(shí)現(xiàn)那些數(shù)據(jù)。除去淘汰的舊服務(wù)器硬件和正常的業(yè)務(wù)損失之外,剩余的成本可以以這種方式進(jìn)行分解:新服務(wù)器硬件新服務(wù)器硬件更新和整修長(zhǎng)期的新硬件服務(wù)和維護(hù)虛擬化軟件采購(gòu)IT架構(gòu)管理軟件其他用于故障、備份等的基礎(chǔ)軟件所有長(zhǎng)期軟件維護(hù)合同長(zhǎng)期的硬件供電撤銷老舊硬件的人力安裝新硬件的人力管理虛擬服務(wù)器的人力,包括工作流程變更成本網(wǎng)絡(luò)升級(jí)和維護(hù)存儲(chǔ)升級(jí)和維護(hù)雖然數(shù)據(jù)中心管理者可以預(yù)測(cè)出一個(gè)服務(wù)器虛擬化部署項(xiàng)目在硬件和電力節(jié)省方面帶來(lái)的ROI,但是要想將高靈活性、良好的備份效率和更少的停機(jī)時(shí)間精確地引入到ROI計(jì)算中是不可能的。這些無(wú)形的因素最終使ROI的計(jì)算變得更加困難,要想鑒別并理解它們確實(shí)是一項(xiàng)挑戰(zhàn)。在一些案例中,向虛擬化的遷移可能會(huì)衍生其它項(xiàng)目。有一個(gè)例子,經(jīng)過(guò)配置一臺(tái)虛擬服務(wù)器比一臺(tái)普通服務(wù)器還快。這種任務(wù)操作極其簡(jiǎn)單,因而可能導(dǎo)致“VM蔓延”——一種終將變得難以管理的虛擬機(jī)繁殖現(xiàn)象。潛在的虛擬機(jī)蔓延可能會(huì)反過(guò)來(lái)影響ROI并驅(qū)動(dòng)新業(yè)務(wù)進(jìn)程的出現(xiàn)來(lái)檢視VM的產(chǎn)生極其生命周期。與此類似的是,一些組織機(jī)構(gòu)可能選擇使用部分或所有的硬件節(jié)省資金來(lái)配置冗余服務(wù)器。首選的業(yè)務(wù)目標(biāo)可能是實(shí)施虛擬化之前尚未實(shí)現(xiàn)的服務(wù)器冗余,而不是追求絕對(duì)的投資回報(bào)。案例分析:OpenSolutionsINC.虛擬化解決冷卻難題數(shù)據(jù)中心生產(chǎn)能力過(guò)剩的問(wèn)題可能影響制冷并損害樓層空間以及電力使用率。當(dāng)OpenSolutionsINC的服務(wù)器性能因?yàn)樯a(chǎn)力過(guò)剩和陳舊設(shè)備而受損的時(shí)候,公司必須做出選擇?!拔覀冇泻芏喙爬系脑O(shè)備,”Conn.州Glastonbury一家金融服務(wù)供應(yīng)商的網(wǎng)絡(luò)開(kāi)源解決方案主管RyanMarsee說(shuō)?!敖鉀Q這一問(wèn)題的唯一辦法是采購(gòu)所有新設(shè)備或進(jìn)行虛擬化,他說(shuō)。這座已經(jīng)精疲力盡的OpenSolutions數(shù)據(jù)中心需要通過(guò)一個(gè)采購(gòu)項(xiàng)目來(lái)繼續(xù)生存。但物理擴(kuò)展不作為可選項(xiàng)。“從冷卻的角度來(lái)說(shuō),我們已經(jīng)盡了全力,”Marsee說(shuō),“即使我們解決了這個(gè)問(wèn)題,也沒(méi)有多余的房屋空間可剩。”面對(duì)要么升級(jí)系統(tǒng)要么替換制冷系統(tǒng)的選擇,Marsee考慮的是如果虛擬化服務(wù)器他將能節(jié)約多少資金?Marsee使用公司專有的ROI計(jì)算機(jī)來(lái)對(duì)相關(guān)數(shù)據(jù)進(jìn)行了計(jì)算。“處理冷卻問(wèn)題需要花費(fèi)約25000美元,”他說(shuō)。僅處理冷卻問(wèn)題意味著公司要保持?jǐn)?shù)據(jù)中心內(nèi)設(shè)備的原狀——這只是一個(gè)修補(bǔ)計(jì)劃而已。最終,解決方案還是沒(méi)允許增加任何房間的空間。相反,Marsee考慮撤掉一些能效低的大型服務(wù)器。雖然管理層過(guò)去不采納虛擬化的建議,但一個(gè)新冷卻系統(tǒng)250000美元的價(jià)格使虛擬化看上去比CIO更有吸引力。包括虛擬化ROI計(jì)算在內(nèi)的各種因素都提出了增加制冷、減少服務(wù)器。邏輯的或物理的——配置成本的需求,表達(dá)了將數(shù)據(jù)中心壓縮比降至15:1的需求?!霸谶@種前提下,我們?cè)谔摂M化項(xiàng)目初始階段就可以預(yù)測(cè)到未來(lái)七個(gè)月內(nèi)的ROI,”他說(shuō)。從一開(kāi)始就計(jì)算ROI讓公司明確了他們對(duì)新型虛擬化數(shù)據(jù)中心的期望值。它也為公司網(wǎng)絡(luò)架構(gòu)中已知的低效率帶來(lái)了一絲曙光,要知道這是必須被解決的問(wèn)題。VMwareESX上對(duì)所有服務(wù)器實(shí)施了虛擬75%。沒(méi)有實(shí)施虛擬化的機(jī)器主要包括那些與物理硬件有關(guān)聯(lián)的。隨著公司規(guī)模的不斷擴(kuò)大,Marsee架構(gòu)(VDI),ROI的計(jì)算方法做出調(diào)整,使其更接近終端用戶的標(biāo)準(zhǔn)。在本文的第三部分中,我們將對(duì)服務(wù)器虛擬化的成本進(jìn)行分類,并列舉常見(jiàn)的成本類型。服務(wù)器虛擬化的成本和意義分析(三)在本文的第二部分中,我們?yōu)榇蠹医榻B了如何對(duì)服務(wù)器虛擬化成本進(jìn)行評(píng)估,接下來(lái)我們將分析具體的虛擬化成本類型。有形的TCO/ROI因素TCOROI是顯而易見(jiàn)的,常見(jiàn)的包括硬件、軟件和完成服務(wù)器虛擬化工作所需的人力。服務(wù)器硬件成本:新的服務(wù)器可能是最容易辨認(rèn)的有形商品。成本應(yīng)該包括獲得設(shè)備的初始采購(gòu)費(fèi)用,如CPU、內(nèi)存、I/O和網(wǎng)絡(luò)連接裝置等;同時(shí)還包括完整的安裝費(fèi)用、預(yù)期的電力成本、系統(tǒng)使用期間的維護(hù)和服務(wù)合同及未來(lái)可預(yù)測(cè)的合理升級(jí),如內(nèi)存或CPU擴(kuò)容等。對(duì)你預(yù)期的硬件成本節(jié)約要實(shí)事求是。“更少的服務(wù)器投資費(fèi)用好像可以獲得即刻的收益”,Zuk說(shuō),“然而,更少的機(jī)器可能花費(fèi)更多成本,因?yàn)樗鼈儽仨毟訌?qiáng)大以處理更多的工作量”。在另一些案例中,服務(wù)器的冗余可能抵消大部分——即便不是全部——節(jié)約下來(lái)的資金。現(xiàn)有的服務(wù)器當(dāng)然還是虛擬化的,但他們幾乎不具備最適合于虛擬環(huán)境的計(jì)算能力和冗余特征。當(dāng)新的服務(wù)器引入該環(huán)境,現(xiàn)有的服務(wù)器通常用來(lái)處理次要或非關(guān)鍵的業(yè)務(wù),重新放置到遠(yuǎn)程辦公室或重新配置成備份/DR機(jī)。軟件成本:虛擬服務(wù)器也需要一個(gè)虛擬化平臺(tái)。有眾多產(chǎn)品可供選擇,其中包括CitrixXenServer5,VMwareInfrastructure3,EricomPowerTermWebConnect和MicrosoftWindowsServer2008R2。除了虛擬化軟件外,組織機(jī)構(gòu)通常使用有助于管理基礎(chǔ)設(shè)施的工具。這些工具有客戶中心產(chǎn)品如CitrixWorkflowStudio和VMwarevCenterServer,還有第三方管理產(chǎn)品如AppSenseManagementCenter和來(lái)自如Kaseya等其他供應(yīng)商的產(chǎn)品。你可能需要其他一些具備一定特性的軟件,如高可用性、群集、故障切換和VM遷移/備份。每個(gè)組織機(jī)構(gòu)的需求各不相同。不考慮被選擇的實(shí)際產(chǎn)品,軟件成本應(yīng)該包括初始采購(gòu)和授權(quán)價(jià)格以及年度維護(hù)費(fèi)用。認(rèn)真仔細(xì)的管理對(duì)保證VM授權(quán)成本的可控性來(lái)說(shuō)是必不可少的。“如果沒(méi)有良好的環(huán)境管理,VM授權(quán)成本可能增加”。Zuk說(shuō)。“另一方面,行政管理費(fèi)應(yīng)該減少”。報(bào)廢成本:鑒別新的有形成本相對(duì)容易,但在報(bào)廢陳舊設(shè)備時(shí)也會(huì)產(chǎn)生經(jīng)營(yíng)成本。這主要包括舊服務(wù)器以及未用的或少量服務(wù)器不需要的老式冷卻和電源處理/分布設(shè)備。這些退役的設(shè)備可能在服務(wù)合同的范疇之內(nèi),合同中規(guī)定不用的部分可能會(huì)增加拆撤成本。人工成本:TCO/ROI計(jì)算中的最后一個(gè)有形成本是人力,它通常被分解成實(shí)施、管理和維護(hù)三個(gè)部分。別忘了測(cè)試機(jī)構(gòu)在作出購(gòu)買(mǎi)承諾前,經(jīng)常會(huì)在實(shí)驗(yàn)室環(huán)境中測(cè)試軟硬件以確保兩者的互操作性。“用于VM解決方案的故障切換軟件也需要與現(xiàn)有的工具相結(jié)合來(lái)維持災(zāi)難恢復(fù)能力,”Zuk說(shuō)。ROI計(jì)算中經(jīng)常遺漏測(cè)試所需的人力支出,但它在培訓(xùn)和進(jìn)程改良中的作用是不容忽視的。無(wú)形的TCO/ROI因素服務(wù)器虛擬化成本不僅僅包含有形因素。還有很多潛在的其它成本,它們中的一些通常只到項(xiàng)目已經(jīng)開(kāi)始進(jìn)行了才被人們認(rèn)識(shí)到。網(wǎng)絡(luò)升級(jí)成本:服務(wù)器虛擬化和整合項(xiàng)目也應(yīng)該考慮網(wǎng)絡(luò)和存儲(chǔ),這是TCO/ROI計(jì)算中經(jīng)常被忽視的有關(guān)IT基礎(chǔ)建設(shè)的兩個(gè)關(guān)鍵要素。VMsNIC(網(wǎng)絡(luò)接口卡)換機(jī)端口來(lái)支持增加的帶寬需求。存儲(chǔ)升級(jí)成本:服務(wù)器整合項(xiàng)目掩蓋了對(duì)存儲(chǔ)網(wǎng)絡(luò)的關(guān)注。CyberklixPerkins指出:“人們沒(méi)有充分考慮存儲(chǔ)、存儲(chǔ)的網(wǎng)絡(luò)連接以及網(wǎng)絡(luò)連接中虛擬機(jī)的冗余。當(dāng)你的數(shù)據(jù)大量集中時(shí),存儲(chǔ)的網(wǎng)絡(luò)連接就是你的生命線?!比魏畏?wù)器整合項(xiàng)目的計(jì)劃和測(cè)試階段都應(yīng)該檢查存儲(chǔ)需求和接入性能。重大的整合項(xiàng)目可以提高SAN的性能,增加存儲(chǔ)容量也是必須的,但是,諸如自動(dòng)精簡(jiǎn)配置這樣的技術(shù)也必須被使用來(lái)容納更多的邏輯單元,同時(shí)還可以推遲存儲(chǔ)容量的遞交,直到真的有空間需求。安全成本:雖然通常都是在單臺(tái)服務(wù)器上部署安全產(chǎn)品但在兩個(gè)VMs間安全部署安全產(chǎn)品卻還處在起步階段。每個(gè)組織機(jī)構(gòu)必須對(duì)VM安全的需求進(jìn)行衡量,并在合適的地方部署適當(dāng)?shù)漠a(chǎn)品來(lái)滿足一定的安全法規(guī)?!癡Ms上安裝主機(jī)入侵防御系統(tǒng),”P(pán)erkinsVM的安全漏洞很少,可以使用主機(jī)入侵和軟件防火墻產(chǎn)品來(lái)預(yù)防。培訓(xùn)成本:對(duì)于虛擬服務(wù)器架構(gòu)的支持不同于單純的數(shù)據(jù)中心。這其中的行政和管理技巧存在細(xì)微差別。VMs變得更加容易。需要的人員也更少,但卻要求他們對(duì)這些工具和業(yè)務(wù)流程有更多更深的了解。“你需要以不同于物理服務(wù)器的視角來(lái)看待虛擬服務(wù)器。”P(pán)erkins說(shuō),“盡管它們也需要生命周期管理。”停機(jī)或系統(tǒng)中斷成本:系統(tǒng)的可靠性在虛擬環(huán)境中是相當(dāng)重要的。物理服務(wù)器的一個(gè)故障可能導(dǎo)致眾多VMs及其所有用戶服務(wù)的中斷。當(dāng)你將業(yè)務(wù)從一臺(tái)傳統(tǒng)服務(wù)器遷移到一臺(tái)虛擬服務(wù)器時(shí),要盡量縮短停機(jī)時(shí)間,一旦實(shí)施了虛擬化,就要確保系統(tǒng)有充分的冗余或故障切換能力。ROIVMs造成性能損服務(wù)器恢復(fù)時(shí)間的同時(shí)盡快將任務(wù)轉(zhuǎn)到其他機(jī)器,這一點(diǎn)很重要。工作流程變更成本:服務(wù)器虛擬化將改變企業(yè)服務(wù)器資源的創(chuàng)建和分配方式。例如,服務(wù)器虛擬化對(duì)企業(yè)數(shù)據(jù)備份和災(zāi)難恢復(fù)(DR)計(jì)劃的改變?!癉R計(jì)劃更新和測(cè)試費(fèi)用非常高,主要是因?yàn)橄嚓P(guān)機(jī)構(gòu)不定期更新本該更新的DR計(jì)劃,”Zuk說(shuō)。要牢記,工作流程變更成本的變化最終會(huì)為公司節(jié)省開(kāi)支。管理成
溫馨提示
- 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 河南電力電纜線槽施工方案
- 建筑工程切險(xiǎn)保險(xiǎn)合同
- 甘肅橋梁伸縮縫施工方案
- 臨床霧化吸入治療忽視問(wèn)題解答
- 2025年體外診斷器械合作協(xié)議書(shū)
- 數(shù)控加工工藝與編程技術(shù)基礎(chǔ) 教案 模塊三 項(xiàng)目一 任務(wù)3 挖槽的加工
- 農(nóng)業(yè)技術(shù)推廣對(duì)提升農(nóng)業(yè)種植業(yè)的作用與有效應(yīng)用策略詳述
- 現(xiàn)代油松容器育苗技術(shù)的有效實(shí)施與幾種常見(jiàn)病蟲(chóng)害的科學(xué)防治策略
- ?;髽I(yè)事故案例分析與整改方案
- 數(shù)字化轉(zhuǎn)型助力綠色發(fā)展的策略
- 《電氣二次回路》課件
- 2024年全國(guó)高考體育單招考試語(yǔ)文試卷試題(含答案詳解)
- 藥品養(yǎng)護(hù)記錄表
- 校級(jí)課題立項(xiàng)評(píng)審工作方案
- 現(xiàn)代密碼學(xué)第二講古典密碼學(xué)
- 醫(yī)院后勤保障部門(mén)考核標(biāo)準(zhǔn)
- 大學(xué)語(yǔ)文優(yōu)質(zhì)課件《盛唐-李白》
- 《做自己情緒的主人》課件
- 產(chǎn)品、過(guò)程質(zhì)量檢查清單
- 設(shè)備外協(xié)加工維修單
評(píng)論
0/150
提交評(píng)論