版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
Word文檔運(yùn)維行業(yè)分析介紹運(yùn)維一般是指對(duì)大型組織已經(jīng)建立好的網(wǎng)絡(luò)軟硬件的維護(hù),其中傳統(tǒng)的運(yùn)維是指信息技術(shù)運(yùn)維,負(fù)責(zé)維護(hù)并確保整個(gè)服務(wù)的高可用性。下面是我整理的一些關(guān)于運(yùn)維行業(yè)的文章,希望對(duì)你有所幫助。
運(yùn)維發(fā)展分析
運(yùn)維中關(guān)鍵技術(shù)點(diǎn)解剖:1大量高并發(fā)網(wǎng)站的設(shè)計(jì)方案;2高可靠、高可伸縮性網(wǎng)絡(luò)架構(gòu)設(shè)計(jì);3網(wǎng)站安全問題,如何避免被黑?4南北互聯(lián)問題,動(dòng)態(tài)CDN解決方案;5海量數(shù)據(jù)存儲(chǔ)架構(gòu)
一、什么是大型網(wǎng)站運(yùn)維?
首先明確一下,全文所講的”運(yùn)維“是指:大型網(wǎng)站運(yùn)維,與其它運(yùn)維的區(qū)別還是蠻大的;然后我們?cè)賹?duì)大型網(wǎng)站與小型網(wǎng)站進(jìn)行范圍定義,此定義主要從運(yùn)維復(fù)雜性角度考慮,如網(wǎng)站規(guī)范、知名度、服務(wù)器量級(jí)、pv量等考慮,其它因素不是重點(diǎn);因此,我們先定義服務(wù)器規(guī)模大于1000臺(tái),pv每天至少上億(至少國(guó)內(nèi)排名前10),如sina、baidu、,http://51.com等等;其它小型網(wǎng)站可能沒有真正意義上的運(yùn)維工程師,這與網(wǎng)站規(guī)范不夠和成本因素有關(guān),更多的是集合網(wǎng)絡(luò)、系統(tǒng)、開發(fā)工作于一身的“復(fù)合性人才”,就如有些公司把一些合同采購(gòu)都納入了運(yùn)維職責(zé)范圍,還有如IDC網(wǎng)絡(luò)規(guī)劃也納入運(yùn)維職責(zé)。所以,非常重要一定需要明白:運(yùn)維對(duì)其它關(guān)聯(lián)工種必須非常了解熟悉:網(wǎng)絡(luò)、系統(tǒng)、系統(tǒng)開發(fā)、存儲(chǔ),安全,DB等;我在這里所講的運(yùn)維工程師就是指專職運(yùn)維工程師。
我們?cè)賮?lái)說(shuō)說(shuō)一般產(chǎn)品的“出生”流程:
1、首先公司管理層給出指導(dǎo)思想,PM定位市場(chǎng)需求(或copy成熟應(yīng)用)進(jìn)行調(diào)研、分析、最終給出詳細(xì)設(shè)計(jì)。
2、架構(gòu)師根據(jù)產(chǎn)品設(shè)計(jì)的需求,如pv大小預(yù)估、服務(wù)器規(guī)模、應(yīng)用架構(gòu)等因素完成網(wǎng)絡(luò)規(guī)劃,架構(gòu)設(shè)計(jì)等(基本上對(duì)網(wǎng)絡(luò)變動(dòng)不大,除非大項(xiàng)目)
3、開發(fā)工程師將設(shè)計(jì)code實(shí)現(xiàn)出來(lái)、測(cè)試工程師對(duì)應(yīng)用進(jìn)行測(cè)試。
4、好,到運(yùn)維工程師出馬了,首先明確一點(diǎn)不是說(shuō)前三步就與運(yùn)維工作無(wú)關(guān)了,恰恰相反,前三步與運(yùn)維關(guān)系很大:應(yīng)用的前期架構(gòu)設(shè)計(jì)、軟/硬件資源評(píng)估申請(qǐng)采購(gòu)、應(yīng)用設(shè)計(jì)性能隱患及評(píng)估、IDC、服務(wù)性能\安全調(diào)優(yōu)、服務(wù)器系統(tǒng)級(jí)優(yōu)化(與特定應(yīng)用有關(guān))等都需運(yùn)維全程參與,并主導(dǎo)整個(gè)應(yīng)用上線項(xiàng)目;運(yùn)維工程師負(fù)責(zé)產(chǎn)品服務(wù)器上架準(zhǔn)備工作,服務(wù)器系統(tǒng)安裝、網(wǎng)絡(luò)、IP、通用工具集安裝。運(yùn)維工程師還需要對(duì)上線的應(yīng)用系統(tǒng)架構(gòu)是否合理、是否具備可擴(kuò)展性、及安全隱患等因素負(fù)責(zé),并負(fù)責(zé)最后將產(chǎn)品(程序)、網(wǎng)絡(luò)、系統(tǒng)三者進(jìn)行拼接并最優(yōu)化的組合在一起,最終完成產(chǎn)品上線提供用戶使用,并周而復(fù)使:需求-開發(fā)(升級(jí))-測(cè)試-上線(性能、安全問題等之前預(yù)估外的問題隨之慢慢就全出來(lái)了)在這里提一點(diǎn):網(wǎng)站開發(fā)模式與傳統(tǒng)軟件開發(fā)完全不一樣,網(wǎng)站一天開發(fā)上線1~5個(gè)升級(jí)版本是家常便飯,用戶體驗(yàn)為王嘛,如果某個(gè)線上問題像M$需要1年解決,用戶早跑光了;應(yīng)用上線后,運(yùn)維工作才剛開始,具體工作可能包括:升級(jí)版本上線工作、服務(wù)監(jiān)控、應(yīng)用狀態(tài)統(tǒng)計(jì)、日常服務(wù)狀態(tài)巡檢、突發(fā)故障處理、服務(wù)日常變更調(diào)整、集群管理、服務(wù)性能評(píng)估優(yōu)化、數(shù)據(jù)庫(kù)管理優(yōu)化、隨著應(yīng)用PV增減進(jìn)行應(yīng)用架構(gòu)的伸縮、安全、運(yùn)維開發(fā)工作:
a、盡量將日常機(jī)械性手工工作通過(guò)工具實(shí)現(xiàn)(如服務(wù)監(jiān)控、應(yīng)用狀態(tài)統(tǒng)計(jì)、服務(wù)上線等等),提高效率。
b、解決現(xiàn)實(shí)中服務(wù)存在的問題,如高可靠性、可擴(kuò)展性問題等。
c、大規(guī)模集群管理工具的開發(fā),如1萬(wàn)臺(tái)機(jī)器如何在1分鐘內(nèi)完成密碼修改、或運(yùn)行指定任務(wù)?2000臺(tái)服務(wù)器如何快速安裝操作系統(tǒng)?各分布式IDC、存儲(chǔ)集群中數(shù)PT級(jí)的數(shù)據(jù)如何快速的存儲(chǔ)、共享、分析?等一系列挑戰(zhàn)都需運(yùn)維工程師的努力。
在此說(shuō)明一下其它配合工種情況,在整個(gè)項(xiàng)目中,前端應(yīng)用對(duì)于網(wǎng)絡(luò)/系統(tǒng)工程師來(lái)說(shuō)是黑匣子,同時(shí)開發(fā)工程師職責(zé)只是負(fù)責(zé)完成應(yīng)用的功能性開發(fā),并對(duì)應(yīng)用本身性能、安全性等應(yīng)用本身負(fù)責(zé),它不負(fù)責(zé)或關(guān)心網(wǎng)絡(luò)/系統(tǒng)架構(gòu)方面事宜,當(dāng)然軟/硬件采購(gòu)人員等事業(yè)部其它同事也不會(huì)關(guān)心這些問題,各司其職,但項(xiàng)目的核心是運(yùn)維工程師~!所有其它部門的橋梁。
上面說(shuō)了很多,我想大家應(yīng)該對(duì)運(yùn)維有一些概念了,在此打個(gè)比方吧,如果我們是一輛高速行駛在高速公路上的汽車,那運(yùn)維工程師就是司機(jī)兼維修工,這個(gè)司機(jī)不簡(jiǎn)單,有時(shí)需要在高速行駛過(guò)程中換輪胎、并根據(jù)道路情況換檔位、當(dāng)汽車速度越來(lái)越快,汽車本身不能滿足高速度時(shí)對(duì)汽車性能調(diào)優(yōu)或零件升級(jí)、高速行進(jìn)中解決汽車故障及性能問題、時(shí)刻關(guān)注前方安全問題,并先知先覺的采取規(guī)避手段。這就是運(yùn)維工作~!
最后說(shuō)一下運(yùn)維工程師的職責(zé):”確保線上穩(wěn)定“,看似簡(jiǎn)單,但實(shí)屬不容易,運(yùn)維工程師必須在諸多不利因素中進(jìn)行權(quán)衡:新產(chǎn)品模式對(duì)現(xiàn)有架構(gòu)及技術(shù)的沖擊、產(chǎn)品高頻度的升級(jí)帶來(lái)的線上BUG隱患、運(yùn)維自動(dòng)化管理承度不高導(dǎo)致的人為失誤、IT行業(yè)追求的高效率導(dǎo)致流程執(zhí)行上的缺失、用戶增漲帶來(lái)的性能及架構(gòu)上的壓力、IT行業(yè)寬松的技術(shù)管理文化、創(chuàng)新風(fēng)險(xiǎn)、互聯(lián)網(wǎng)安全性問題等因素,都會(huì)是網(wǎng)站穩(wěn)定的大敵,運(yùn)維工程師必須把控好這最后一關(guān),需具體高度的責(zé)任感、原則性及協(xié)調(diào)能力,如果能做到各因素的最佳平衡,那就是一名優(yōu)秀的運(yùn)維工程師了。
另外在此聊點(diǎn)題外話,我在這里看到有很多人要sina、、baidu,http://51.com等聊自已的運(yùn)維方面的經(jīng)驗(yàn),其實(shí)這對(duì)于它們有點(diǎn)免為其難:
a、各公司自已網(wǎng)絡(luò)架構(gòu)、規(guī)模、或多或少還算是公司的核心秘密,要保密,另外,對(duì)于大家所熟知的通用軟件、架構(gòu),由于很多公司會(huì)根據(jù)自已實(shí)際業(yè)務(wù)需要,同時(shí)因?yàn)樵嫘阅?、安全性、已知bug、功能等原因,進(jìn)行過(guò)二次開發(fā)(如apache,php,mysql),操作系統(tǒng)內(nèi)核也會(huì)根據(jù)不同業(yè)務(wù)類型進(jìn)行定制的,如某些應(yīng)用屬于運(yùn)算型、某些是高IO型、或大存儲(chǔ)大內(nèi)存型。根據(jù)這些特點(diǎn)進(jìn)行內(nèi)核優(yōu)化定制,如sina就在memcache上進(jìn)行過(guò)二次開發(fā),搞出了一個(gè)MemcacheDB,具體做得如何我們不談,但開源了,是值得稱贊的,國(guó)內(nèi)公司對(duì)于開源基本上是索取,沒有貢獻(xiàn);另外,服務(wù)器也不是大家所熟知的型號(hào),根據(jù)業(yè)務(wù)特點(diǎn),大部份都是找DELL/HP/ibm進(jìn)行過(guò)定制;另外,在分布式儲(chǔ)存方面都有自已解決方案,要不就是使用現(xiàn)成開源hadoop等解決方案,或自已開發(fā)。但90%都是借鑒googleGFS的思想:分布式存儲(chǔ)、計(jì)算、大表。
b、各公司業(yè)務(wù)方向不一樣,會(huì)導(dǎo)致運(yùn)維模式或方法都不一樣,如http://51.com和baidu運(yùn)維肯定區(qū)別很大,因?yàn)樗麄儤I(yè)務(wù)模式?jīng)Q定了其架構(gòu)、服務(wù)器量級(jí)、IDC分布、網(wǎng)絡(luò)結(jié)構(gòu)、通用技術(shù)都會(huì)不一樣,主打新聞門戶的sina與主打sns的http://51.com運(yùn)維模式差異就非常大,甚至職責(zé)都不大一樣;但有一點(diǎn),通用技術(shù)及大致架構(gòu)上都大同小異,大家不要太神化,更多的公司只是玩壘積木的游戲罷了,沒什么技術(shù)含量。
c、如上面所講,目前大型網(wǎng)站運(yùn)維還處于幼年時(shí)期理念和經(jīng)驗(yàn)都比較零散,沒有成熟的知識(shí)體系,可能具體什么是運(yùn)維,大家都要先思索一番,或壓根沒想過(guò),真正討論也只是運(yùn)維工作的冰山一角,局限于具體技術(shù)細(xì)節(jié),或某某著名網(wǎng)站大的框架,真正運(yùn)維體系化東西沒有,這也許是目前網(wǎng)上運(yùn)維相關(guān)資料比較少的原故吧。或者也是國(guó)內(nèi)運(yùn)維人員比較難招,比較牛的運(yùn)維工程師比較少見的原因之一吧。
二、運(yùn)維工作師需要什么樣的技能及素質(zhì)
做為一名運(yùn)維工程師需要什么樣的技能及素質(zhì)呢,首先說(shuō)說(shuō)技能吧,如大家上面所看到,運(yùn)維是一個(gè)集多IT工種技能與一身的崗位,對(duì)系統(tǒng)-網(wǎng)絡(luò)-存儲(chǔ)-協(xié)議-需求-開發(fā)-測(cè)試-安全等各環(huán)節(jié)都需要了解一些,但對(duì)于某些環(huán)節(jié)需熟悉甚至精通,如系統(tǒng)(基本操作系統(tǒng)的熟悉使用,-nix,windows..)、協(xié)議、系統(tǒng)開發(fā)(日常很重要的工作是自動(dòng)運(yùn)維化相關(guān)開發(fā)、大規(guī)模集群工具開發(fā)、管理)、通用應(yīng)用(如lvs、ha、webserver、db、中間件、存儲(chǔ)等)、網(wǎng)絡(luò),IDC拓樸架構(gòu);
技能方面總結(jié)以下幾點(diǎn):
1、開發(fā)能力,這點(diǎn)非常重要,因?yàn)檫\(yùn)維工具都需要自已開發(fā),開發(fā)語(yǔ)言:perl、python、php(其中之一)、shell(awk,sed,expect….等),需要有過(guò)實(shí)際項(xiàng)目開發(fā)經(jīng)驗(yàn),否則工作會(huì)非常痛苦。
2、通用應(yīng)用方面需要了解:操作系統(tǒng)(目前國(guó)內(nèi)主要是linux、bsd)、webserver相關(guān)(nginx,apahe,php,lighttpd,java。。。)、數(shù)據(jù)庫(kù)(mysql,oralce)、其它雜七八拉的東東;系統(tǒng)優(yōu)化,高可靠性;這些只是加分項(xiàng),不需必備,可以邊工作邊慢慢學(xué),這些東西都不難。當(dāng)然在運(yùn)維中,有些是有分工偏重點(diǎn)不一樣。
3、系統(tǒng)、網(wǎng)絡(luò)、安全,存儲(chǔ),CDN,DB等需要相當(dāng)了解,知道其相關(guān)原理。
個(gè)人素質(zhì)方面:
1、溝通能力、團(tuán)隊(duì)協(xié)作:運(yùn)維工作跨部門、跨工種工作很多,需善于溝通、并且團(tuán)隊(duì)協(xié)作能力要強(qiáng);這應(yīng)該是現(xiàn)代企業(yè)的基本素質(zhì)要求了,不多說(shuō)。
2、工作中需膽大心細(xì):膽大才能創(chuàng)新、不走尋常路,特別對(duì)于運(yùn)維這種新的工種,更需創(chuàng)新才能促進(jìn)發(fā)展;心細(xì),運(yùn)維工程師是網(wǎng)站admin,最高線上權(quán)限者,一不小心就會(huì)遺憾終生或打入十八層地獄。
3、主動(dòng)性、執(zhí)行力、精力旺盛、抗壓能力強(qiáng):由于IT行業(yè)的特性,變化快;往往計(jì)劃趕不上變化,運(yùn)維工作就更突出了,比如國(guó)內(nèi)各大公司服務(wù)器往往是全國(guó)各地,哪里便宜性價(jià)比高,就那往搬,進(jìn)行大規(guī)模服務(wù)遷移(牽扯的服務(wù)器成百上千臺(tái)),這是一個(gè)非常頭痛的問題;往往時(shí)間非常緊迫,如限1周內(nèi)完成,這種情況下,運(yùn)維工程師的主動(dòng)性及執(zhí)行力就有很高的要求了:計(jì)劃、方案、服務(wù)無(wú)縫遷移、機(jī)器搬遷上架、環(huán)境準(zhǔn)備、安全評(píng)估、性能評(píng)估、基建、各關(guān)聯(lián)部門扯皮,7X24小緊急事故響應(yīng)等。
4、其它就是一些基本素質(zhì)了:頭腦要靈光、邏輯思維能力強(qiáng)、為人謙虛穩(wěn)重、親和力、樂于助人、有大局觀。
5、最后一點(diǎn),做網(wǎng)站運(yùn)維需要有探索創(chuàng)新精神,通過(guò)創(chuàng)新型思維解決現(xiàn)實(shí)中的問題,因?yàn)檫@是一個(gè)處于幼年的職業(yè)(國(guó)外也一樣,但比國(guó)內(nèi)起步早點(diǎn)),沒有成熟體系或方法論可以借鑒,只能靠大家自已摸索努力。
三、怎樣才算是一個(gè)合格的運(yùn)維工程師
1、保證服務(wù)達(dá)到要求的線上標(biāo)準(zhǔn),如99.9%;保證線上穩(wěn)定,這是運(yùn)維工程師的基本責(zé)職所在。
2、不斷的提升應(yīng)用的可靠性與健壯性、性能優(yōu)化、安全提升;這方面非??简?yàn)主動(dòng)性和創(chuàng)新思維。
3、網(wǎng)站各層面監(jiān)控、統(tǒng)計(jì)的覆蓋度,軟件、硬件、運(yùn)行狀態(tài),能監(jiān)控的都需要監(jiān)控統(tǒng)計(jì),避免監(jiān)控死角、并能實(shí)時(shí)了解應(yīng)用的運(yùn)轉(zhuǎn)情況。
4、通過(guò)創(chuàng)新思維解決運(yùn)維效率問題;目前各公司大部份運(yùn)維主要工作還是依賴人工操作干預(yù),需要盡可能的解放雙手。
5、運(yùn)維知識(shí)的積累與沉淀、文檔的完備性,運(yùn)維是一個(gè)經(jīng)驗(yàn)性非常強(qiáng)的崗位,好的經(jīng)驗(yàn)與陷阱都需積累下來(lái),避免重復(fù)性范錯(cuò)。
6、計(jì)劃性和執(zhí)行力;工作有計(jì)劃,計(jì)劃后想法設(shè)法達(dá)到目標(biāo),不找借口。
7、自動(dòng)化運(yùn)維;能對(duì)日常機(jī)械化工作進(jìn)行提煉、設(shè)計(jì)并開發(fā)成工具、系統(tǒng),能讓系統(tǒng)自動(dòng)完成的盡量依靠系統(tǒng);讓大家更多的時(shí)間用于思考、創(chuàng)新思維、做自已喜歡的事情。
以上只是技術(shù)上的一些層面,當(dāng)然個(gè)人意識(shí)也是很重要的。
四、運(yùn)維職業(yè)的迷惘、現(xiàn)狀與發(fā)展前景
運(yùn)維崗位不像其它崗位,如研發(fā)工程師、測(cè)試工程師等,有非常明確的職責(zé)定位及職業(yè)規(guī)劃,比較有職業(yè)認(rèn)同感與成就感;而運(yùn)維工作可能給人的感覺是哪方面都了解一些,但又都比上專職工程師更精通、感覺平時(shí)被關(guān)注度比較低(除非線上出現(xiàn)故障),慢慢的大家就會(huì)迷惘,對(duì)職業(yè)發(fā)展產(chǎn)生困惑,為什么會(huì)有這種現(xiàn)象呢?除了職業(yè)本身特點(diǎn)外,主要還是因?yàn)閷?duì)運(yùn)維了解不深入、做得不深入導(dǎo)致;其實(shí)這個(gè)問題其它崗位也會(huì)出現(xiàn),但我發(fā)現(xiàn)運(yùn)維更典型,更容易出現(xiàn)這個(gè)問題;
針對(duì)這個(gè)問題我談一下網(wǎng)站運(yùn)維的現(xiàn)狀及發(fā)展前景(也在思考中,可能不太深入全面,也請(qǐng)大家斧正補(bǔ)充)
運(yùn)維現(xiàn)狀:
1、處于剛起步的初級(jí)階段,各大公司有此專職,但重視或重要程度不高,可替代性強(qiáng);小公司更多是由其它崗位來(lái)兼顧做這一塊工作,沒有專職,也不可能做得深入。
2、技術(shù)層次比較低;主要處于技術(shù)探索、積累階段,沒有型成體系化的理念、技術(shù)。
3、體力勞動(dòng)偏大;這個(gè)問題主要與第二點(diǎn)有關(guān)系,很多事情還是依靠人力進(jìn)行,沒有完成好的提練,對(duì)于大規(guī)模集群沒有成熟的自動(dòng)化管理方法,在此說(shuō)明一下,大規(guī)模集群與運(yùn)維工作是息息相關(guān)的如果只是百十來(lái)臺(tái)機(jī)器,那就沒有運(yùn)維太大的生存空間了。
4、優(yōu)秀運(yùn)維人才的極度缺乏;目前各大公司基本上都靠自已培養(yǎng),這個(gè)現(xiàn)狀導(dǎo)致行業(yè)內(nèi)運(yùn)維人才的流動(dòng)性非常低,非常多好的技術(shù)都局限在各大公司內(nèi)部,如google50萬(wàn)臺(tái)機(jī)器科學(xué)的管理,或者國(guó)內(nèi)互聯(lián)公司top10的一些運(yùn)維經(jīng)驗(yàn),這些經(jīng)驗(yàn)是非常有價(jià)值的東西并決定了一個(gè)公司的核心競(jìng)爭(zhēng)力;這些問題進(jìn)而導(dǎo)致業(yè)內(nèi)先進(jìn)運(yùn)維技術(shù)的流通、貫通、與借簽,并最終將限制了運(yùn)維發(fā)展。
5、很多優(yōu)秀的運(yùn)維經(jīng)驗(yàn)都掌握在大公司手中;這不在于公司的技術(shù)實(shí)力,而在于大公司的技術(shù)規(guī)模、海量PV、硬件規(guī)模足夠大,如baidu可怕的流量、http://51.com海量數(shù)據(jù)~~~~這些因素決定了他們遇到的問題都是其它中/小公司還沒有遇到的,或即將遇到。但大公司可能已有很好的解決方案或系統(tǒng)。
發(fā)展前景:
1、從行業(yè)角度來(lái)看,隨著中國(guó)互聯(lián)網(wǎng)的高速發(fā)展(目前中國(guó)網(wǎng)民已躍升為全球第一)、網(wǎng)站規(guī)模越來(lái)越來(lái)大、架構(gòu)越來(lái)越復(fù)雜;對(duì)專職網(wǎng)站運(yùn)維工程師、網(wǎng)站架構(gòu)師的要求會(huì)越來(lái)越急迫,特別是對(duì)有經(jīng)驗(yàn)的優(yōu)秀運(yùn)維人才需求量大,而且是越老越值錢;目前國(guó)內(nèi)基本上都是選擇畢業(yè)生培養(yǎng)(限于大公司),培養(yǎng)成本高,而且沒有經(jīng)驗(yàn)人才加入會(huì)導(dǎo)致公司技術(shù)更新緩慢、影響公司的技術(shù)發(fā)展;當(dāng)然,畢業(yè)生也有好處:白紙一張,可塑性強(qiáng),比較認(rèn)同并容易融入企業(yè)文化。
2、從個(gè)人角度,運(yùn)維工程師技術(shù)含量及要求會(huì)越來(lái)越高,同時(shí)也是對(duì)公司應(yīng)用、架構(gòu)最了解最熟悉的人、越來(lái)越得到重視。
3、網(wǎng)站運(yùn)維將成為一個(gè)融合多學(xué)科(網(wǎng)絡(luò)、系統(tǒng)、開發(fā)、安全、應(yīng)用架構(gòu)、存儲(chǔ)等)的綜合性技術(shù)崗位,給大家提供一個(gè)很好的個(gè)人能力與技術(shù)廣度的發(fā)展空間。
4、運(yùn)維工作的相關(guān)經(jīng)驗(yàn)將會(huì)變得非常重要,而且也將成為個(gè)人的核心競(jìng)爭(zhēng)力,具備很好的各層面問題的解決能力及方案提供、全局思考能力等。
5、特長(zhǎng)發(fā)揮和興趣的培養(yǎng);由于運(yùn)維崗位所接觸的知識(shí)面非常廣闊,更容易培養(yǎng)或發(fā)揮出個(gè)人某些方面的特長(zhǎng)或愛好,如內(nèi)核、網(wǎng)絡(luò)、開發(fā)、數(shù)據(jù)庫(kù)等方面,可以做得非常深入精通、成為這方面的專家。
6、如果真要以后不想做運(yùn)維了,轉(zhuǎn)到其它崗位也比較容易,不會(huì)有太大的局限性。當(dāng)然了,你得真正用心去做。
7、技術(shù)發(fā)展方向:網(wǎng)站/系統(tǒng)架構(gòu)師。
五、運(yùn)維關(guān)鍵技術(shù)點(diǎn)解剖
1、大規(guī)模集群管理問題
首先我們先要明確集群的概念,集群不是泛指各功能服務(wù)器的總合,而是指為了達(dá)到某一目的或功能的服務(wù)器、硬盤資源的整合(機(jī)器數(shù)大于兩臺(tái)),對(duì)于應(yīng)用來(lái)說(shuō)它就是一個(gè)整體,目前常規(guī)集群可分為:高可用性集群(HA),負(fù)載均衡集群(如lvs),分布式儲(chǔ)、計(jì)算存儲(chǔ)集群(DFS,如googlegfs,yahoohadoop),特定應(yīng)用集群(某一特定功能服務(wù)器組合、如db、cache層等),目前互聯(lián)網(wǎng)行業(yè)主要基于這四種類型;對(duì)于前兩種類似,如果業(yè)務(wù)簡(jiǎn)單、應(yīng)用上post操作比較少,可以簡(jiǎn)單的采用四層交換機(jī)解決(如f5),達(dá)到服務(wù)高可用/負(fù)責(zé)均衡的作用,對(duì)于資源緊張的公司也有一些開源解決辦法如lvs+ha,非常靈活;對(duì)于后兩種,那就考驗(yàn)公司技術(shù)實(shí)力及應(yīng)用特點(diǎn)了,第三種DFS主要應(yīng)用于海量數(shù)據(jù)應(yīng)用上,如郵件、搜索等應(yīng)用,特別是搜索要求就更高了,除了簡(jiǎn)單海量存儲(chǔ),還包括數(shù)據(jù)挖掘、用戶行為分析;如google、yahoo就能保存分析近一年的用戶記錄數(shù)據(jù),而baidu應(yīng)該少于30天、soguo就更少了。。。這些對(duì)于搜索準(zhǔn)備性、及用戶體驗(yàn)是至關(guān)重要的。
接下來(lái),我們?cè)僬務(wù)勅绾慰茖W(xué)的管理集群,有以下關(guān)鍵幾點(diǎn):
I、監(jiān)控
主要包括故障監(jiān)控和性能、流量、負(fù)載等狀態(tài)監(jiān)控,這些監(jiān)控關(guān)系到集群的健康運(yùn)行,及潛在問題的及時(shí)發(fā)現(xiàn)與干預(yù);
a、服務(wù)故障、狀態(tài)監(jiān)控:主要是對(duì)服務(wù)器自身、上層應(yīng)用、關(guān)聯(lián)服務(wù)數(shù)據(jù)交互監(jiān)控;例如針對(duì)前端webserver,我們就可以有很多種類型的監(jiān)控,包括應(yīng)用端口狀態(tài)監(jiān)控,便于及時(shí)發(fā)現(xiàn)服務(wù)器或應(yīng)用本身是否crash、通過(guò)icmp包探測(cè)服務(wù)器健康狀態(tài),更上層可能還包括應(yīng)用各頻道業(yè)務(wù)的監(jiān)控,常用方法是采用面業(yè)特征碼進(jìn)行判斷,或?qū)χ攸c(diǎn)頁(yè)面進(jìn)行簽名,以網(wǎng)站被黑篡改(報(bào)警、并自動(dòng)恢復(fù)被篡改數(shù)據(jù))等等,這些只是一部份,還有N多監(jiān)控方式,依應(yīng)用特點(diǎn)而定,還有一些問題需解決,如集群過(guò)大,如何高性能的進(jìn)行監(jiān)控也是一個(gè)現(xiàn)實(shí)問題。
b、其它就是集群狀態(tài)類的監(jiān)控或統(tǒng)計(jì),為我們合理管理調(diào)優(yōu)集群提供數(shù)據(jù)參考、包括服務(wù)瓶頸、性能問題、異常流量、攻擊等問題。
II、故障管理
a、硬件故障問題;對(duì)于成百上千或上萬(wàn)機(jī)器的N多集群,服務(wù)器死機(jī)、硬件故障概率是非常大的,幾乎每時(shí)每刻都有服務(wù)硬件問題,死機(jī)、硬盤損壞、電源、內(nèi)存、交換機(jī)。針對(duì)這種情況,我們?cè)谠O(shè)計(jì)網(wǎng)站架構(gòu)時(shí)需要充分考慮到這些問題,并將其視為常態(tài);更多的依靠應(yīng)用的冗余機(jī)制來(lái)規(guī)避這種風(fēng)險(xiǎn),但給系統(tǒng)工程師足夠?qū)捲5奶幚頃r(shí)間。(如google不是號(hào)稱同時(shí)死800臺(tái)機(jī)器,服務(wù)不會(huì)受到任何影響嗎);這就是考驗(yàn)運(yùn)維工程師及網(wǎng)站架構(gòu)師功能的地方了,好的設(shè)計(jì)能達(dá)到google所描述自恢復(fù)能力,如gfs,糟糕的設(shè)計(jì)那就是一臺(tái)服務(wù)器的死機(jī)可能會(huì)造成大面積服務(wù)的連鎖故障反映,直接對(duì)用戶拒絕響應(yīng)。
b、應(yīng)用故障問題;可能是某一bug被觸發(fā)、或某一性能閥值被超越、攻擊等情況不一而定,但重要的一點(diǎn),是要有對(duì)這些問題的預(yù)防性措施,不能想當(dāng)然,它不會(huì)出問題,如真出問題了,如何應(yīng)對(duì)?這需要運(yùn)維工程師平時(shí)做足功夫,包括應(yīng)急響應(yīng)速度、故障處理的科學(xué)性、備用方案的有效等。
III、自動(dòng)化
自動(dòng)化:簡(jiǎn)而言之,就是將我們?nèi)粘J謩?dòng)進(jìn)行的一些工作通過(guò)工具,系統(tǒng)自動(dòng)來(lái)完成,解放我們的雙手及枯燥的重復(fù)性勞動(dòng),例如:沒有工具前,我們安裝系統(tǒng)需要一臺(tái)一臺(tái)裸機(jī)安裝,如2000臺(tái),可能需要10人/10天,搞爛N張光盤,人力成本更大。。。而現(xiàn)在通過(guò)自動(dòng)化工具,只需幾個(gè)簡(jiǎn)單命令就能搞定、還有如機(jī)器人類程序,自動(dòng)完成以往每天人工干預(yù)的工作,使其自動(dòng)完成、匯報(bào)結(jié)果,并具備一定的專家系統(tǒng)能力,能做一些簡(jiǎn)單的是/非判斷、優(yōu)化選擇等。。。這些好處非常明顯不再多說(shuō)。。。應(yīng)該說(shuō),自動(dòng)化運(yùn)維是運(yùn)維工程師職業(yè)化的一個(gè)追求,利已利公,雖然這是一個(gè)異常艱巨的任務(wù):不斷變更的業(yè)務(wù)、不規(guī)范化的應(yīng)用設(shè)計(jì)、開發(fā)模式、網(wǎng)絡(luò)架構(gòu)變更、IDC變更、規(guī)范變動(dòng)等因素,都可能會(huì)對(duì)現(xiàn)有自動(dòng)化系統(tǒng)產(chǎn)生影響,所以需要模塊化、接口化、變因參數(shù)化等因此,自動(dòng)化相關(guān)工作,是運(yùn)維工程師的核心重點(diǎn)工作之一,也是價(jià)值的體現(xiàn)。
2023年IT運(yùn)維市場(chǎng)前景分析
2023年10月29日,第一財(cái)經(jīng)刊發(fā)了關(guān)于《工信部:加強(qiáng)5G、人工智能、工業(yè)互聯(lián)網(wǎng)、物聯(lián)網(wǎng)等新型基礎(chǔ)設(shè)施建設(shè)》一文,其中指出,推動(dòng)新型IT基礎(chǔ)設(shè)施建設(shè)。加強(qiáng)5G、人工智能、工業(yè)互聯(lián)網(wǎng)、物聯(lián)網(wǎng)等新型IT基礎(chǔ)設(shè)施建設(shè),擴(kuò)大高速率、大容量、低延時(shí)網(wǎng)絡(luò)覆蓋范圍,鼓勵(lì)企業(yè)通過(guò)內(nèi)網(wǎng)改造升級(jí)實(shí)現(xiàn)人、機(jī)、物互聯(lián),為企業(yè)提供有力的信息網(wǎng)絡(luò)支撐,讓企業(yè)IT基礎(chǔ)設(shè)施成為企業(yè)發(fā)展之路上的護(hù)航者。由此可以看出,國(guó)家對(duì)企業(yè)IT基礎(chǔ)設(shè)施建設(shè)的重視之深,而我們IT運(yùn)維人員將是這次IT基礎(chǔ)設(shè)施建設(shè)的主力軍。
IT運(yùn)維是企業(yè)項(xiàng)目開發(fā)后保證業(yè)務(wù)系統(tǒng)正常運(yùn)行的必備工作之一,如何滿足企業(yè)對(duì)在線業(yè)務(wù)系統(tǒng)高可靠、低延時(shí)、大容量、零故障等要求或在終端用戶無(wú)感知情況下處理運(yùn)維過(guò)程中存在的各種各樣的突發(fā)性問題,是IT運(yùn)維人員必會(huì)的技能,但是如此優(yōu)秀的IT運(yùn)維人員幾乎一將難求。
既然,IT運(yùn)維人員對(duì)于國(guó)家相關(guān)部門大力支持的IT基礎(chǔ)設(shè)施建議那么重要,那么我們IT運(yùn)維人員都需要擁有哪些能力或IT運(yùn)維工作內(nèi)容有哪些呢?
1、IT基礎(chǔ)設(shè)施運(yùn)維自動(dòng)化
由于企業(yè)要求IT基礎(chǔ)設(shè)施能夠做到高可靠、低延時(shí)、大容量、零故障等,那就需要IT運(yùn)維人員對(duì)底層硬件設(shè)備進(jìn)行用心維護(hù),硬件不出故障才能保證上層業(yè)務(wù)系統(tǒng)的穩(wěn)定、高效地運(yùn)行。
2、IT基礎(chǔ)設(shè)施之上在線業(yè)務(wù)系統(tǒng)上線
企業(yè)在線業(yè)務(wù)系統(tǒng)是企業(yè)對(duì)內(nèi)或?qū)ν馓峁┓?wù)的重要途徑,IT運(yùn)維人員在業(yè)務(wù)系統(tǒng)開發(fā)后,能夠準(zhǔn)確及時(shí)上線業(yè)務(wù)系統(tǒng)是對(duì)其業(yè)務(wù)能力的重要考核標(biāo)準(zhǔn)之一。
3、IT基礎(chǔ)設(shè)施及在線業(yè)務(wù)系統(tǒng)監(jiān)控自動(dòng)化
對(duì)企業(yè)IT基礎(chǔ)設(shè)施及在線業(yè)務(wù)系統(tǒng)進(jìn)行有效監(jiān)控,能夠IT運(yùn)維人員及時(shí)獲知硬件或業(yè)務(wù)系統(tǒng)狀態(tài),以此判斷硬件或業(yè)務(wù)系統(tǒng)有效服務(wù)能力,對(duì)硬件或業(yè)務(wù)系統(tǒng)故障做到即時(shí)反饋,即時(shí)處理,不影響企業(yè)對(duì)內(nèi)或?qū)ν馓峁┓?wù)。
4、IT基礎(chǔ)設(shè)施及在線業(yè)務(wù)系統(tǒng)日志處理自動(dòng)化
對(duì)企業(yè)IT基礎(chǔ)設(shè)施及IT在線業(yè)務(wù)系統(tǒng)進(jìn)行日志處理(收集、分析、監(jiān)控、趨勢(shì)圖展示等),獲知硬件使用或業(yè)務(wù)系統(tǒng)中用戶行為,以此預(yù)測(cè)下一周期內(nèi)硬件或業(yè)務(wù)系統(tǒng)資源可用情況,及時(shí)應(yīng)對(duì)用戶訪問波峰。
5、在線業(yè)務(wù)系統(tǒng)發(fā)布自動(dòng)化
使用業(yè)界先進(jìn)工具實(shí)現(xiàn)在線業(yè)務(wù)系統(tǒng)代碼發(fā)布自動(dòng)化,打破傳統(tǒng)IT運(yùn)維領(lǐng)域隔離,實(shí)現(xiàn)真正的一鍵式發(fā)布業(yè)務(wù)系統(tǒng),加快系統(tǒng)部署速度,實(shí)現(xiàn)用戶無(wú)感知升級(jí)或回滾操作等。
6、IT基礎(chǔ)設(shè)施平臺(tái)升級(jí)
傳統(tǒng)的企業(yè)IT基礎(chǔ)設(shè)施平臺(tái)對(duì)企業(yè)在線業(yè)務(wù)系統(tǒng)需要底層硬件平臺(tái)的高響應(yīng)、高可靠、大容量等能力反應(yīng)不及時(shí)或不徹底的情況時(shí)有發(fā)生,這就需要我們IT運(yùn)維人員能夠?qū)鹘y(tǒng)的企業(yè)IT基礎(chǔ)設(shè)施平臺(tái)進(jìn)行升級(jí),把傳統(tǒng)的企業(yè)IT基礎(chǔ)設(shè)施平臺(tái)升級(jí)為云平臺(tái),由云平臺(tái)的高響應(yīng)、高速度、低延時(shí)、大容量等能力為業(yè)務(wù)系統(tǒng)穩(wěn)定運(yùn)維保駕護(hù)航。
7、在線業(yè)務(wù)系統(tǒng)遷移至云平臺(tái)
傳統(tǒng)的企業(yè)IT基礎(chǔ)設(shè)施平臺(tái)升級(jí)為云平臺(tái)后,需要IT運(yùn)維人員能夠把運(yùn)行在傳統(tǒng)的企業(yè)IT基礎(chǔ)設(shè)施平臺(tái)之上的業(yè)務(wù)系統(tǒng)遷移至云平臺(tái)。
8、云平臺(tái)運(yùn)行維護(hù)(升級(jí))
云平臺(tái)運(yùn)行過(guò)程中,需要IT運(yùn)維人才時(shí)刻進(jìn)行監(jiān)控、對(duì)于云平臺(tái)突發(fā)情況進(jìn)行處理。
9、IT運(yùn)維自動(dòng)化系統(tǒng)開發(fā)
由于企業(yè)IT基礎(chǔ)設(shè)施運(yùn)維過(guò)程中,涉及多業(yè)務(wù)、多場(chǎng)景、多平臺(tái)等,IT運(yùn)維人員在運(yùn)維過(guò)程中亟需一套本企業(yè)的IT運(yùn)維管理系統(tǒng),但是由于每家企業(yè)的IT基礎(chǔ)設(shè)施異樣性,導(dǎo)致市場(chǎng)上無(wú)法采購(gòu)標(biāo)準(zhǔn)化系統(tǒng)進(jìn)行應(yīng)用,大多數(shù)情況下由本企業(yè)IT運(yùn)維人員根據(jù)企業(yè)自身情況進(jìn)行開發(fā)。
10、業(yè)務(wù)系統(tǒng)海量數(shù)據(jù)分析及展示
企業(yè)在運(yùn)營(yíng)過(guò)程中產(chǎn)生大量的業(yè)務(wù)類數(shù)據(jù),并且此類數(shù)據(jù)對(duì)于生產(chǎn)、運(yùn)營(yíng)等有利于決策,因此IT運(yùn)維人員需要對(duì)企業(yè)內(nèi)部或行業(yè)內(nèi)的數(shù)據(jù)進(jìn)行收集、分析、展示等,最終為企業(yè)運(yùn)營(yíng)提供決策參考依據(jù)。
以上為我們?yōu)榱_列的IT運(yùn)維人員能力要求或工作內(nèi)容,下面我們?cè)賮?lái)了解一下2023年IT運(yùn)維市場(chǎng)規(guī)模,2023年有越來(lái)越多的企業(yè)開始擁抱互聯(lián)網(wǎng),借助互聯(lián)網(wǎng)開展無(wú)接觸式業(yè)務(wù),特別是在2023年初新冠疫情的影響下,公司為了生存開啟了全員在線辦公及業(yè)務(wù)全天侯在線處理等,這也就為企業(yè)打開了企業(yè)在線常態(tài)化;讓更多的工作借助互聯(lián)網(wǎng)完成,據(jù)權(quán)威機(jī)構(gòu)公布稱:這一切將產(chǎn)生約100萬(wàn)相關(guān)技術(shù)開發(fā)崗位及約10萬(wàn)IT運(yùn)維崗位,至2024年,IT運(yùn)維行業(yè)市場(chǎng)容量將呈現(xiàn)出逐年增長(zhǎng)態(tài)勢(shì),到2024年IT運(yùn)維管理行業(yè)市場(chǎng)規(guī)模將達(dá)到3832.8億元。
2023年IT運(yùn)維行業(yè)技術(shù)展望
企業(yè)對(duì)于IT運(yùn)維人員要求越來(lái)越T型化,其中包含更深層次的專業(yè)化,自動(dòng)化以及智能化,因此在2023年全球大多數(shù)的企業(yè)都在以行業(yè)標(biāo)桿(例如:谷歌、亞馬遜、阿里等)為榜樣,著力發(fā)展企業(yè)自身的如下方向:
1、云計(jì)算
云服務(wù)器是由云服務(wù)廠商提供的性能卓越、穩(wěn)定可靠、彈性擴(kuò)展的IaaS(InfrastructureasaService)級(jí)別云計(jì)算服務(wù)。云服務(wù)器免去了采購(gòu)IT硬件的前期準(zhǔn)備,讓企業(yè)像使用水、電、天然氣等公共資源一樣便捷、高效地使用服務(wù)器,實(shí)現(xiàn)計(jì)算資源的即開即用和彈性伸縮。
2、DevOps
DevOps使企業(yè)項(xiàng)目開發(fā)者與企業(yè)項(xiàng)目開發(fā)后IT運(yùn)維人員、測(cè)試人員、產(chǎn)品經(jīng)理、客戶等直接發(fā)生了連接關(guān)系,讓項(xiàng)目各方能夠進(jìn)行更好地結(jié)合,把以住只關(guān)注自身業(yè)務(wù)轉(zhuǎn)移到整個(gè)交付過(guò)程,甚至關(guān)注到最終服務(wù)上,DevOps已經(jīng)成熟,其在2023年將成為每一位IT運(yùn)維人員必備技能之一。
3、AIOps
IT運(yùn)維內(nèi)容沒有變,但是IT運(yùn)維方式在發(fā)生改變,AIOps將為我們IT運(yùn)維人員解放雙手,讓我們可以花費(fèi)更少的時(shí)間在IT基礎(chǔ)設(shè)施及IT業(yè)務(wù)系統(tǒng)監(jiān)控、日志、安全等工作上,把業(yè)務(wù)重心投放到企業(yè)IT基礎(chǔ)設(shè)施及IT業(yè)務(wù)系統(tǒng)發(fā)展、運(yùn)營(yíng)、服務(wù)決策上。
4、SaaS
SaaS(Software-as-a-Service)是企業(yè)提供應(yīng)用、開發(fā)、IT運(yùn)維等全套服務(wù)的一種形式,由于其不再需要用戶有任何IT基礎(chǔ)設(shè)施的投入,可以大大降低企業(yè)IT成本,獲得更優(yōu)質(zhì)的服務(wù)。
5、邊緣計(jì)算
隨著5G技術(shù)大面積應(yīng)用,更多的邊緣設(shè)備需要對(duì)接到云平臺(tái),并享受近十年云計(jì)算行業(yè)發(fā)展的紅利,但是如果生硬地把物聯(lián)網(wǎng)設(shè)備與云計(jì)算平臺(tái)對(duì)接,將會(huì)為云計(jì)算平臺(tái)帶來(lái)非常大的數(shù)據(jù)量的同時(shí),也會(huì)影響到物聯(lián)網(wǎng)邊緣設(shè)備的數(shù)據(jù)處理能力,因此我們可以考慮把云計(jì)算技術(shù)向邊緣設(shè)備進(jìn)行延伸,這就是我們所說(shuō)的邊緣計(jì)算,IT運(yùn)維人員將主導(dǎo)邊緣計(jì)算的成云能力。
6、Serverless
ServerLess,為一種無(wú)服務(wù)模式,目的讓企業(yè)不再關(guān)注IT基礎(chǔ)設(shè)施,由IT運(yùn)維人員提供IT基礎(chǔ)設(shè)施后,多企業(yè)可以共享同一IT基礎(chǔ)設(shè)施平臺(tái),企業(yè)可以攤銷更多IT基礎(chǔ)設(shè)施成本。
數(shù)字化時(shí)代,運(yùn)維行業(yè)如何乘風(fēng)破浪?
2023年,隨著新基建的大舉布局,能源行業(yè)將催生新一輪發(fā)展的新動(dòng)能,特高壓投資規(guī)模大、產(chǎn)業(yè)鏈長(zhǎng)、帶動(dòng)能力強(qiáng),將有效帶動(dòng)上下游產(chǎn)業(yè)發(fā)展,拉動(dòng)社會(huì)投資;以光伏、風(fēng)電為代表的可再生能源產(chǎn)業(yè)將迎來(lái)機(jī)遇期。能源企業(yè)將在新業(yè)態(tài)、新產(chǎn)業(yè)、新服務(wù)的轉(zhuǎn)型發(fā)展中,謀求新路徑,促進(jìn)行業(yè)本身和經(jīng)濟(jì)社會(huì)的雙重進(jìn)步。
以大數(shù)據(jù)為重要特征的新基建,將為電力行業(yè)的生產(chǎn)、經(jīng)營(yíng)、服務(wù)等領(lǐng)域帶來(lái)一片新的“藍(lán)海”。僅從電力市場(chǎng)的角度考察,新基建項(xiàng)目不僅會(huì)帶來(lái)可觀的電力新需求,還將會(huì)衍生出新的市場(chǎng)。
平價(jià)時(shí)代的運(yùn)維管理
2023年可以說(shuō)是平價(jià)的元年,取消國(guó)家補(bǔ)貼之后,電站投資者對(duì)于發(fā)電量的要求更為苛刻,許多業(yè)主已經(jīng)把發(fā)電量作為電站評(píng)價(jià)的硬性指標(biāo)。電站安全及發(fā)電量的高低,直接影響到電站
溫馨提示
- 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 人員密集場(chǎng)所應(yīng)急疏散演練
- 新生兒肺炎的治療及護(hù)理
- 廣州電影院租賃合同樣本
- 美發(fā)師形象設(shè)計(jì)合同
- 鋁單板施工合同住宅小區(qū)外墻翻新
- 客戶索賠管理辦法合同管理
- 網(wǎng)絡(luò)安全銷售合同評(píng)審指南
- 體育館自來(lái)水施工安裝協(xié)議
- 石化弱電工程安裝協(xié)議模板
- 商業(yè)綜合體人防設(shè)備施工合同
- 人教部編版語(yǔ)文八年級(jí)上冊(cè)第六單元 第26課 詩(shī)詞五首(教材解讀)
- 小學(xué)生地球科普小知識(shí)
- 湖北省武漢市漢陽(yáng)區(qū)2023-2024學(xué)年九年級(jí)上學(xué)期期中考試英語(yǔ)試卷
- 口才與演講實(shí)訓(xùn)教程智慧樹知到期末考試答案2024年
- 智慧教育發(fā)展趨勢(shì)智慧課堂
- GB/T 43635-2024法庭科學(xué)DNA實(shí)驗(yàn)室檢驗(yàn)規(guī)范
- 勞動(dòng)仲裁:如何處理仲裁證據(jù)
- 大酒店勞務(wù)派遣服務(wù)專項(xiàng)方案
- 詩(shī)歌朗誦與表演實(shí)踐案例
- 醫(yī)院培訓(xùn)課件:《病室環(huán)境管理》
- 中國(guó)感染性休克指南
評(píng)論
0/150
提交評(píng)論