版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
1、北京市科學(xué)技術(shù)研究院市級(jí)信息系統(tǒng)升級(jí)改造項(xiàng)目初步驗(yàn)收意見(jiàn)報(bào)告項(xiàng)目編號(hào):PXM2014178102000009項(xiàng)目名稱(chēng):北京工業(yè)云服務(wù)平臺(tái)基礎(chǔ)設(shè)施能力提升建設(shè)項(xiàng)目負(fù)責(zé)人:謝威項(xiàng)目執(zhí)行期限:2014年1月至2014年12月項(xiàng)目建設(shè)單位:北京市科學(xué)技術(shù)研究院驗(yàn)收日期:2014年12月1.引言文檔目的編制本文檔的目的是記錄“北京市科學(xué)技術(shù)研究院北京工業(yè)云服務(wù)平臺(tái)基礎(chǔ)設(shè)施能力提升建設(shè)”項(xiàng)目建設(shè)和初步驗(yàn)收的整個(gè)過(guò)程,確保完成了項(xiàng)目工作任務(wù),并已達(dá)到了相關(guān)的功能和技術(shù)指標(biāo),項(xiàng)目可進(jìn)入試運(yùn)行階段。文檔范圍本文檔范圍包括初驗(yàn)大綱和驗(yàn)收意見(jiàn)等。2.初驗(yàn)大綱項(xiàng)目概況2009年起,我院開(kāi)始進(jìn)入高性能計(jì)算和云計(jì)算領(lǐng)域。
2、2010,我院受市經(jīng)信委委托,開(kāi)始創(chuàng)建“北京工業(yè)云”計(jì)算服務(wù)平臺(tái),從而明確了高性能計(jì)算和云計(jì)算技術(shù)以及“云”商業(yè)模式的落地方向。2011年,北京工業(yè)云成為北京市“祥云計(jì)劃”重點(diǎn)示范工程項(xiàng)目之一。工業(yè)云服務(wù)平臺(tái)是我院在“祥云工程”的引領(lǐng)下,在“兩化融合”政策實(shí)施和推動(dòng)中小企業(yè)信息化發(fā)展指導(dǎo)思想下,建立的為中小企業(yè)提供的更加便捷、安全、高效的云應(yīng)用和服務(wù)平臺(tái)。我院本著“創(chuàng)新改變命運(yùn)、智慧引領(lǐng)發(fā)展、計(jì)算成就夢(mèng)想”的建設(shè)理念,積極響應(yīng)國(guó)家工業(yè)與信息化部提出的信息化普及工程,以及兩化融合理念,聚集了眾多軟件行業(yè)優(yōu)秀的戰(zhàn)略合作伙伴。以建立工業(yè)云生態(tài)環(huán)境,提供一種MALL的信息化服務(wù)模式為目標(biāo),為中小企業(yè),
3、特別是工業(yè)企業(yè)提供SAAS信息化產(chǎn)品服務(wù)模式,為獨(dú)立軟件供應(yīng)商提供IT環(huán)境部署和IT基礎(chǔ)設(shè)施建設(shè)服務(wù)。北京工業(yè)云服務(wù)平臺(tái)是整體信息化云服務(wù)平臺(tái),通過(guò)云服務(wù)的方式,為用戶提供網(wǎng)絡(luò)化、開(kāi)放靈活、低門(mén)檻、安全可靠的云服務(wù),提供中小工業(yè)企業(yè)領(lǐng)域特色定制化解決方案,為中小企業(yè),特別是工業(yè)企業(yè)提供信息化服務(wù),提升云平臺(tái)的服務(wù)能力和提高企業(yè)管理信息化能力。工業(yè)云服務(wù)平臺(tái)是在云計(jì)算模式下對(duì)工業(yè)企業(yè)提供軟件服務(wù),使工業(yè)企業(yè)的社會(huì)資源實(shí)現(xiàn)共享化。隨著云計(jì)算市場(chǎng)規(guī)模的快速擴(kuò)大,工業(yè)云計(jì)算服務(wù)業(yè)務(wù)的不斷推廣,平臺(tái)在企業(yè)信息化服務(wù)、云主機(jī)服務(wù)、高性能計(jì)算服務(wù)、工程計(jì)算圖形前后處理等方面的計(jì)算能力無(wú)法滿足用戶的需求。因此
4、,本項(xiàng)目主要工作內(nèi)容是為位于北京市海淀區(qū)永豐產(chǎn)業(yè)基地北科產(chǎn)業(yè)園3號(hào)樓一層的中密機(jī)房增加機(jī)柜、空調(diào)、UPS、服務(wù)器等基礎(chǔ)設(shè)施,保證該機(jī)房在2014年能夠正式啟用,進(jìn)一步提升北京工業(yè)云服務(wù)平臺(tái)的基礎(chǔ)設(shè)施能力。在中密機(jī)房167平米內(nèi)擺放50個(gè)42U標(biāo)準(zhǔn)機(jī)柜,配置3套200KVA的UPS供電系統(tǒng),保證每機(jī)柜12KW的供電能力;按照國(guó)家相關(guān)標(biāo)準(zhǔn)配備3套機(jī)房室內(nèi)精密空調(diào)和1套機(jī)房室外冷水機(jī)組保證機(jī)房制冷;并增加20臺(tái)加虛擬化服務(wù)器、20臺(tái)應(yīng)用服務(wù)器、5臺(tái)對(duì)象存儲(chǔ)服務(wù)器、3臺(tái)八路服務(wù)器、10臺(tái)圖形工作站和6臺(tái)網(wǎng)絡(luò)交換機(jī),支撐平臺(tái)2014年的業(yè)務(wù)拓展。項(xiàng)目計(jì)劃工期第一季度:方案設(shè)計(jì),確定方案第二季度:招標(biāo)采購(gòu)
5、設(shè)備第三季度:設(shè)備安裝調(diào)試第四季度:設(shè)備運(yùn)營(yíng),總結(jié)驗(yàn)收項(xiàng)目建設(shè)目標(biāo)完成北京市海淀區(qū)永豐產(chǎn)業(yè)基地北科產(chǎn)業(yè)園3號(hào)樓一層機(jī)房中密區(qū)機(jī)房的基礎(chǔ)設(shè)施能力提升建設(shè),實(shí)現(xiàn)以下項(xiàng)目目標(biāo):1、中密機(jī)房達(dá)到600KVA的UPS供電能力、400KW的總制冷量,能夠提供恒溫恒濕、安全可靠的機(jī)房環(huán)境;2、增加的機(jī)柜、網(wǎng)絡(luò)和服務(wù)器等設(shè)備能夠支撐平臺(tái)2014年度平臺(tái)用戶的業(yè)務(wù)需求,保證平臺(tái)的業(yè)務(wù)量在14年度提高10%以上。3、項(xiàng)目完成后,提高平臺(tái)的競(jìng)爭(zhēng)力,新增省市級(jí)課題1項(xiàng)。項(xiàng)目執(zhí)行工期項(xiàng)目實(shí)施期限為2014年1月至12月,具體進(jìn)度安排如下:第一階段,2014年1月-2014年2月,需求分析和設(shè)計(jì)階段本階段詳細(xì)調(diào)研分析了北
6、京市工業(yè)設(shè)計(jì)、制造領(lǐng)域?qū)Ρ本┕I(yè)云平臺(tái)的需求,分析平臺(tái)前期運(yùn)營(yíng)出現(xiàn)的問(wèn)題,主要從基礎(chǔ)設(shè)施平臺(tái)和典型應(yīng)用、企業(yè)需求等方面著手設(shè)計(jì)平臺(tái)基礎(chǔ)資源能力提升方案,最終確定項(xiàng)目的實(shí)施方案。第二階段,2014年3月-2014年5月,發(fā)布公開(kāi)招標(biāo)信息,進(jìn)行招投標(biāo),確定中標(biāo)服務(wù)商,采購(gòu)設(shè)備按照項(xiàng)目需求公開(kāi)招標(biāo)、確定中標(biāo)服務(wù)商、采購(gòu)相關(guān)設(shè)備,逐步實(shí)現(xiàn)平臺(tái)基礎(chǔ)設(shè)施設(shè)備的采購(gòu)、安裝和部署。第三階段,2014年6月-2014年9月,設(shè)備的安裝、調(diào)試、培訓(xùn)按照項(xiàng)目需求安裝、完善、調(diào)試相關(guān)設(shè)備,實(shí)現(xiàn)平臺(tái)基礎(chǔ)設(shè)施能力的提升。為用戶進(jìn)行現(xiàn)場(chǎng)培訓(xùn)。第四階段,2014年10月-2014年12月,試運(yùn)行,項(xiàng)目總結(jié),驗(yàn)收項(xiàng)目設(shè)備安裝、
7、調(diào)試結(jié)束,進(jìn)入試運(yùn)行階段,試運(yùn)行階段完成后,撰寫(xiě)相應(yīng)的總結(jié)報(bào)告,準(zhǔn)備驗(yàn)收。項(xiàng)目基本按照計(jì)劃工期執(zhí)行。2.3項(xiàng)目執(zhí)行情況立項(xiàng)情況2014年1月,北京市財(cái)政評(píng)審中心完成項(xiàng)目經(jīng)費(fèi)評(píng)審,批復(fù)經(jīng)費(fèi)萬(wàn)元3月,財(cái)政局下發(fā)財(cái)政專(zhuān)項(xiàng)經(jīng)費(fèi)后,項(xiàng)目正式啟動(dòng)。組織機(jī)構(gòu)項(xiàng)目啟動(dòng)后,我院正式成立項(xiàng)目組,主要成員簡(jiǎn)介及分工如下:姓名職務(wù)職稱(chēng)專(zhuān)業(yè)任務(wù)分工謝威副院長(zhǎng)高工管理學(xué)負(fù)責(zé)項(xiàng)目總體溝通協(xié)調(diào)趙琉濤高工軟件工程項(xiàng)目管理、采購(gòu)季紅副研究員信息負(fù)責(zé)項(xiàng)目具體執(zhí)行潘勇工程師計(jì)算機(jī)系統(tǒng)結(jié)構(gòu)負(fù)責(zé)項(xiàng)目具體執(zhí)行金翊助理研究員計(jì)算機(jī)系統(tǒng)結(jié)構(gòu)負(fù)責(zé)項(xiàng)目具體執(zhí)行、米購(gòu)?fù)踔伊止こ處熡?jì)算機(jī)項(xiàng)目管理、預(yù)算編制人員劉東旭助理研究員力學(xué)負(fù)責(zé)項(xiàng)目具體執(zhí)行招投標(biāo)
8、情況項(xiàng)目執(zhí)行期為2014年1月至2014年12月。2014年1月,項(xiàng)目組開(kāi)始設(shè)備采購(gòu)的籌備工作。完成了確定招標(biāo)代理公司、細(xì)化項(xiàng)目采購(gòu)方案、準(zhǔn)備招標(biāo)材料等工作。項(xiàng)目的采購(gòu)部分(涉及金額萬(wàn)元)由北京市科學(xué)技術(shù)研究院委托北京北科博佳招標(biāo)代理有限公司以政府采購(gòu)公開(kāi)招標(biāo)的方式進(jìn)行。根據(jù)采購(gòu)貨物的類(lèi)型,將項(xiàng)目分成了2個(gè)包,第一包為服務(wù)器、交換機(jī)等IT相關(guān)設(shè)備,第二包為UPS空調(diào)、室外機(jī)等供電及制冷設(shè)備。并在2014年5月在中國(guó)政府采購(gòu)網(wǎng)招標(biāo)公告欄目和北京市政府采購(gòu)網(wǎng)招標(biāo)公告欄目?jī)?nèi)登載了第一、二包的招標(biāo)公告,并分別于5月底日開(kāi)標(biāo)。經(jīng)評(píng)標(biāo)委員會(huì)根據(jù)招標(biāo)文件及評(píng)標(biāo)大綱要求對(duì)各投標(biāo)人的投標(biāo)文件進(jìn)行評(píng)審,確定中標(biāo)供
9、應(yīng)商為北京潤(rùn)成恒信科技有限公司和北京中科金財(cái)科技股份有限公司。平臺(tái)測(cè)試2014年6月-9月期間,項(xiàng)目組完成了設(shè)備的采購(gòu)、安裝調(diào)試和驗(yàn)收工作。按照軟件測(cè)試要求,對(duì)北京市科學(xué)技術(shù)研究院北京工業(yè)云服務(wù)平臺(tái)基礎(chǔ)設(shè)施能力提升建設(shè)企業(yè)管理平臺(tái)建設(shè)項(xiàng)目中的軟硬件系統(tǒng)分別設(shè)計(jì)了測(cè)試用例,用例執(zhí)行的比例達(dá)到100%發(fā)現(xiàn)的問(wèn)題經(jīng)委托方確認(rèn)修改后,通過(guò)回歸測(cè)試確認(rèn)問(wèn)題都已進(jìn)行了相應(yīng)的處理。滿足了充分性測(cè)試的評(píng)價(jià)要求。具體如下:對(duì)于UPS系統(tǒng)(方耐德Galaxy7000系列200KVAUP洪3套)進(jìn)行了充分的測(cè)試,所有設(shè)備配置均符合合同約定,設(shè)備外觀良好,UPS內(nèi)部電路板、各種開(kāi)關(guān)、變壓器、電抗器、電容器、功率模塊單
10、元、風(fēng)扇的物理狀況均良好。設(shè)備安裝符合要求,運(yùn)行狀態(tài)良好,輸入輸出電壓符合要求、整流器自動(dòng)啟動(dòng)功能正常、逆變器啟動(dòng)功能正常、旁路功能測(cè)試通過(guò)、切換功能正常,設(shè)備整體功能可以正常使用,測(cè)試執(zhí)行充分,各項(xiàng)測(cè)試目標(biāo)均已完成,各項(xiàng)測(cè)試已通過(guò),系統(tǒng)可以投入使用。對(duì)于精密空調(diào)系統(tǒng)(施耐德TDCV340阻冷型空調(diào)2臺(tái)、施耐德TDCV3400水冷型空調(diào)1臺(tái)),設(shè)備外觀完好,設(shè)備內(nèi)部各組件物理性能完好,設(shè)備安裝符合要求預(yù)留了維修空間,皮帶松緊合適,室外風(fēng)扇工作正常,排水管尺寸合理,傳感器已正確安裝,冷凝排水管正確安裝,設(shè)備主電路電壓、控制器電壓正常,設(shè)備整體運(yùn)作良好,測(cè)試全部通過(guò),系統(tǒng)可以投入使用。對(duì)于室外冷水
11、機(jī)組(約克YEWS170HA50E外冷水機(jī)組1套),設(shè)備外觀良好,內(nèi)部各組件物理性能完好,水泵、冷卻塔、制冷機(jī)組工作正常,水流狀況均勻穩(wěn)定,內(nèi)部無(wú)異常噪音,電機(jī)、軸承溫度在正常范圍,減震效果良好,整機(jī)運(yùn)轉(zhuǎn)正常,測(cè)試全部通過(guò),系統(tǒng)可以投入使用。對(duì)于八路服務(wù)器舊MSystemX3850X5進(jìn)行系統(tǒng)設(shè)備加電測(cè)試、系統(tǒng)設(shè)備配置檢查、系統(tǒng)功能測(cè)試。對(duì)于圖形工作站LenovoThinkStationD30進(jìn)行加電測(cè)試、工作站配置檢測(cè)、工作站各部件性能測(cè)試。對(duì)于虛擬化服務(wù)器DellPowerEdgeR720進(jìn)行服務(wù)器加電測(cè)試、服務(wù)器配置檢測(cè)、服務(wù)器各部件性能測(cè)試。對(duì)于應(yīng)用服務(wù)器LenovoThinkServ
12、erRD640、對(duì)象存儲(chǔ)服務(wù)器LenovoThinkServerRD640進(jìn)行服務(wù)器加電測(cè)試、服務(wù)器配置檢測(cè)、服務(wù)器各部件性能測(cè)試。對(duì)于Lenovo威圖機(jī)柜通過(guò)機(jī)柜的外形、機(jī)柜的焊接、機(jī)柜的零部件、機(jī)柜的裝配測(cè)試來(lái)檢測(cè)硬件的有無(wú)故障,配置信息是否正確,各部件的性能如何。對(duì)于網(wǎng)絡(luò)交換機(jī)HUAWEIS6700-24-EIHUAWEIS5700-52C-EI通過(guò)熱備份、網(wǎng)絡(luò)管理等功能的測(cè)試,網(wǎng)絡(luò)實(shí)現(xiàn)了超算中心HPC云計(jì)算區(qū)、渲染區(qū)、DM動(dòng)能服務(wù)器區(qū)(隔離區(qū))以及辦公網(wǎng)絡(luò)區(qū)Office五大核心功能區(qū)各功能區(qū)之間的數(shù)據(jù)高速交換和云計(jì)算區(qū)虛擬機(jī)的數(shù)據(jù)交換需求,并且速率達(dá)到了萬(wàn)兆,核心交換機(jī)交換容量達(dá)40T
13、,包轉(zhuǎn)發(fā)率7200M滿足了未來(lái)3-5年的擴(kuò)展。通過(guò)對(duì)北京市科學(xué)技術(shù)研究院北京工業(yè)云服務(wù)平臺(tái)基礎(chǔ)設(shè)施能力提升建設(shè)企業(yè)管理平臺(tái)建設(shè)項(xiàng)目的確認(rèn)測(cè)試,結(jié)果表明空調(diào)和UPS系統(tǒng)、軟硬件設(shè)備和整體系統(tǒng)在各項(xiàng)功能上達(dá)到了設(shè)計(jì)目標(biāo),基本滿足軟件需求規(guī)格說(shuō)明和軟件設(shè)計(jì)文檔的要求,可提交用戶使用。經(jīng)費(fèi)使用情況經(jīng)北京市經(jīng)濟(jì)和信息化委員會(huì)的前置審查,以及北京市財(cái)政經(jīng)費(fèi)評(píng)審中心的評(píng)審,共批復(fù)項(xiàng)目資金萬(wàn)元,項(xiàng)目資金于2014年2月到賬。截至2014年12月,項(xiàng)目執(zhí)行期內(nèi)實(shí)際支出資金萬(wàn)元,結(jié)余萬(wàn)元,為招標(biāo)結(jié)余2014年貨款已支付,貨物驗(yàn)收合格。支出明細(xì)表如下表所示。序號(hào)設(shè)備名稱(chēng)品牌、規(guī)格、型號(hào)數(shù)量單價(jià)(元/臺(tái)、套)總額(兀
14、)備注計(jì)劃購(gòu)買(mǎi)實(shí)際購(gòu)置預(yù)算金額購(gòu)買(mǎi)金額1千兆交換機(jī)1華為S6700-24-EI華為S6700-24-EI263,80066,780133,560-2千兆交換機(jī)2華為S5700-52C-EI華為S5700-52C-EI424,09024,58098,320-3虛擬化服務(wù)器浪潮NF5720DellPowerEdgeR7202071,50075,9601,519,200正偏離4應(yīng)用服務(wù)器曙光I620LenovoThinkServerRD6402052,20057,0501,141,000正偏離5對(duì)象存儲(chǔ)服務(wù)器曙光I620LenovoThinkServerRD640599,70088,180440,9
15、00正偏離6八路服務(wù)器浪潮NF8560MIBMSystemX3850X53598,900579,8701,739,610正偏離7圖形工作站曙光W560ILenovoThinkStationD301073,44043,590435,900正偏離8機(jī)柜聯(lián)想威圖機(jī)柜,42U標(biāo)準(zhǔn)機(jī)柜,每個(gè)機(jī)柜2個(gè)32APDU聯(lián)想威圖機(jī)柜42U標(biāo)準(zhǔn)機(jī)柜,每個(gè)機(jī)柜2個(gè)32APDU508,7009,800490,000-9UPSAPCG7TM200CSGALAXY200KVAUPS主機(jī)施耐德GALAXY70003363,000363,0001,089,000正偏離10UPS電池60分鐘在線,46只/組*3組施耐德M2AL1
16、2-100R3186,300186,000558,000正偏離11UPS配套材料電池脫扣控制開(kāi)關(guān)及電池架、電池安裝連接電纜施耐德NSX400F314,90415,00045,000正偏離12精密空調(diào)系統(tǒng)(水冷)施耐德TDCV3400施耐德TDCV34002243,200243,000486,000-13精密空調(diào)系統(tǒng)(風(fēng)冷)施耐德TDAR2842施耐德TDAR30021413,600413,000413,000-14室外水冷機(jī)組約克YEWS170HA50E約克YEWS170HA50E1749,800749,000749,0009,338,490虛擬化服務(wù)器和應(yīng)用服務(wù)器最終采用的型號(hào)分別為Dell
17、PowerEdgeR720和LenovoThinkServerRD640,這兩款服務(wù)器與預(yù)算中計(jì)劃購(gòu)置的服務(wù)器相比,能夠?qū)崿F(xiàn)更大范圍的虛擬化,擁有更好的I/O性能;對(duì)象存儲(chǔ)服務(wù)器和圖形工作站最終采用的型號(hào)分別為L(zhǎng)enovoThinkServerRD640和LenovoThinkStationD30,這兩款產(chǎn)品與預(yù)算中計(jì)劃購(gòu)置的產(chǎn)品相比,處理器性能有所降低,但對(duì)于用于存儲(chǔ)和圖形計(jì)算的服務(wù)器來(lái)說(shuō),關(guān)鍵是存儲(chǔ)和分辨率指標(biāo),適當(dāng)降低其處理器性能不影響核心功能和項(xiàng)目需求。八路服務(wù)器最終采用的型號(hào)為舊MSystemX3850X5,增強(qiáng)平臺(tái)的穩(wěn)定性,在高性能計(jì)算領(lǐng)域,能夠減少因系統(tǒng)宕機(jī)造成的重復(fù)計(jì)算,提升平
18、臺(tái)的整體使用效率和客戶滿意度。UPS、UPS電池及UPS配套材料與預(yù)算中計(jì)劃購(gòu)置的設(shè)備品牌型號(hào)不同,但在性能及功能上均達(dá)到了項(xiàng)目指標(biāo)要求。項(xiàng)目目標(biāo)完成情況通過(guò)本項(xiàng)目工作,完善了中密機(jī)房的配套設(shè)施,2014年底中密機(jī)房順利啟用。恒溫恒濕、安全可靠的機(jī)房環(huán)境實(shí)現(xiàn)情況本項(xiàng)目建設(shè)的中密區(qū)機(jī)房面積167平米,機(jī)房位置見(jiàn)“永豐機(jī)房整體平面圖”。項(xiàng)目通過(guò)購(gòu)置機(jī)柜、室內(nèi)空調(diào)、室外空調(diào)機(jī)組以及UPS設(shè)備,實(shí)現(xiàn)了中密機(jī)房恒溫恒濕、安全可靠的機(jī)房環(huán)境。購(gòu)置的內(nèi)部空調(diào)、UPS、機(jī)柜等設(shè)備擺放位置詳見(jiàn)“中密機(jī)房?jī)?nèi)部空調(diào)、UPS、機(jī)柜設(shè)備添加示意圖”。(1)機(jī)柜中密區(qū)共擺放4排機(jī)柜,每排14個(gè),其中機(jī)房承重支柱占用2個(gè)機(jī)
19、柜位置,另有4個(gè)機(jī)柜設(shè)計(jì)安裝供電列頭輸出機(jī)柜,其它50個(gè)即為本次購(gòu)買(mǎi)的聯(lián)想威圖42U標(biāo)準(zhǔn)機(jī)柜(每個(gè)機(jī)柜配備2個(gè)32APDU)。永豐機(jī)房整體平面圖(橙色、藍(lán)色、綠色為新增設(shè)備,室外水冷機(jī)組未顯示于圖中)中密機(jī)房?jī)?nèi)部空調(diào)、UPS、機(jī)柜設(shè)備添加示意圖UPS在本項(xiàng)目執(zhí)行前,已從物業(yè)鋪設(shè)三條400A電纜到配電室,可通過(guò)三個(gè)供電回路的配電柜為3套UPS供電。為保證中密機(jī)房的不間斷供電需求,按照設(shè)計(jì)的400臺(tái)服務(wù)器,當(dāng)UPS滿負(fù)載200KVA時(shí),在負(fù)載為計(jì)算機(jī)負(fù)載情況下,滿足單臺(tái)60分鐘電池后備工作時(shí)間,本次安裝了3套200KVA的施耐德GALAXY7000UPS供電系統(tǒng)以及3套施耐德M2AL12-100R
20、UPS電池。(3)室內(nèi)空調(diào)和室外機(jī)組為保證機(jī)房的制冷需求,本次在中密區(qū)增加了3臺(tái)精密空調(diào),包括2臺(tái)施耐德TDCV3400水冷精密空調(diào)系統(tǒng)和1臺(tái)施耐德TDAR3002風(fēng)冷精密空調(diào)系統(tǒng),總制冷量增加約400KW,加上原有的1臺(tái)103KW的室內(nèi)空調(diào),可實(shí)現(xiàn)約500KW的制冷量,制冷量達(dá)到了設(shè)計(jì)的400臺(tái)服務(wù)器的制冷要求。相應(yīng)的,機(jī)房配置了制冷量為584KW的室外水冷機(jī)組,滿足了室外機(jī)組制冷量大于室內(nèi)機(jī)組制冷量的要求。網(wǎng)絡(luò)、服務(wù)器和存儲(chǔ)等設(shè)備配置情況在北京工業(yè)云服務(wù)平臺(tái)整體架構(gòu)基礎(chǔ)上,對(duì)工業(yè)云服務(wù)平臺(tái)進(jìn)行了升級(jí),平臺(tái)擴(kuò)容情況如“北京工業(yè)云服務(wù)平臺(tái)整體架構(gòu)圖”所示,項(xiàng)目增加內(nèi)容見(jiàn)圖中紅色框標(biāo)注部分,包括
21、:云主機(jī)區(qū)擴(kuò)容虛擬化服務(wù)器20臺(tái)、企業(yè)信息化區(qū)擴(kuò)容應(yīng)用服務(wù)器20臺(tái)、大數(shù)據(jù)區(qū)搭建對(duì)象存儲(chǔ)服務(wù)器5臺(tái)、科學(xué)計(jì)算區(qū)和生物計(jì)算區(qū)擴(kuò)容八路服務(wù)器3臺(tái)、工程計(jì)算區(qū)擴(kuò)容圖形工作站10臺(tái)北京工業(yè)云服務(wù)平臺(tái)整體架構(gòu)圖另外,為擴(kuò)容上述平臺(tái)設(shè)備搭建相應(yīng)的基礎(chǔ)網(wǎng)絡(luò)環(huán)境新增網(wǎng)絡(luò)交換機(jī)6臺(tái),其中4臺(tái)作為接入交換機(jī),2臺(tái)作為匯聚交換機(jī)。綜合以上業(yè)務(wù)平臺(tái)的擴(kuò)容需要和原有網(wǎng)絡(luò)結(jié)構(gòu),為保障設(shè)備的連通性和業(yè)務(wù)的擴(kuò)展性,平臺(tái)配備了新的網(wǎng)絡(luò)設(shè)備。擴(kuò)容后高密及新啟用中密的整體網(wǎng)絡(luò)拓?fù)鋱D如下:網(wǎng)絡(luò)拓?fù)鋱D如圖所示,中密機(jī)房部署4臺(tái)48口千兆以太網(wǎng)的接入交換機(jī),用于保障新增服務(wù)器間的互聯(lián)互通,同時(shí)部署2臺(tái)24口萬(wàn)兆以太網(wǎng)的匯聚交換機(jī),用于保
22、障新增服務(wù)器與核心交換機(jī)的互聯(lián)互通。支撐業(yè)務(wù)發(fā)展情況1、高性能計(jì)算平臺(tái)(1)工程計(jì)算區(qū)通過(guò)本項(xiàng)目建設(shè),工程計(jì)算區(qū)從20臺(tái)圖形工作站增加至30臺(tái)圖形工作站,新增的10臺(tái)LenovoThinkStationD30圖形工作站配置為:2顆8核IntelXeon6CE5-2630V2處理器,主頻;內(nèi)存DDR364GB,并配置NvidiaQuadroK4000專(zhuān)業(yè)圖形卡。均部署在HY-CLOUD平臺(tái)上,為客戶提供建模、計(jì)算、三維仿真,虛擬現(xiàn)實(shí)和后處理等服務(wù)。大大提高了前后處理的用戶數(shù)量,平均在線用戶數(shù)從15個(gè)增加到26個(gè),總用戶數(shù)從138個(gè)(內(nèi)部用戶28個(gè))增加到173個(gè),新增的企業(yè)用戶包括聯(lián)想集團(tuán)、丹麥
23、技術(shù)大學(xué)樊建華課題組、沈陽(yáng)工業(yè)大學(xué)沈新普課題組、湖南大學(xué)機(jī)械與運(yùn)載工程學(xué)院尹漢鋒課題組、北京工業(yè)大學(xué)建筑工程學(xué)院徐海濱課題組、北京海基嘉盛科技有限公司、中國(guó)航天標(biāo)準(zhǔn)化研究所、北京南山航空材料研究院、舍弗勒投資(中國(guó))有限公司、激域科技(北京)有限公司、賽瑪特傳動(dòng)技術(shù)(北京)有限公司、北京自然博物館、大鐘寺、朝陽(yáng)醫(yī)院、大覺(jué)寺等。用戶類(lèi)型涉及科學(xué)研究、三維仿真,虛擬現(xiàn)實(shí),醫(yī)療等多個(gè)方面。A三維仿真2014年度三維仿真方面的典型案例是聯(lián)想集團(tuán)在利用該區(qū)域設(shè)備進(jìn)行筆記本仿真時(shí),需同時(shí)計(jì)算30個(gè)工況(每個(gè)工況平均并行規(guī)模為60核,每個(gè)工況計(jì)算時(shí)間10小時(shí)),本項(xiàng)目完成前進(jìn)行一次計(jì)算約需要1周時(shí)間,現(xiàn)在縮
24、短為1天左右,從而大大加快了其筆記本產(chǎn)品的上市時(shí)間。筆記本仿真B虛擬現(xiàn)實(shí)在3D及虛擬計(jì)算方面,2014年使用圖形工作站的平均頻次達(dá)10次/月,典型用戶有北京自然博物館、大鐘寺、朝陽(yáng)醫(yī)院、大覺(jué)寺等,項(xiàng)目合同額達(dá)160萬(wàn)元。工業(yè)云虛擬仿真實(shí)現(xiàn)了生產(chǎn)加工企業(yè)的安全生產(chǎn)流程展示及安全性能仿真。醫(yī)療健康領(lǐng)域虛擬仿真可為臨床治療提供三維手術(shù)導(dǎo)航服務(wù),也可作為示教平臺(tái)用于3D解剖流程的科普和教學(xué)。面向醫(yī)療行業(yè)VR項(xiàng)目的開(kāi)發(fā),為部門(mén)業(yè)務(wù)開(kāi)展提供技術(shù)儲(chǔ)備,并可用于醫(yī)療機(jī)構(gòu)的科學(xué)研究,為中心帶來(lái)商業(yè)回報(bào)。面向文博單位的三維數(shù)據(jù)采集針對(duì)博物館藏品提供了一種形象的展覽展示途徑,有利于文化、自然遺產(chǎn)信息資源的收集、保護(hù)
25、、管理和利用,為促進(jìn)人類(lèi)歷史文化傳承提供了一種全新的理念和方法。3D及虛擬計(jì)算方面的典型案例:“走進(jìn)別樣大覺(jué)寺展示系統(tǒng)”項(xiàng)目:該項(xiàng)目共采集30G模型點(diǎn)云數(shù)據(jù),3,441,534,681個(gè)點(diǎn)、86個(gè)掃描站點(diǎn),掃描古建筑16座,佛像及雕塑21座,樹(shù)木3棵。該項(xiàng)目是以北京西山大覺(jué)寺真實(shí)環(huán)境為題材制作完成的一款三維全景虛擬漫游展示軟件。將真實(shí)環(huán)境模擬成以三維形式展現(xiàn)的虛擬場(chǎng)景,結(jié)合UI控制元素、平面地圖、聲音、視頻、flash等多媒體元素,利用多點(diǎn)觸控設(shè)備和互聯(lián)網(wǎng),以第一人稱(chēng)視角,實(shí)現(xiàn)全方位多媒體互動(dòng)展示。用戶可通過(guò)自然手勢(shì)和語(yǔ)音控制場(chǎng)景切換,圖像縮放、旋轉(zhuǎn),視頻播放,虛擬行走等操作。“大鐘寺永樂(lè)大鐘
26、數(shù)字化掃描”項(xiàng)目:永樂(lè)大鐘高米,外徑米,鐘身內(nèi)外鑄滿陽(yáng)文楷書(shū)佛教經(jīng)咒,是明初館閣體書(shū)法藝術(shù)代表作,大鐘外側(cè)自上而下被劃分為7個(gè)銘文圈,內(nèi)側(cè)又有5個(gè)銘文圈,字?jǐn)?shù)總計(jì)約22萬(wàn)7千余。專(zhuān)家們?cè)欢然ㄙM(fèi)4年時(shí)間才制成拓本,再編成永樂(lè)大鐘銘文真跡。該項(xiàng)目對(duì)整個(gè)大鐘內(nèi)外兩次進(jìn)行點(diǎn)云數(shù)據(jù)采集及精細(xì)化處理,同時(shí)以實(shí)景拍攝的方式獲取貼圖紋理。在3D建模環(huán)節(jié),首先,將拍攝的貼圖紋理用3DReshaper軟件映射到點(diǎn)云數(shù)據(jù);然后,對(duì)點(diǎn)云數(shù)據(jù)進(jìn)行低模拓?fù)洌瑯?gòu)建大鐘3D模型;最后,將點(diǎn)云數(shù)據(jù)的貼圖烘培到拓?fù)浜蟮?D模型,再將烘培出的貼圖在Photoshop進(jìn)行去高光、匹配顏色處理。利用3D展示平臺(tái)將構(gòu)建的永樂(lè)大鐘模型集
27、成到三維場(chǎng)景中,從各個(gè)角度全方位的展示大鐘全貌,觀眾可清晰的看到大鐘表面的經(jīng)文,給人以身臨其境的感受?!氨本┳匀徊┪镳^藏品數(shù)字化采集”項(xiàng)目:北京自然博物館藏品總量多大21萬(wàn)件,并還將不斷增加。為了科學(xué)、高效的管理館藏標(biāo)本,留存珍貴標(biāo)本的數(shù)字影像資料,從2012年起,北京自然館開(kāi)始對(duì)館藏標(biāo)本著手進(jìn)行數(shù)字化采集加工工作,然而這么龐大的采集加工數(shù)據(jù),是數(shù)字化工作面臨的巨大難題。該項(xiàng)目耗時(shí)一年,完成了15200件館藏標(biāo)本的拍攝,200個(gè)宣傳短片的制作及80件恐龍化石的三維掃描工作,并將采集數(shù)據(jù)上傳PDM系統(tǒng),建成了藏品采集加工資源數(shù)據(jù)庫(kù),實(shí)現(xiàn)了藏品數(shù)據(jù)的流程化、精細(xì)化存儲(chǔ)管理和準(zhǔn)確提取?!叭S手術(shù)輔助
28、診療系統(tǒng)”項(xiàng)目:該項(xiàng)目開(kāi)發(fā)了一款致力于醫(yī)院婦科子宮疾病的輔助治療和科普教學(xué)的應(yīng)用軟件。婦科的CT、MRI圖像要求醫(yī)務(wù)人員具備一定的從業(yè)經(jīng)驗(yàn)才能形象地理解其信息,給婦科手術(shù)和日常科普教學(xué)帶來(lái)極大的不便,鑒于此,朝陽(yáng)醫(yī)院和北京市計(jì)算中心合作開(kāi)發(fā)了本系統(tǒng)。本系統(tǒng)主要應(yīng)用于婦科手術(shù)三維導(dǎo)航及3D解剖流程的科普和教學(xué)。經(jīng)驗(yàn)豐富的醫(yī)生根據(jù)專(zhuān)業(yè)醫(yī)學(xué)設(shè)備成像結(jié)果,利用本系統(tǒng)建立形象的子宮病變?nèi)S模型,此模型可作為手術(shù)中的三維導(dǎo)航圖,準(zhǔn)確的定位子宮病灶,輔助主刀醫(yī)生順利完成手術(shù)。本系統(tǒng)還可為醫(yī)生和患者提供形象的子宮病變演示,并可永久保留醫(yī)生的診斷數(shù)據(jù)。應(yīng)用本系統(tǒng),醫(yī)生和患者可形象、直觀的了解子宮疾病的病變情況。
29、(2)科學(xué)計(jì)算區(qū)本項(xiàng)目為該區(qū)域增加了2臺(tái)大內(nèi)存的八路服務(wù)器舊MSystemX3850X5。每臺(tái)服務(wù)器配備2TB內(nèi)存,處理器為10核,并支持40GbInfiniband網(wǎng)絡(luò)。該區(qū)域主要面向化學(xué)化工、材料科學(xué)等領(lǐng)域提供科學(xué)計(jì)算服務(wù)。從事基于量子化學(xué)、第一性原理、半經(jīng)驗(yàn)方法、分子力學(xué)、分子動(dòng)力學(xué)方法的多尺度計(jì)算模擬等。2014年底,平臺(tái)新增用戶包括北京化工大學(xué)、北京東方超算科技有限公司、清華大學(xué)、西北工業(yè)大學(xué)、四川大學(xué)、北京理工大學(xué)機(jī)電學(xué)院、中科院工程熱物理研究所、華南理工大學(xué)材料科學(xué)與工程學(xué)院、北京大學(xué)物理學(xué)院、中國(guó)石油大學(xué)、中科院武漢物理與數(shù)學(xué)研究所等,其中八路服務(wù)器使用需求大量增加,平均在線用
30、戶增加到超過(guò)2個(gè),計(jì)算總核數(shù)4000核。相較2013年用戶群趨于穩(wěn)定,總計(jì)算需求不斷提升。A爆炸模擬下圖為某研究所使用大內(nèi)存八路服務(wù)器進(jìn)行爆炸模擬實(shí)驗(yàn),該類(lèi)應(yīng)用對(duì)處理器、內(nèi)存及并行運(yùn)算需求較大。爆炸模擬任務(wù)B化合物模擬下圖為北京化工大學(xué)執(zhí)行的分子化合物模擬計(jì)算任務(wù),利用高性能服務(wù)器的優(yōu)秀性能,能夠?qū)衔镞M(jìn)行大批量的模擬分析、大大縮短用戶進(jìn)行科學(xué)研究的實(shí)驗(yàn)時(shí)間和實(shí)驗(yàn)范圍,提高其研究效率。分子化合物模擬(3)生物計(jì)算區(qū)本項(xiàng)目在該區(qū)域增加1臺(tái)大內(nèi)存的八路服務(wù)器舊MSystemX3850X5,服務(wù)器配備2TB內(nèi)存容量,處理器核數(shù)為10核,2塊SS硬盤(pán),并支持40GbInfiniband網(wǎng)絡(luò)。項(xiàng)目建設(shè)
31、后,該區(qū)域擁有70個(gè)曙光TC3600刀片節(jié)點(diǎn),3個(gè)胖節(jié)點(diǎn),其內(nèi)存分別為512G、1T、2T,同時(shí)該區(qū)域的共享存儲(chǔ)達(dá)到600T。該計(jì)算區(qū)域提供的服務(wù)主要包括統(tǒng)計(jì)建模、DNA序列組裝、序列比對(duì)、藥物篩選、蛋白質(zhì)組學(xué)研究等。生物計(jì)算區(qū)的能力提升顯著地提升了平臺(tái)的競(jìng)爭(zhēng)力。2014年先后同中國(guó)農(nóng)業(yè)大學(xué)、中國(guó)農(nóng)業(yè)科學(xué)院、上海交通大學(xué)、湖南師范大學(xué)等24個(gè)單位先后簽訂了生物信息學(xué)分析平臺(tái)使用合同。我們的技術(shù)人員,通過(guò)此平臺(tái)了先后完成了40多項(xiàng)數(shù)據(jù)分析任務(wù),涵蓋了轉(zhuǎn)錄組、基因組、宏基因組等各個(gè)領(lǐng)域。另外,在此平臺(tái)之上,我們還完成了多項(xiàng)科研項(xiàng)目,涵蓋了北科院創(chuàng)新團(tuán)隊(duì),北科院青年骨干等項(xiàng)目,也促進(jìn)科研論文、軟件著
32、作權(quán)等成果的產(chǎn)出。生物計(jì)算區(qū)通過(guò)擴(kuò)容先后解決了多個(gè)難題:一、應(yīng)對(duì)計(jì)算密集型任務(wù)能力大大提升。農(nóng)科院水稻全基因組關(guān)聯(lián)分析項(xiàng)目,該項(xiàng)目原始數(shù)據(jù)約9T,包含了2000多個(gè)樣本的全基因組數(shù)據(jù),在生物計(jì)算區(qū)硬件擴(kuò)容以前,完成這樣的分析項(xiàng)目需要耗時(shí)半年以上,現(xiàn)在通過(guò)作業(yè)調(diào)度軟件,把分析任務(wù)中可并行的部分分配到整個(gè)集群的節(jié)點(diǎn)上,一個(gè)月便完成所有的注釋和關(guān)聯(lián)分析,并且找到了多個(gè)跟性狀相關(guān)的變異位點(diǎn),達(dá)到了客戶的預(yù)期。二、應(yīng)對(duì)內(nèi)存密集型任務(wù)能力大大提升。DNA序列裝方面,以往只能開(kāi)展一些中小規(guī)模的組裝項(xiàng)目。增加2T胖節(jié)點(diǎn)以后,完成了中國(guó)農(nóng)業(yè)大學(xué)轉(zhuǎn)基因豬研究組進(jìn)行轉(zhuǎn)基因豬的DNA序列組裝,其原始數(shù)據(jù)達(dá)到500GB
33、;中國(guó)農(nóng)業(yè)科學(xué)院小麥育種中心實(shí)驗(yàn)室需要進(jìn)行DNA序列的組裝,原始數(shù)據(jù)達(dá)到2TB;這兩個(gè)項(xiàng)目在生物計(jì)算區(qū)域擴(kuò)容之前是根本無(wú)法進(jìn)行的。三、存儲(chǔ)能力大大提升。生物數(shù)據(jù)的獲得代價(jià)很高,可靠地保存這些數(shù)據(jù)是一個(gè)難題。我們的集群系統(tǒng)擴(kuò)容以后,采用最新的龍存存儲(chǔ)系統(tǒng),有效地保證用戶數(shù)據(jù)的安全和高可用性。很多用戶分析完數(shù)據(jù)以后,都愿意把數(shù)據(jù)計(jì)算存放在該計(jì)算區(qū)域內(nèi),這也成為我們的一項(xiàng)新業(yè)務(wù)。2、云虛擬化平臺(tái)(1)企業(yè)信息化區(qū)2014年增加了20臺(tái)LenovoThinkServerRD640應(yīng)用服務(wù)器。每臺(tái)應(yīng)用服務(wù)器配置2顆IntelXeonE5-2650V2,主頻;內(nèi)存256GB。企業(yè)信息化服務(wù)區(qū)主要是支持中小
34、企業(yè)私有云方案,提高中小型企業(yè)的信息化能力,目前提供定制數(shù)據(jù)中心,辦公系統(tǒng)托管,物理服務(wù)器托管。著力打通云主機(jī)和托管物理機(jī)平臺(tái)整合,通過(guò)云化處理逐步將中小企業(yè)物理機(jī)業(yè)務(wù)過(guò)渡到云上,實(shí)現(xiàn)企業(yè)信息化的云化,并部署通用辦公系統(tǒng)、OA/CRM系統(tǒng)和企業(yè)資產(chǎn)管理系統(tǒng)對(duì)外提供SaaS服務(wù)。IT資源的集中化管理和專(zhuān)業(yè)的運(yùn)營(yíng)維護(hù)團(tuán)隊(duì)減少了中小企業(yè)信息化成本和擴(kuò)容復(fù)雜度。2014年企業(yè)信息化區(qū),在原有用戶使用量增大的同時(shí),新增企業(yè)用戶19家,包括幻境灣、泰合佳成、北京大唐神州、元工國(guó)際、科普發(fā)展中心、開(kāi)拓創(chuàng)想、中聯(lián)學(xué)藝、雅思在線、中關(guān)村聯(lián)盟、藤思學(xué)院、北京合邦科技、大康醫(yī)療、福至創(chuàng)展、中歐商學(xué)院、北京美之音藝術(shù)
35、中心、水文地質(zhì)、朝陽(yáng)衛(wèi)生局、秦川數(shù)碼科技、科維能動(dòng)等,各企業(yè)主要部署獨(dú)立的Web應(yīng)用、數(shù)據(jù)庫(kù)、資產(chǎn)管理軟件和應(yīng)用業(yè)務(wù)系統(tǒng)。擴(kuò)容后的企業(yè)信息化區(qū)的拓?fù)鋱D如下:企業(yè)信息化區(qū)拓?fù)鋱D工業(yè)云服務(wù)平臺(tái)基礎(chǔ)設(shè)施能力提升建設(shè)項(xiàng)目的實(shí)施,提升了企業(yè)信息化區(qū)的服務(wù)能力與水平。在未進(jìn)行工業(yè)云信息化能力提升建設(shè)之前,企業(yè)信息化最多在線主機(jī)數(shù)為166個(gè),經(jīng)過(guò)能力提升建設(shè),截止到2014年底,在線用戶數(shù)已增加至579個(gè),在線用戶數(shù)仍在不斷提升,預(yù)計(jì)到2015年底,將突破1000個(gè)。企業(yè)信息化系統(tǒng)在線用戶數(shù)新增用戶部署系統(tǒng)數(shù)量相對(duì)較少,多數(shù)為4至5臺(tái)虛擬主機(jī),需要經(jīng)過(guò)一段時(shí)間的試驗(yàn)和磨合。原有客戶中北京數(shù)碼大方公司(CAX
36、A)新增33臺(tái)虛擬主機(jī)用于部署其Web服務(wù)站點(diǎn)、內(nèi)部資產(chǎn)管理系統(tǒng)和內(nèi)部業(yè)務(wù)OA系統(tǒng);北京北森測(cè)評(píng)技術(shù)有限公司新增用于部署人才測(cè)評(píng)系統(tǒng)、招聘管理系統(tǒng)、績(jī)效管理系統(tǒng)虛擬主機(jī)70余臺(tái);博匯科技租用30臺(tái)虛擬服務(wù)器用于搭建其私有云平臺(tái);朗德華新增12臺(tái)虛擬服務(wù)器,搭建其信息發(fā)布系統(tǒng)和企業(yè)管理系統(tǒng)。(2)云主機(jī)區(qū)本區(qū)域新部署20臺(tái)DellPowerEdgeR720虛擬化服務(wù)器,每臺(tái)服務(wù)器配備了雙路10核處理器,主頻;內(nèi)存256GB;8塊"SAS熱插拔硬盤(pán),單塊硬盤(pán)容量3TB;1塊支持Raid5,6的控制器卡。在原有141臺(tái)虛擬機(jī)的基礎(chǔ)上新增348臺(tái)虛擬機(jī)。云主機(jī)服務(wù)區(qū)主要提供公用化的互聯(lián)網(wǎng)基礎(chǔ)設(shè)施服務(wù),提供基于云計(jì)算模式的按需使用和按需付費(fèi)能力的云主機(jī)租用服務(wù)。主要面向工業(yè)企業(yè),中小企業(yè)創(chuàng)新設(shè)計(jì)。截止2014年底,云主機(jī)總量已達(dá)489臺(tái),部署業(yè)務(wù)系統(tǒng)20余套,相較2013年有很大提升。云主機(jī)及部署業(yè)務(wù)系統(tǒng)云主機(jī)區(qū)2014年新增服務(wù)用戶及規(guī)模包括:北京市科學(xué)技術(shù)研究院下屬28個(gè)子單位,原來(lái)都各自在物理服務(wù)器上部署門(mén)
溫馨提示
- 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 二零二五年度網(wǎng)絡(luò)安全應(yīng)急響應(yīng)托管服務(wù)合同2篇
- 二零二五年度綠色建筑評(píng)價(jià)標(biāo)識(shí)工程聯(lián)營(yíng)協(xié)議3篇
- 二零二五年度大貨車(chē)司機(jī)職業(yè)風(fēng)險(xiǎn)防范合同范本3篇
- 網(wǎng)絡(luò)安全文化傳播與防范意識(shí)強(qiáng)化研究
- 2025版實(shí)訓(xùn)基地學(xué)生實(shí)習(xí)就業(yè)安全保障合同2篇
- 小學(xué)教育中的數(shù)學(xué)創(chuàng)新思維培養(yǎng)
- 清遠(yuǎn)廣東清遠(yuǎn)陽(yáng)山縣紀(jì)委監(jiān)委招聘政府購(gòu)買(mǎi)服務(wù)人員筆試歷年參考題庫(kù)附帶答案詳解
- 杭州浙江杭州市湖墅學(xué)校編外教師招聘筆試歷年參考題庫(kù)附帶答案詳解
- 二零二五年度智能家具制造承包合作協(xié)議3篇
- 2025年牛津譯林版選擇性必修1地理下冊(cè)月考試卷
- 肩袖損傷的護(hù)理查房課件
- 2023屆北京市順義區(qū)高三二模數(shù)學(xué)試卷
- 公司差旅費(fèi)報(bào)銷(xiāo)單
- 梁山伯與祝英臺(tái)小提琴譜樂(lè)譜
- 我國(guó)全科醫(yī)生培訓(xùn)模式
- 2021年上海市楊浦區(qū)初三一模語(yǔ)文試卷及參考答案(精校word打印版)
- 八年級(jí)上冊(cè)英語(yǔ)完形填空、閱讀理解100題含參考答案
- 八年級(jí)物理下冊(cè)功率課件
- DBJ51-T 188-2022 預(yù)拌流態(tài)固化土工程應(yīng)用技術(shù)標(biāo)準(zhǔn)
- 《長(zhǎng)津湖》電影賞析PPT
- 銷(xiāo)售禮儀培訓(xùn)PPT
評(píng)論
0/150
提交評(píng)論