中國(guó)電信集團(tuán)公司江西省網(wǎng)整合優(yōu)化工程技術(shù)交流_第1頁(yè)
中國(guó)電信集團(tuán)公司江西省網(wǎng)整合優(yōu)化工程技術(shù)交流_第2頁(yè)
中國(guó)電信集團(tuán)公司江西省網(wǎng)整合優(yōu)化工程技術(shù)交流_第3頁(yè)
中國(guó)電信集團(tuán)公司江西省網(wǎng)整合優(yōu)化工程技術(shù)交流_第4頁(yè)
中國(guó)電信集團(tuán)公司江西省網(wǎng)整合優(yōu)化工程技術(shù)交流_第5頁(yè)
已閱讀5頁(yè),還剩68頁(yè)未讀, 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)

文檔簡(jiǎn)介

會(huì)計(jì)學(xué)1中國(guó)電信集團(tuán)公司江西省網(wǎng)整合優(yōu)化工程技術(shù)交流整體網(wǎng)絡(luò)調(diào)整策略網(wǎng)絡(luò)整合分為原骨干網(wǎng)范圍和原省網(wǎng)范圍原骨干網(wǎng)同省網(wǎng)結(jié)合部的背對(duì)背互聯(lián)將取消整體網(wǎng)絡(luò)將分為三層

平面一:由三個(gè)超級(jí)核心節(jié)點(diǎn)的1、2號(hào)路由器及其鏈路,各省第一出口鏈路組成

平面二:由普通核心節(jié)點(diǎn)到超級(jí)核心節(jié)點(diǎn)的鏈路和各省第二出口的鏈路組成

平面三:各省出口路由器和省內(nèi)路由器之間鏈路組成整體流量策略將保持原163網(wǎng)的基本流量策略對(duì)于沒(méi)有雙出口省份將建設(shè)新的第二出口節(jié)點(diǎn)第1頁(yè)/共73頁(yè)全網(wǎng)BGP結(jié)構(gòu)BGP邏輯結(jié)構(gòu)保留3大片區(qū)中的原RR點(diǎn)作為一級(jí)RR點(diǎn)一級(jí)RR為北京/西安/廣州/武漢/上海/南京C1省網(wǎng)整合后第一、二出口節(jié)點(diǎn)作為二級(jí)RR點(diǎn)二級(jí)RR點(diǎn)作為核心節(jié)點(diǎn)的一級(jí)RR的Client端省網(wǎng)內(nèi)部地市節(jié)點(diǎn),骨干網(wǎng)匯接路由器作為省第一、二出口二級(jí)RR點(diǎn)的Client端全網(wǎng)中所有的RR點(diǎn)將分處不同Cluster-ID第2頁(yè)/共73頁(yè)第3頁(yè)/共73頁(yè)全網(wǎng)BGP策略國(guó)際路由將下放到省出口匯接節(jié)點(diǎn)地市節(jié)點(diǎn)原則上為國(guó)內(nèi)路由,部分條件具備的地市節(jié)點(diǎn)將播放國(guó)際路由BGP相關(guān)策略將主要在一級(jí)RR點(diǎn)實(shí)現(xiàn),二級(jí)RR點(diǎn)僅做微調(diào)現(xiàn)網(wǎng)中國(guó)內(nèi)路由條目在4000條左右,網(wǎng)絡(luò)優(yōu)化后因?yàn)楣?jié)點(diǎn)增加,其省網(wǎng)路由條目將分散,預(yù)期在調(diào)整初將在10000條左右。國(guó)際路由條目為125000條左右第4頁(yè)/共73頁(yè)全網(wǎng)IGP路由結(jié)構(gòu)IGP邏輯結(jié)構(gòu)全網(wǎng)IGP統(tǒng)一為ISIS的LEVEL-2-ONLYISIS涵蓋網(wǎng)絡(luò)中所有的LOOPBACK端口和電路端口全網(wǎng)通過(guò)ISIS的METRIC引導(dǎo)流量流向全網(wǎng)流量拓?fù)浠颈3衷歉删W(wǎng)設(shè)計(jì)通過(guò)ISIS的METRIC調(diào)整將在骨干網(wǎng)中將3個(gè)網(wǎng)絡(luò)層次分開(kāi)全網(wǎng)ISIS路由條目在全網(wǎng)整合初期近3000~5000條第5頁(yè)/共73頁(yè)省網(wǎng)整合的前期準(zhǔn)備全網(wǎng)整合將遵循扁平化的原則,骨干網(wǎng)預(yù)期覆蓋到地市節(jié)點(diǎn)網(wǎng)絡(luò)的調(diào)研數(shù)據(jù)是否完整準(zhǔn)確

地市節(jié)點(diǎn)接入路由器相關(guān)數(shù)據(jù):路由引擎/板卡內(nèi)存、軟件版本等城域網(wǎng)接入的模型因?yàn)檎w整合后,原省網(wǎng)網(wǎng)絡(luò)結(jié)構(gòu)會(huì)發(fā)生變化,需要在前期充分考慮原省網(wǎng)的業(yè)務(wù)模型,主要考慮是否有業(yè)務(wù)會(huì)受網(wǎng)絡(luò)邏輯變化的影響。對(duì)于要增加第二出口節(jié)點(diǎn)的省份需要就其第二出口節(jié)點(diǎn)選擇和相關(guān)電路資源進(jìn)行確認(rèn)第6頁(yè)/共73頁(yè)省網(wǎng)接入的模型以雙星型為基本結(jié)構(gòu)兩個(gè)出口節(jié)點(diǎn)其資源應(yīng)基本保持均等其第二出口選擇可不局限為省會(huì)外的核心地市應(yīng)確認(rèn)第二出口節(jié)點(diǎn)施工條件和時(shí)間省第二出口節(jié)點(diǎn)二級(jí)RRCluster-IDN4省會(huì)出口節(jié)點(diǎn)二級(jí)RRCluster-IDN3地市A地市C地市B地市D地市E地市F地市H地市G地市I片區(qū)內(nèi)核心節(jié)點(diǎn)一級(jí)RR-BCluster-IDN2片區(qū)內(nèi)核心節(jié)點(diǎn)一級(jí)RR-ACluster-IDN1IBGPPEERIBGPPEER第7頁(yè)/共73頁(yè)省第二出口節(jié)點(diǎn)省會(huì)出口節(jié)點(diǎn)地市A地市C地市B地市D地市E地市F地市H地市G地市IIBGPPEERIBGPPEER城域網(wǎng)AAS-65002城域網(wǎng)EAS65003AS4134IBGPEBGP省會(huì)城域網(wǎng)AS-65001省AS65000原骨干匯接路由器原骨干匯接路由器骨干核心路由器骨干核心路由器城域網(wǎng)I城域網(wǎng)G城域網(wǎng)B第8頁(yè)/共73頁(yè)骨干匯接路由器省第二出口節(jié)點(diǎn)骨干省會(huì)匯接路由器第一出口節(jié)點(diǎn)地市A地市C地市B地市D地市E地市F地市H地市G地市IIBGPPEERIBGPPEER城域網(wǎng)AAS-65002城域網(wǎng)EAS65003AS4134IBGPEBGP省會(huì)城域網(wǎng)AS-65001骨干核心路由器骨干核心路由器城域網(wǎng)I城域網(wǎng)G城域網(wǎng)B第9頁(yè)/共73頁(yè)城域網(wǎng)接入模型(一)條件具備的地市將采用EBGP方式接入城域網(wǎng)接入路由器地市骨干匯接路由器骨干網(wǎng)AS4134

IBGP/ISIS地市私有ASEBGP地市城域網(wǎng)第10頁(yè)/共73頁(yè)城域網(wǎng)接入模型(二)目前城域網(wǎng)接入路由器和城域網(wǎng)合設(shè)的節(jié)點(diǎn),采用原城域網(wǎng)IGP或靜態(tài)路由的方式實(shí)現(xiàn)互聯(lián)向地市網(wǎng)絡(luò)發(fā)布OSPF默認(rèn)路由引導(dǎo)出流量地市骨干匯接路由器骨干網(wǎng)AS4134IBGP/ISISBGP聚合引導(dǎo)回流量城域網(wǎng)OSPF范圍地市城域網(wǎng)第11頁(yè)/共73頁(yè)城域網(wǎng)接入原則相應(yīng)納入骨干網(wǎng)的節(jié)點(diǎn)設(shè)備性能需要滿足骨干網(wǎng)絡(luò)的相關(guān)要求城域網(wǎng)接入以模型一為優(yōu)選,條件暫不具備的選擇模型二方式,并在條件具備后采用模型一實(shí)現(xiàn)接入對(duì)原各城域網(wǎng)接入將進(jìn)行相關(guān)調(diào)整,增大帶寬和建少鏈路在條件允許的情況下,合并一些相對(duì)技術(shù)力量薄弱、地域臨近的小城市城域網(wǎng),成為大城域網(wǎng)并統(tǒng)一接入骨干網(wǎng)絡(luò)第12頁(yè)/共73頁(yè)省網(wǎng)調(diào)整相應(yīng)流程第一步:完成出口節(jié)點(diǎn)割接對(duì)于雙出口省份,先割接省會(huì)節(jié)點(diǎn),在割接第二出口節(jié)點(diǎn)對(duì)于現(xiàn)網(wǎng)單出口省份,原則上先搭建第二出口節(jié)點(diǎn)對(duì)暫不具備第二出口節(jié)點(diǎn)建設(shè)條件的省份將先割接第一出口節(jié)點(diǎn),其后搭建第二出口節(jié)點(diǎn)原骨干網(wǎng)在出口節(jié)點(diǎn)的設(shè)備和原省網(wǎng)背對(duì)背設(shè)備將擇優(yōu)選擇,替換下設(shè)備將工程統(tǒng)一調(diào)配在原省出口割接的期間,直接割接省會(huì)城域網(wǎng)的接入方式,并采用模式一實(shí)現(xiàn)在出口節(jié)點(diǎn)割接期間,保留原省干IGP,并發(fā)布默認(rèn)路由到其他地市節(jié)點(diǎn),引導(dǎo)出流量,并通過(guò)原IGP引導(dǎo)出口回地市流量在納入骨干網(wǎng)的電路將更換電路地址為骨干網(wǎng)地址范圍,其地址由骨干網(wǎng)分配第13頁(yè)/共73頁(yè)省網(wǎng)調(diào)整相應(yīng)流程建議第二步:逐步完成地市節(jié)點(diǎn)割接對(duì)于各地市節(jié)點(diǎn)參照模式一、二逐步完成地市節(jié)點(diǎn)割接原省干范圍在割接過(guò)程中保持原IGP結(jié)構(gòu),在割接后切換到新的骨干ISIS進(jìn)程,并同原省內(nèi)IGP剝離對(duì)于單電路上聯(lián)節(jié)點(diǎn)或節(jié)點(diǎn)設(shè)備性能較差的節(jié)點(diǎn),將由省RR發(fā)布相應(yīng)的默認(rèn)路由引導(dǎo),不承載大路由表單在納入骨干網(wǎng)的電路將更換電路地址為骨干網(wǎng)地址范圍,其地址由骨干網(wǎng)分配第14頁(yè)/共73頁(yè)省網(wǎng)調(diào)整后其內(nèi)部路由變化原省干的IGP切換為骨干ISIS原通過(guò)省內(nèi)BGP或IGP交換的路由將切換為通過(guò)骨干BGP和ISIS承載原流量策略基本保持原相關(guān)基于BGP承載的VPN業(yè)務(wù)需要調(diào)整第15頁(yè)/共73頁(yè)MPLS/VPN業(yè)務(wù)的整合考慮部分省如果有MPLS/VPN業(yè)務(wù)需要考慮在整合前期進(jìn)行調(diào)整剝離,避免整合對(duì)業(yè)務(wù)造成的影響在整合后如果有業(yè)務(wù)需要省內(nèi)承載MPLS/VPN,將采用省內(nèi)接入共享、骨干隔離的方式,骨干網(wǎng)通過(guò)原169網(wǎng)完成MPLS/VPN業(yè)務(wù)的承載,163網(wǎng)目前不承載MPLS/VPN業(yè)務(wù)在有業(yè)務(wù)需要的省份,原省范圍內(nèi)的設(shè)備將打開(kāi)MPLS標(biāo)記交換功能實(shí)現(xiàn)對(duì)業(yè)務(wù)的支持第16頁(yè)/共73頁(yè)網(wǎng)絡(luò)整合需要省內(nèi)考慮的問(wèn)題對(duì)需要內(nèi)部調(diào)整的城域網(wǎng)需要提前調(diào)整就需要建設(shè)第二出口節(jié)點(diǎn)省份需要確認(rèn)節(jié)點(diǎn)建設(shè)條件對(duì)現(xiàn)網(wǎng)中的省內(nèi)IP地址需要規(guī)范,避免細(xì)碎路由出現(xiàn)對(duì)現(xiàn)網(wǎng)中的部分VPN業(yè)務(wù)進(jìn)行調(diào)整,避免業(yè)務(wù)影響第17頁(yè)/共73頁(yè)中國(guó)電信CHINANET全網(wǎng)整合思路試點(diǎn)省份經(jīng)驗(yàn)交流介紹江西省網(wǎng)整合規(guī)劃江西省網(wǎng)內(nèi)部網(wǎng)絡(luò)優(yōu)化思路第18頁(yè)/共73頁(yè)……Cisco12008Cisco12008Cisco12016SSR8600SSR8600SSR8000SSR8000SSR8000SSR8000國(guó)家骨干AS4134單出口節(jié)點(diǎn)-甘肅第19頁(yè)/共73頁(yè)……Cisco12008Cisco12016SSR8600SSR8600SSR8000SSR8000SSR8000SSR8000國(guó)家骨干AS4134第20頁(yè)/共73頁(yè)Cisco12008Cisco12016Cisco12012Cisco12012Cisco12012SSR8600SSR8600SSR8000SSR8000……Cisco12008SSR8000SSR8000SSR8000SSR8000國(guó)家骨干AS4134第21頁(yè)/共73頁(yè)Cisco12008Cisco12016Cisco12012Cisco12012Cisco12012Cisco12008SSR8600SSR8600SSR8000SSR8000……SSR8000SSR8000SSR8000SSR8000國(guó)家骨干AS4134第22頁(yè)/共73頁(yè)SSR8000SSR8000SSR8000SSR8000Cisco12012Cisco12012Cisco12012Cisco12008Cisco12016Cisco12016SSR8600SSR8600SSR8000SSR8000……國(guó)家骨干AS4134第23頁(yè)/共73頁(yè)第二類(lèi)省份-貴州第24頁(yè)/共73頁(yè)整合后拓?fù)浣Y(jié)構(gòu)第25頁(yè)/共73頁(yè)中國(guó)電信CHINANET全網(wǎng)整合思路試點(diǎn)省份經(jīng)驗(yàn)交流介紹江西省網(wǎng)整合規(guī)劃江西省網(wǎng)內(nèi)部網(wǎng)絡(luò)優(yōu)化思路第26頁(yè)/共73頁(yè)江西省網(wǎng)現(xiàn)狀第27頁(yè)/共73頁(yè)第二類(lèi)省份的整合方案---湖南、江西、海南、廣西、安徽、云南(1)網(wǎng)絡(luò)現(xiàn)狀省網(wǎng)大多采用雙星型或部分網(wǎng)狀連接結(jié)構(gòu),省會(huì)和省內(nèi)第二出口節(jié)點(diǎn)處于省網(wǎng)核心地位,疏通至骨干網(wǎng)的出省流量。骨干網(wǎng)節(jié)點(diǎn)和省網(wǎng)節(jié)點(diǎn)都采用CiscoGSR路由器,省會(huì)和省內(nèi)第二出口節(jié)點(diǎn)的骨干網(wǎng)匯接路由器和省網(wǎng)核心路由器背靠背連接,由骨干網(wǎng)匯接路由器負(fù)責(zé)出省路由。省內(nèi)可能還存在匯接節(jié)點(diǎn),起匯聚、疏通部分節(jié)點(diǎn)流量的作用。省內(nèi)其他節(jié)點(diǎn)通過(guò)省內(nèi)中繼連接省會(huì)和省內(nèi)第二出口(或匯接節(jié)點(diǎn))。第28頁(yè)/共73頁(yè)(2)整合后骨干網(wǎng)節(jié)點(diǎn)設(shè)置建議中國(guó)電信寬帶互聯(lián)網(wǎng)骨干網(wǎng)擴(kuò)大到覆蓋上述省的省會(huì)城市、省內(nèi)第二出口節(jié)點(diǎn)城市和所有省網(wǎng)節(jié)點(diǎn)城市。(3)骨干網(wǎng)節(jié)點(diǎn)設(shè)備選擇省會(huì)節(jié)點(diǎn)保留骨干網(wǎng)匯接路由器,取消原省網(wǎng)核心路由器及其與骨干網(wǎng)匯接路由器的背靠背連接,負(fù)責(zé)疏通本省出省流量和省內(nèi)流量交換。省內(nèi)第二出口節(jié)點(diǎn)保留骨干網(wǎng)匯接路由器,取消原省網(wǎng)核心路由器及其與骨干網(wǎng)匯接路由器的背靠背連接,協(xié)助省會(huì)節(jié)點(diǎn)疏通省內(nèi)流量,同時(shí)提供第二出省路由備份。綜合考慮原骨干網(wǎng)匯接路由器和省網(wǎng)核心路由器的設(shè)備型號(hào)、檔次和處理能力,選用能力較高的設(shè)備作為新的骨干網(wǎng)匯接路由器。第29頁(yè)/共73頁(yè)其他省內(nèi)節(jié)點(diǎn)升級(jí)為骨干網(wǎng)接入節(jié)點(diǎn),利舊省網(wǎng)設(shè)備作為骨干網(wǎng)接入路由器,下連城域網(wǎng),疏通網(wǎng)間流量。若省內(nèi)存在多個(gè)匯接節(jié)點(diǎn),可以將匯接節(jié)點(diǎn)與省內(nèi)一般節(jié)點(diǎn)共同對(duì)待,利舊省網(wǎng)設(shè)備作為匯接路由器,下連城域網(wǎng),疏通網(wǎng)間流量。省網(wǎng)規(guī)模較大時(shí),也可以繼續(xù)保留省內(nèi)匯接節(jié)點(diǎn)的原有作用,協(xié)助省會(huì)節(jié)點(diǎn)、省內(nèi)第二出口節(jié)點(diǎn)疏通部分省內(nèi)網(wǎng)間流量。若省內(nèi)各節(jié)點(diǎn)全部采用Cisco路由器,升級(jí)后納入骨干網(wǎng)范圍。若省內(nèi)節(jié)點(diǎn)采用其他廠家設(shè)備,無(wú)法判斷其處理能力和互通性是否滿足骨干網(wǎng)的要求,建議暫不納入骨干網(wǎng),待省網(wǎng)自行改造(替換為Cisco、Juniper或華為路由器)后再根據(jù)情況確定下一步全省整合方案。第30頁(yè)/共73頁(yè)整合后調(diào)整下來(lái)的路由器可根據(jù)本省城域網(wǎng)建設(shè)的實(shí)際情況,靈活調(diào)配,推至城域網(wǎng)邊緣作為城域網(wǎng)的匯聚路由器,同時(shí)做為城域網(wǎng)連接骨干網(wǎng)的接入路由器。省會(huì)的骨干網(wǎng)匯接路由器通過(guò)中繼鏈路連接超級(jí)核心節(jié)點(diǎn)、核心節(jié)點(diǎn)的核心路由器。省內(nèi)第二出口節(jié)點(diǎn)骨干網(wǎng)匯接路由器通過(guò)中繼電路連至相應(yīng)大區(qū)省會(huì)節(jié)點(diǎn)的核心路由器,同時(shí)與省會(huì)的骨干網(wǎng)匯接路由器相連。其他省內(nèi)節(jié)點(diǎn)的骨干網(wǎng)接入路由器通過(guò)中繼電路與省會(huì)骨干網(wǎng)匯接路由器、省內(nèi)第二出口節(jié)點(diǎn)骨干網(wǎng)匯接路由器連接。如存在省內(nèi)匯接節(jié)點(diǎn),其匯接路由器通過(guò)中繼電路上連省會(huì)的骨干網(wǎng)匯接路由器和省內(nèi)第二出口節(jié)點(diǎn)骨干網(wǎng)匯接路由器,下連部分省內(nèi)節(jié)點(diǎn)的骨干網(wǎng)接入路由器。省內(nèi)各城域網(wǎng)與省內(nèi)節(jié)點(diǎn)骨干網(wǎng)接入路由器連接。在本地城域網(wǎng)數(shù)量較多,上連鏈路數(shù)量和帶寬需求較高的情況下,省會(huì)節(jié)點(diǎn)、省內(nèi)第二出口節(jié)點(diǎn)和匯接節(jié)點(diǎn)骨干網(wǎng)匯接路由器也可以有選擇地直接下連某些本地城域網(wǎng)。第31頁(yè)/共73頁(yè)中國(guó)電信CHINANET全網(wǎng)整合思路試點(diǎn)省份經(jīng)驗(yàn)交流介紹江西省網(wǎng)整合規(guī)劃江西省網(wǎng)內(nèi)部網(wǎng)絡(luò)優(yōu)化思路第32頁(yè)/共73頁(yè)江西省網(wǎng)現(xiàn)網(wǎng)存在的問(wèn)題網(wǎng)絡(luò)中存在單點(diǎn)故障網(wǎng)絡(luò)中路由協(xié)議的問(wèn)題網(wǎng)絡(luò)設(shè)備的軟件問(wèn)題網(wǎng)絡(luò)設(shè)備的硬件問(wèn)題第33頁(yè)/共73頁(yè)網(wǎng)絡(luò)中存在單點(diǎn)故障根據(jù)前面對(duì)網(wǎng)絡(luò)結(jié)構(gòu)的描述,我們可以發(fā)現(xiàn):163骨干網(wǎng)和城域網(wǎng)中存在單點(diǎn)故障的問(wèn)題。比如163省骨干網(wǎng)中,每個(gè)地市的落地設(shè)備均為一臺(tái),如果此設(shè)備當(dāng)機(jī)會(huì)影響整個(gè)地市;比如在城域網(wǎng)中,撫州、吉安、鷹潭、上饒、景德鎮(zhèn)的核心層交換機(jī)與163省網(wǎng)的連接均為單設(shè)備、單連接,如果此鏈路斷掉將會(huì)影響整個(gè)地市。第34頁(yè)/共73頁(yè)網(wǎng)絡(luò)中路由協(xié)議的問(wèn)題目前江西電信163省網(wǎng)和各地市城域網(wǎng)采用同一個(gè)OSPF路由協(xié)議,163省網(wǎng)為Area0,各地市為Area1-Area11。由于在同一個(gè)IGP路由協(xié)議中,各個(gè)地市IP地址分配又比較分散,因此在OSPF中不能匯總,造成網(wǎng)絡(luò)中路由數(shù)量過(guò)多。特別是通過(guò)分發(fā)進(jìn)OSPF的路由(OSPF中E2類(lèi)型的路由)的數(shù)量很多,造成網(wǎng)絡(luò)設(shè)備需要占用大量?jī)?nèi)存維護(hù)路由表。第35頁(yè)/共73頁(yè)網(wǎng)絡(luò)設(shè)備的軟件問(wèn)題根據(jù)對(duì)網(wǎng)絡(luò)中網(wǎng)絡(luò)設(shè)備故障的分析發(fā)現(xiàn),有很多故障是由于設(shè)備采用的軟件版本較低,因此建議將Cisco7609和Catalyst4006的軟件升級(jí)。第36頁(yè)/共73頁(yè)網(wǎng)絡(luò)設(shè)備的硬件問(wèn)題目前Cisco7609中配置的內(nèi)存都為默認(rèn)的128M內(nèi)存,根據(jù)目前在現(xiàn)網(wǎng)上運(yùn)行的情況看,不能滿足網(wǎng)絡(luò)目前的需要,并且升級(jí)Cisco7609軟件也需要增加內(nèi)存,建議升級(jí)Cisco7609的內(nèi)存。

Catalyst4006由于OSPF路由協(xié)議的問(wèn)題使得內(nèi)存的利用率過(guò)高,考慮Catalyst4006內(nèi)存不能增加,以及采用的引擎為較早的二代引擎,因此建議升級(jí)引擎。第37頁(yè)/共73頁(yè)第38頁(yè)/共73頁(yè)第39頁(yè)/共73頁(yè)第40頁(yè)/共73頁(yè)拓?fù)浣Y(jié)構(gòu)優(yōu)化建議第41頁(yè)/共73頁(yè)拓?fù)浣Y(jié)構(gòu)優(yōu)化建議(續(xù))第42頁(yè)/共73頁(yè)目前采用OSPF協(xié)議作為全網(wǎng)省內(nèi)路由條目的承載,由省出口設(shè)備同省其他地市節(jié)點(diǎn)之間的部分作為Area0,南昌、九江和其他地市采用當(dāng)?shù)貐^(qū)號(hào)作為相應(yīng)的Area號(hào)碼。采用這類(lèi)方式后,有一個(gè)比較大的問(wèn)題是現(xiàn)網(wǎng)中IGP路由表單的問(wèn)題,因?yàn)楝F(xiàn)網(wǎng)中設(shè)備能力及其不均衡。是否所有的設(shè)備都可以穩(wěn)定的承載數(shù)千條散碎的省內(nèi)路由是一個(gè)問(wèn)題?,F(xiàn)網(wǎng)中較多的將部分接入節(jié)點(diǎn)的路由通過(guò)靜態(tài)指向后注入到OSPF協(xié)議中,因?yàn)橐粋€(gè)地市就只有一個(gè)Area號(hào),這樣這些相應(yīng)的條目都會(huì)在同一地市的IGP表單中出現(xiàn)。同時(shí)以E2方式在其他地市IGP表單中出現(xiàn)。路由協(xié)議現(xiàn)狀及存在問(wèn)題-IGP第43頁(yè)/共73頁(yè)因?yàn)槟壳案鞯厥袃?nèi)部網(wǎng)絡(luò)都只有一個(gè)出口路由器,沒(méi)必要需要全省網(wǎng)的路由條目。我們建議在目前骨干互聯(lián)部分采用ISIS方式建立新的互聯(lián)結(jié)構(gòu)。針對(duì)各地市內(nèi)部網(wǎng)絡(luò)采用OSPF結(jié)構(gòu),并將地市核心設(shè)備放置在Area0,其他邊緣接入采用各自定義的Area號(hào)碼。在各地市接入路由器上通過(guò)OSPF的Area0發(fā)布默認(rèn)路由引導(dǎo)全地市設(shè)備對(duì)地市外地址的訪問(wèn)。同時(shí)在地市接入路由器上將地市路由注入BGP協(xié)議,同時(shí)對(duì)這部分路由做聚合,按照地市分配的地址表單作相應(yīng)聚合,保障發(fā)布的整體條目清晰。由南昌、九江對(duì)整體省網(wǎng)的地址表單做相應(yīng)BGP聚合。第44頁(yè)/共73頁(yè)路由協(xié)議優(yōu)化建議-IGP南昌-骨干匯接163骨干核心節(jié)點(diǎn)C地市B地市A九江-骨干匯接OSFP路由表ISIS路由表-與163骨干ISIS同為L(zhǎng)evel-2-only區(qū)域OSFP路由表OSFP路由表OSFP路由表第45頁(yè)/共73頁(yè)建議由full-mesh結(jié)構(gòu)更換為基于BGP-RR的結(jié)構(gòu),由南昌、九江的兩臺(tái)出口路由器作為整體網(wǎng)絡(luò)的BGPRR點(diǎn),并分別屬于不同的CLUSTER。這類(lèi)結(jié)構(gòu)更換的作用是更好的避免了現(xiàn)網(wǎng)中某地市出現(xiàn)單條電路上聯(lián)故障后的路由更新問(wèn)題。路由協(xié)議優(yōu)化建議-BGP第46頁(yè)/共73頁(yè)BGP-Full-mesh同BGP-RR在本質(zhì)上沒(méi)有區(qū)別,都是為避免IBGP只傳一跳的問(wèn)題。但隨著Full-mesh節(jié)點(diǎn)的增多,各個(gè)路由器上BGP進(jìn)程對(duì)內(nèi)存的占用會(huì)逐步增加,因?yàn)槊總€(gè)PEER都是獨(dú)立的處理進(jìn)程,其對(duì)整體設(shè)備的性能的影響會(huì)比較大,同時(shí)現(xiàn)網(wǎng)中如果有網(wǎng)絡(luò)振蕩,其BGP收斂時(shí)間受影響的PEER方向比較多。第47頁(yè)/共73頁(yè)其RR方式路由轉(zhuǎn)發(fā)原則為:RR點(diǎn)從Client收的路由將轉(zhuǎn)發(fā)給Client和非Client(不包含路由源方向)

RR點(diǎn)從非Client收的路由將轉(zhuǎn)發(fā)給ClientRR點(diǎn)從EBGP-PEER收的路由將轉(zhuǎn)發(fā)給所有的Client和非Client

此次中國(guó)電信163全網(wǎng)整合工程將在南昌與九江建立二級(jí)RR點(diǎn)第48頁(yè)/共73頁(yè)向地市網(wǎng)絡(luò)發(fā)布OSPF默認(rèn)路由引導(dǎo)出流量地市A南昌整合后骨干匯接//省網(wǎng)核心RR南昌整合后骨干匯接//省網(wǎng)核心RRBGP聚合引導(dǎo)省入流量BGP聚合引導(dǎo)省入流量IBGPIBGPIBGPISIS范圍OSPF范圍OSPF注入BGP,并做相應(yīng)策略引導(dǎo)回流量163骨干C核心節(jié)點(diǎn)163骨干C核心節(jié)點(diǎn)第49頁(yè)/共73頁(yè)GSR12008Arae1Arae0Arae5Arae4Arae3Arae2OSR7600CAT4006OSPFISIS九江12016南昌12016IBGP-PEER地市A第50頁(yè)/共73頁(yè)第51頁(yè)/共73頁(yè)江西網(wǎng)絡(luò)設(shè)備現(xiàn)狀分析目前看現(xiàn)有網(wǎng)絡(luò)層面的設(shè)備故障主要集中在思科設(shè)備的運(yùn)行穩(wěn)定性上,從目前山東省網(wǎng)提供材料中可以看到,普遍存在設(shè)備內(nèi)存利用率過(guò)高的情況。不可否認(rèn)目前山東省網(wǎng)的設(shè)備內(nèi)存配置較低,但目前設(shè)備內(nèi)存情況很不樂(lè)觀。因?yàn)閮?nèi)存占用的情況比較多。就思科設(shè)備情況來(lái)看,目前各地市的4006的為各地業(yè)務(wù)接入的核心設(shè)備,但其內(nèi)存和CPU利用率都較高,建議升級(jí)引擎和內(nèi)存。同時(shí)對(duì)現(xiàn)有網(wǎng)絡(luò)業(yè)務(wù)進(jìn)行部分整合,以降低CPU的占用率。如有必要應(yīng)該升級(jí)其路由引擎。由原交換路由模塊4032L3更新為X4515專(zhuān)用路由引擎。從現(xiàn)有網(wǎng)絡(luò)情況看7600設(shè)備有多次的路由丟失和3層模塊脫管現(xiàn)象,從現(xiàn)象上看屬于設(shè)備軟硬件配合問(wèn)題,建議由廠家對(duì)設(shè)備提出IOS要求和相應(yīng)設(shè)備建議。同時(shí)針對(duì)現(xiàn)有設(shè)備的內(nèi)存占用高的現(xiàn)象因增加部分內(nèi)存,已滿足核心地市出口設(shè)備的業(yè)務(wù)能力。第52頁(yè)/共73頁(yè)網(wǎng)絡(luò)設(shè)備優(yōu)化建議思科設(shè)備優(yōu)化建議A設(shè)備軟件優(yōu)化建議目前在Catalyst4006和Cisco7609上采用的CatOS和IOS軟件版本都較低,Catalyst4006的CatOS版本為CatOS5.4,IOS版本為IOS12.0.5,Cisco7609采用的CatOS版本為CatOS6.3,IOS版本為IOS12.1.8E。根據(jù)Cisco售后工程師的建議,建議將Catalyst4006的CatOS升級(jí)到最新的6.3(10)版本,IOS升級(jí)到12.0(18)W5(22b);Cisco7609建議升級(jí)到NativeIOS12.1.(13)E6。Catalyst4006的軟件:CatOS6.3(10)解決了CatOS5.4有關(guān)VLAN、VTP、SPAN等方面的一些BUG;12.0(18)W5(22b)解決了DHCP、OSPF等方面的一些BUG。通過(guò)這些改進(jìn),使設(shè)備運(yùn)行更穩(wěn)定。Cisco7609的軟件:IOS12.1.(13)E6解決了原CatOS+IOS兩套軟件的弊端,并解決了路由協(xié)議等一些BUG。第53頁(yè)/共73頁(yè)B設(shè)備硬件優(yōu)化建議根據(jù)對(duì)網(wǎng)絡(luò)中出現(xiàn)故障分析,網(wǎng)絡(luò)設(shè)備出現(xiàn)故障的原因大多是軟件版本低或內(nèi)存利用率較高造成的。而升級(jí)軟件版本也需要增加內(nèi)存。因此,建議在本次網(wǎng)絡(luò)優(yōu)化中,增加網(wǎng)絡(luò)設(shè)備的內(nèi)存。由于Cisco7609需要升級(jí)到NativeIOS,根據(jù)NativeIOS對(duì)內(nèi)存的需求,建議將Cisco7609的內(nèi)存升級(jí)到512M。同時(shí),目前Cisco7609在南昌兩臺(tái)和贛州一臺(tái)配有OSM-GE的模塊,可以提供MPLS/VPN業(yè)務(wù)。根據(jù)目前網(wǎng)絡(luò)發(fā)展的趨勢(shì),各個(gè)運(yùn)營(yíng)商在網(wǎng)絡(luò)建設(shè)及優(yōu)化時(shí),都將MPLS/VPN業(yè)務(wù)作為重要業(yè)務(wù)實(shí)施,并且中國(guó)電信總部已經(jīng)有計(jì)劃在各個(gè)省市看著MPLS/VPN業(yè)務(wù)。因此建議在沒(méi)有配置OSM-GE的地市,在Cisco7609上增加OSM-GE模塊,以增加網(wǎng)絡(luò)開(kāi)展業(yè)務(wù)的能力。對(duì)于沒(méi)有Cisco7609的地市,建議新增加Cisco10720設(shè)備,以提供MPLS/VPN業(yè)務(wù)。Catalyst4006由于OSPF路由協(xié)議的問(wèn)題使得內(nèi)存的利用率過(guò)高,考慮Catalyst4006內(nèi)存不能增加,以及采用的引擎為較早的二代引擎,因此建議升級(jí)引擎。目前Catalyst4006的四代引擎采用的為CEF的轉(zhuǎn)發(fā)模式,使得整臺(tái)機(jī)器的轉(zhuǎn)發(fā)能力有很大的提高,抗網(wǎng)絡(luò)病毒、攻擊的能力都有所提高。第54頁(yè)/共73頁(yè)FOUNDRY設(shè)備優(yōu)化建議目前看部分設(shè)備故障主要涉及業(yè)務(wù)端口互聯(lián)互通的情況,這部分故障在思科的部分中也有體現(xiàn),從現(xiàn)象和故障提示上看主要集中在不同設(shè)備之間端口互通上、特別是同華為等國(guó)內(nèi)廠商互聯(lián)上的問(wèn)題。因?yàn)樗伎坪虵OUNDRY在端口互聯(lián)能力上其端口識(shí)別能力都比較差,需要人為對(duì)端口的雙工等參數(shù)固化設(shè)置后,才能保障其業(yè)務(wù)接入能力不受影響。其次,部分FOUNDRY設(shè)備在現(xiàn)網(wǎng)中用戶故障情況下,CPU占用過(guò)高并影響業(yè)務(wù)。此類(lèi)故障如果能通過(guò)3層的過(guò)濾和源路由定位來(lái)防范,可以通過(guò)配置解決,如果屬于業(yè)務(wù)設(shè)備2層能力所至,需廠商解決。

第55頁(yè)/共73頁(yè)現(xiàn)網(wǎng)中開(kāi)展MPLS/VPN業(yè)務(wù)分析現(xiàn)網(wǎng)中對(duì)VPN的開(kāi)展主要是圍繞BGP/MPLS,這樣業(yè)務(wù)開(kāi)展需要現(xiàn)網(wǎng)中的設(shè)備對(duì)基于BGP的MPLS支持。目前在現(xiàn)網(wǎng)中,山東省電信的寬帶設(shè)備主要能支持此業(yè)務(wù)的設(shè)備為思科的12000系列和7600系列。其思科4000系列設(shè)備和部分地市的FOUNDRY設(shè)備目前不支持MPLS業(yè)務(wù)。如果基于現(xiàn)網(wǎng)中設(shè)備開(kāi)通相應(yīng)的VPN業(yè)務(wù)接入,對(duì)于現(xiàn)網(wǎng)中設(shè)備就存在部分設(shè)備銜接上的問(wèn)題。我方建議避開(kāi)現(xiàn)有設(shè)備的問(wèn)題,采用就VPN業(yè)務(wù)在部分地市新增思科10720作為PE設(shè)備的方式來(lái)快速開(kāi)展VPN接入。思科10720設(shè)備是思科就城域網(wǎng)新業(yè)務(wù)開(kāi)展的主推產(chǎn)品,其支持全I(xiàn)P路由協(xié)議,和MPLS多種業(yè)務(wù)模式(二/三層)。采用GE互聯(lián)實(shí)現(xiàn)思科10720同其他核心設(shè)備的互聯(lián),并采用VLAN透?jìng)鞣绞綄PN業(yè)務(wù)覆蓋到現(xiàn)網(wǎng)的寬帶企業(yè)接入VPN業(yè)務(wù)中。對(duì)應(yīng)部分業(yè)務(wù)采用傳統(tǒng)專(zhuān)線接入,建議采用思科的7200系列設(shè)備實(shí)現(xiàn)VPN的PE業(yè)務(wù)覆蓋,對(duì)于核心設(shè)備為FOUNDRY的地市,因?yàn)楹诵脑O(shè)備不支持MPLS轉(zhuǎn)發(fā),建議在這部分地市采用GRE方式實(shí)現(xiàn)VPN業(yè)務(wù)路由器之間的VPN互聯(lián)。第56頁(yè)/共73頁(yè)對(duì)應(yīng)現(xiàn)網(wǎng)中已經(jīng)由思科設(shè)備覆蓋的地市,將采用7600設(shè)備作為PE設(shè)備直接采用VLAN透?jìng)鞲采w業(yè)務(wù)。其VPN業(yè)務(wù)將采用BGP/MPLS方式,將不同現(xiàn)網(wǎng)中業(yè)務(wù)接入設(shè)備的BGP互通,將采用在南昌和九江采用新增的10720或7200設(shè)備作為MBGP的RR點(diǎn),同各地市的VPN業(yè)務(wù)路由器之間直接建立IBGP的SESSION。并傳遞相應(yīng)的MPLS路由,這樣整體上VPN路由將同現(xiàn)網(wǎng)的路由沒(méi)有任何關(guān)系,現(xiàn)網(wǎng)的BGP/IGP路由完全為VPN業(yè)務(wù)路由器之間尋路服務(wù)。VPN業(yè)務(wù)路由同整體省網(wǎng)內(nèi)部沒(méi)有直接關(guān)系,保障最大程度的業(yè)務(wù)互不干擾?,F(xiàn)網(wǎng)中開(kāi)展MPLS/VPN業(yè)務(wù)分析(續(xù))第57頁(yè)/共73頁(yè)網(wǎng)絡(luò)中VPN的部署-增加PE設(shè)備的情況思科10720思科7200思科7600思科12000支持MPLS轉(zhuǎn)發(fā)的節(jié)點(diǎn)PEPEPP思科7200思科7600思科12000支持MPLS轉(zhuǎn)發(fā)的節(jié)點(diǎn)PEPPE思科10720思科7200FOUNDRY8000思科12000不支持MPLS轉(zhuǎn)發(fā)的節(jié)點(diǎn)PEPEP思科10720思科7200PEPE兼RR點(diǎn)P思科7600GRE思科12000南昌節(jié)點(diǎn)第58頁(yè)/共73頁(yè)不增加新設(shè)備情況下的VPN部署建議MPLS/VPN業(yè)務(wù)的開(kāi)通需要有核心路由器(P路由器)和業(yè)務(wù)接入路由器(PE路由器),用戶方(CE路由器)只需要普通設(shè)備即可。但目前現(xiàn)網(wǎng)中網(wǎng)絡(luò)設(shè)備只有中興T64E、華為NE80、思科7600、12000系列、7200系列等支持MPLS業(yè)務(wù)。但因?yàn)檫@些設(shè)備目前各地市節(jié)點(diǎn)部署不同,其對(duì)節(jié)點(diǎn)要求也不同。第59頁(yè)/共73頁(yè)不增加新設(shè)備情況下的VPN部署建議(續(xù))GSR12008作為地市節(jié)點(diǎn)出口路由器,可以在GSR12008上開(kāi)通MPLS/VPN業(yè)務(wù),GSR12008即做P路由器又做PE路由器,通過(guò)802.1Q連接核心交換機(jī),通過(guò)VLANTRUNK方式連接下屬VPN用戶。現(xiàn)網(wǎng)中以O(shè)SR7600和B8000組網(wǎng)的核心交換設(shè)備目前都不支持VPN業(yè)務(wù),無(wú)法當(dāng)作為MPLS/VPN的PE或P路由器。其中OSR7600需要增加OSM板卡,即可在OSM板卡上開(kāi)通MPLS/VPN業(yè)務(wù);但B8000目前不支持MPLS/VPN。這樣在現(xiàn)網(wǎng)條件下開(kāi)通整體業(yè)務(wù)需要在思科節(jié)點(diǎn)增補(bǔ)部分核心板卡,對(duì)于FOUNDRY節(jié)點(diǎn),需要新增或調(diào)整部分設(shè)備的使用,建議增加思科10720作為MPLS/VPN業(yè)務(wù)設(shè)備,其連接原則應(yīng)并列于現(xiàn)網(wǎng)B8000設(shè)備,作為VPN設(shè)備使用,不承載普通業(yè)務(wù)數(shù)據(jù)。如果不新增設(shè)備或板卡,那目前只能在各地市節(jié)點(diǎn)出口的GSR12008上面實(shí)現(xiàn)相應(yīng)的VPN功能,即出口路由器同時(shí)承擔(dān)P/PE的功能。但從長(zhǎng)遠(yuǎn)上看,出于網(wǎng)絡(luò)穩(wěn)定和擴(kuò)展性考慮,應(yīng)該實(shí)現(xiàn)P路由器同PE路由器分離,即對(duì)現(xiàn)網(wǎng)中核心思科交換機(jī)增加OSM板卡和對(duì)FOUNDRY節(jié)點(diǎn)增加部分獨(dú)立PE設(shè)備。對(duì)于VPN專(zhuān)線業(yè)務(wù)用戶,需要采用現(xiàn)網(wǎng)中的思科7200系列實(shí)現(xiàn)業(yè)務(wù)接入,并通過(guò)GSR12008上聯(lián)骨干。

第60頁(yè)/共73頁(yè)網(wǎng)絡(luò)安全優(yōu)化建議第61頁(yè)/共73頁(yè)在地市節(jié)點(diǎn)的匯聚層交換機(jī)部署一臺(tái)基于網(wǎng)絡(luò)的入侵檢測(cè)系統(tǒng),并在安全管理中心安裝一個(gè)集中控制臺(tái),統(tǒng)一管理所有的入侵檢測(cè)系統(tǒng),包括配置、策略更新、檢測(cè)庫(kù)的升級(jí)、報(bào)告審核等。IDS網(wǎng)絡(luò)感應(yīng)器能實(shí)時(shí)監(jiān)控來(lái)自網(wǎng)絡(luò)外部或網(wǎng)絡(luò)內(nèi)部的入侵行為,并采取記錄、阻斷、報(bào)警等防護(hù)措施。IDS控制臺(tái)可以用于數(shù)據(jù)采集、匯總、Sensor控制等。通過(guò)將IDS網(wǎng)絡(luò)感應(yīng)器連接到主交換機(jī)上,并且啟用交換機(jī)的monitor功能將通過(guò)交換機(jī)的流量進(jìn)行流量鏡像,所有經(jīng)過(guò)被保護(hù)區(qū)域的數(shù)據(jù)流都被監(jiān)測(cè)到。利用IDS網(wǎng)絡(luò)感應(yīng)器接入交換機(jī)對(duì)通過(guò)交換機(jī)的流量進(jìn)行實(shí)時(shí)監(jiān)測(cè)。并且設(shè)置IDS網(wǎng)絡(luò)感應(yīng)器的IP地址,保證網(wǎng)絡(luò)感應(yīng)器與控制臺(tái)間的數(shù)據(jù)通訊。通過(guò)日志審核、敏感文件和參數(shù)審核等方式,監(jiān)控來(lái)自網(wǎng)絡(luò)內(nèi)部或外部的對(duì)網(wǎng)絡(luò)的入侵行為,并采取記錄、阻斷、報(bào)警等防護(hù)措施。第62頁(yè)/共73頁(yè)總之,IDS的主要設(shè)計(jì)思想是安全風(fēng)險(xiǎn)的“可視”和“可控”,它可以提供豐富全面的實(shí)時(shí)狀態(tài)信息,使用好IDS的關(guān)鍵是要從這些信息中提取最具有價(jià)值的內(nèi)容并加以利用,以為企業(yè)網(wǎng)絡(luò)安全管理的決策提供依據(jù)。由于IDS作用主要體現(xiàn)在檢測(cè)網(wǎng)絡(luò)攻擊,進(jìn)行黑客跟蹤,所以,會(huì)產(chǎn)生大量的日值文件。同時(shí)由于目前百兆IDS不能適應(yīng)高帶寬環(huán)境,所以我們不建議在網(wǎng)絡(luò)入口處部署IDS系統(tǒng),而把IDS系統(tǒng)部署在優(yōu)先保護(hù)的網(wǎng)段(例如:計(jì)費(fèi)、信息發(fā)布、網(wǎng)管等),做“移動(dòng)”式部署,根據(jù)網(wǎng)絡(luò)情況靈活調(diào)整IDS策略和部署的位置,以增網(wǎng)絡(luò)內(nèi)部進(jìn)行攻擊檢測(cè)和診斷的能力。在未來(lái)千兆IDS成熟方案出現(xiàn)后,再作部署網(wǎng)絡(luò)入口IDS的考慮。第63頁(yè)/共73頁(yè)江西電信網(wǎng)管系統(tǒng)部署建議考慮到現(xiàn)網(wǎng)中設(shè)備情況復(fù)雜,其網(wǎng)絡(luò)管理涉及不同廠家型號(hào)和網(wǎng)管支持能力都不盡相同。建議首先在全網(wǎng)采用線路流量監(jiān)控系統(tǒng),后逐步實(shí)施整體業(yè)務(wù)管理系統(tǒng)。線路流量監(jiān)控系統(tǒng),建議主要涉及目前山東省網(wǎng)的兩個(gè)主要部分,省骨干網(wǎng)絡(luò)互聯(lián)電路,包含目前整體網(wǎng)絡(luò)中各地市同南昌、九江之間的中繼電路;其次各地市中主要互聯(lián)電路,包含地市主要設(shè)備之間的電路。第64頁(yè)/共73頁(yè)流量監(jiān)控可以分為兩個(gè)部分:1、端口實(shí)時(shí)監(jiān)控對(duì)中繼電路實(shí)時(shí)通訊流量的采集監(jiān)控,主要掌握現(xiàn)網(wǎng)流量的分布和不同時(shí)段業(yè)務(wù)壓力的情況??梢员憷目吹饺I(yè)務(wù)流量分布和突發(fā)流量,便于判斷故障節(jié)點(diǎn)。2、端口流量分析對(duì)現(xiàn)網(wǎng)流量采集后分析,了解各節(jié)點(diǎn)業(yè)務(wù)分布。上述兩種流量監(jiān)控其實(shí)施完全不同,前者可以采用現(xiàn)在比較便利的MRTG方式實(shí)現(xiàn),對(duì)設(shè)備要求和性能影響不大。后者要求設(shè)備支持流量采集和性能支持,對(duì)現(xiàn)網(wǎng)中設(shè)備要求較高。我們建議首先建立整體的流量監(jiān)控系統(tǒng),對(duì)于實(shí)時(shí)業(yè)務(wù)流

溫馨提示

  • 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。

最新文檔

評(píng)論

0/150

提交評(píng)論