版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報或認(rèn)領(lǐng)
文檔簡介
《5G通信大數(shù)據(jù)分析與應(yīng)用》全套可編輯PPT課件
第1章
移動通信與大數(shù)據(jù)第2章
大數(shù)據(jù)關(guān)鍵組件第3章
語言基礎(chǔ)第4章5G移動通信第5章
無線網(wǎng)絡(luò)優(yōu)化(5.2弱覆蓋大數(shù)據(jù)分析)第5章
無線網(wǎng)絡(luò)優(yōu)化(5.3切換問題大數(shù)據(jù)理論基礎(chǔ))第6章
位置信息大數(shù)據(jù)分析第7章
互聯(lián)網(wǎng)業(yè)務(wù)質(zhì)量大數(shù)據(jù)分析第1章移動通信與大數(shù)據(jù)《5G通信大數(shù)據(jù)分析與應(yīng)用》全套可編輯PPT課件
CATALOGUE目錄大數(shù)據(jù)在各行業(yè)的應(yīng)用大數(shù)據(jù)在移動通信領(lǐng)域的作用大數(shù)據(jù)技術(shù)的完善與健全大數(shù)據(jù)發(fā)展趨勢01引言受歡迎的大數(shù)據(jù)科研領(lǐng)域大數(shù)據(jù)在科研領(lǐng)域的應(yīng)用主要包括生物信息學(xué)、基因測序、臨床醫(yī)療等。通過大數(shù)據(jù)的分析和挖掘,科研工作者可以了解數(shù)據(jù)背后的規(guī)律和趨勢,提高研究效率和質(zhì)量。金融行業(yè)大數(shù)據(jù)在金融行業(yè)的廣泛應(yīng)用包括風(fēng)險管理、投資分析、客戶關(guān)系管理等。通過大數(shù)據(jù)的分析和挖掘,金融機構(gòu)可以更好地了解客戶需求,提高客戶滿意度和忠誠度。制藥行業(yè)大數(shù)據(jù)在制藥行業(yè)的應(yīng)用主要包括藥物研發(fā)、生產(chǎn)制造、銷售和醫(yī)療服務(wù)等。通過大數(shù)據(jù)的分析和挖掘,企業(yè)可以了解市場需求,提高生產(chǎn)效率,降低銷售成本,同時提高醫(yī)療服務(wù)的質(zhì)量。030201日本的新IT戰(zhàn)略聚焦大數(shù)據(jù)日本的新IT戰(zhàn)略將焦點放在大數(shù)據(jù)上,希望通過發(fā)展大數(shù)據(jù)來提升國家的競爭力并解決社會問題。市場規(guī)模預(yù)測投資和政策支持根據(jù)矢野經(jīng)濟研究所的預(yù)測,到2020年日本的大數(shù)據(jù)市場規(guī)模將超過1兆日元,這標(biāo)志著大數(shù)據(jù)將在日本引起前所未有的重視。為了實現(xiàn)大數(shù)據(jù)的發(fā)展和應(yīng)用,日本政府將增加投資并制定相應(yīng)的政策,以支持大數(shù)據(jù)產(chǎn)業(yè)的發(fā)展。印度政府高度重視大數(shù)據(jù)發(fā)展,將其納入國家戰(zhàn)略計劃,并提供各種政策和資金支持。重視大數(shù)據(jù)發(fā)展印度的大數(shù)據(jù)發(fā)展NHBigdata是印度國家數(shù)據(jù)科學(xué)平臺的大數(shù)據(jù)平臺,該平臺支持多種數(shù)據(jù)存儲、離線計算、實時分析挖掘等功能,提供豐富的計算框架和SQL訪問能力。建設(shè)大數(shù)據(jù)平臺通過NHBigdata平臺的建設(shè),印度政府推動了大數(shù)據(jù)產(chǎn)業(yè)的發(fā)展和創(chuàng)新,提高了國家的整體競爭力。推動產(chǎn)業(yè)發(fā)展02大數(shù)據(jù)在各行業(yè)的應(yīng)用大數(shù)據(jù)可分析藥物作用機制、疾病診斷等,提高科研效率和質(zhì)量。科研大數(shù)據(jù)可監(jiān)測生產(chǎn)環(huán)境、設(shè)備狀態(tài)等,提高生產(chǎn)效率和質(zhì)量。生產(chǎn)大數(shù)據(jù)可分析消費者行為、市場需求等,提高銷售效率和質(zhì)量。銷售制藥行業(yè)的大數(shù)據(jù)應(yīng)用010203智慧城市戰(zhàn)略日本政府還提出了智慧城市戰(zhàn)略,旨在通過大數(shù)據(jù)等技術(shù)的發(fā)展,推動城市智能化建設(shè)和管理。新IT戰(zhàn)略日本政府在2016年提出了新IT戰(zhàn)略,旨在通過推動大數(shù)據(jù)、人工智能等技術(shù)的發(fā)展,提高日本的科技水平和競爭力。數(shù)據(jù)科學(xué)戰(zhàn)略日本政府還提出了數(shù)據(jù)科學(xué)戰(zhàn)略,旨在通過培養(yǎng)數(shù)據(jù)科學(xué)家等人才,推動大數(shù)據(jù)技術(shù)的研發(fā)和應(yīng)用。日本的大數(shù)據(jù)戰(zhàn)略政府推動印度企業(yè)也開始積極參與大數(shù)據(jù)領(lǐng)域的研究和應(yīng)用,如塔塔集團、Infosys等大型企業(yè)和機構(gòu)都在積極探索大數(shù)據(jù)技術(shù)的應(yīng)用。企業(yè)參與人才培養(yǎng)印度政府還重視人才培養(yǎng),推動高校和機構(gòu)開展大數(shù)據(jù)課程和培訓(xùn),培養(yǎng)了大量的數(shù)據(jù)科學(xué)家和工程師等人才。印度政府積極推動大數(shù)據(jù)產(chǎn)業(yè)的發(fā)展,出臺了一系列政策和措施,支持大數(shù)據(jù)技術(shù)研發(fā)和應(yīng)用。印度的大數(shù)據(jù)發(fā)展03大數(shù)據(jù)在移動通信領(lǐng)域的作用精準(zhǔn)計費分析與服務(wù)效率的提升通過大數(shù)據(jù)技術(shù)分析用戶數(shù)據(jù),可以準(zhǔn)確地計算每個用戶的費用,避免計費誤差和爭議。提高計費準(zhǔn)確性通過大數(shù)據(jù)分析,可以發(fā)現(xiàn)新的計費模式,如按使用量計費、按速度計費等,以滿足不同用戶的需求。發(fā)現(xiàn)新的計費模式通過大數(shù)據(jù)技術(shù)分析用戶數(shù)據(jù),可以了解每個用戶的需求和行為習(xí)慣,以便更好地服務(wù)他們。提高服務(wù)效率通過大數(shù)據(jù)清洗和整合,可以提高用戶數(shù)據(jù)的質(zhì)量,確保數(shù)據(jù)的準(zhǔn)確性和完整性。提高用戶數(shù)據(jù)質(zhì)量通過大數(shù)據(jù)分析和挖掘,可以更好地了解用戶的需求和習(xí)慣,從而提升用戶滿意度。提升用戶滿意度通過大數(shù)據(jù)分析,可以發(fā)現(xiàn)企業(yè)運營中的問題和發(fā)展趨勢,以便更好地調(diào)整企業(yè)運營策略。改進(jìn)企業(yè)運營用戶數(shù)據(jù)管理的優(yōu)化與企業(yè)運營的改進(jìn)提高生活便捷性通過大數(shù)據(jù)分析和挖掘,可以發(fā)現(xiàn)生活中的規(guī)律和趨勢,以便更好地安排生活和工作。提升工作便捷性通過大數(shù)據(jù)分析和挖掘,可以自動化地處理和分析工作中的數(shù)據(jù),提高工作效率和質(zhì)量。提高用戶滿意度、生活與工作的便捷性04大數(shù)據(jù)技術(shù)的完善與健全數(shù)據(jù)存儲NHBigdata大數(shù)據(jù)平臺支持多種數(shù)據(jù)存儲方式,包括Hadoop、Spark、HBase等,滿足不同場景的需求。離線計算NHBigdata大數(shù)據(jù)平臺提供豐富的離線計算框架,包括Spark、Hadoop等,支持多種計算引擎,如Spark、Hadoop等。實時分析挖掘NHBigdata大數(shù)據(jù)平臺提供實時分析挖掘的能力,支持多種數(shù)據(jù)分析算法,如線性回歸、邏輯回歸、K-means等。數(shù)據(jù)存儲、離線計算、實時分析挖掘的完善010203多計算框架NHBigdata大數(shù)據(jù)平臺支持多種計算框架,如Spark、Hadoop等,滿足不同場景的需求。SQL訪問能力數(shù)據(jù)分析算法多計算框架與SQL訪問能力的提升NHBigdata大數(shù)據(jù)平臺提供強大的SQL訪問能力,支持多種數(shù)據(jù)接口,如Spark、Hadoop等。NHBigdata大數(shù)據(jù)平臺提供多種數(shù)據(jù)分析算法,如線性回歸、邏輯回歸、K-means等,支持多種數(shù)據(jù)接口,如Spark、Hadoop等。提高用戶滿意度通過大數(shù)據(jù)技術(shù)的完善與健全,可以實現(xiàn)精準(zhǔn)的用戶管理和服務(wù),提高用戶滿意度。提升工作效率大數(shù)據(jù)技術(shù)可以幫助企業(yè)更高效地處理和分析數(shù)據(jù),提高工作效率。增強企業(yè)競爭力大數(shù)據(jù)技術(shù)可以幫助企業(yè)更好地了解市場和競爭對手,制定更有針對性的戰(zhàn)略和方案,增強企業(yè)的競爭力。對移動通信網(wǎng)絡(luò)的深遠(yuǎn)影響05大數(shù)據(jù)發(fā)展趨勢01國際標(biāo)準(zhǔn)化組織(ISO)持續(xù)推動大數(shù)據(jù)標(biāo)準(zhǔn)制定ISO/IECJTC1/SC42大數(shù)據(jù)標(biāo)準(zhǔn)組織,負(fù)責(zé)制定大數(shù)據(jù)相關(guān)標(biāo)準(zhǔn),推動大數(shù)據(jù)產(chǎn)業(yè)發(fā)展。國際數(shù)據(jù)標(biāo)準(zhǔn)聯(lián)盟(IA)關(guān)注大數(shù)據(jù)治理IA關(guān)注大數(shù)據(jù)治理,提供大數(shù)據(jù)解決方案,促進(jìn)大數(shù)據(jù)產(chǎn)業(yè)發(fā)展。全球移動通信系統(tǒng)協(xié)會(GSMA)重視大數(shù)據(jù)GSMA重視大數(shù)據(jù),推動大數(shù)據(jù)在移動通信行業(yè)的應(yīng)用和發(fā)展。行業(yè)標(biāo)準(zhǔn)化的推動0203國家對信息技術(shù)標(biāo)準(zhǔn)化的重視中國政府實施信息技術(shù)標(biāo)準(zhǔn)化戰(zhàn)略中國政府實施信息技術(shù)標(biāo)準(zhǔn)化戰(zhàn)略,推動大數(shù)據(jù)產(chǎn)業(yè)發(fā)展,提升國家競爭力。日本政府制定大數(shù)據(jù)戰(zhàn)略日本政府制定大數(shù)據(jù)戰(zhàn)略,推動大數(shù)據(jù)產(chǎn)業(yè)發(fā)展,提升國家競爭力。印度政府重視大數(shù)據(jù)發(fā)展印度政府重視大數(shù)據(jù)發(fā)展,推動大數(shù)據(jù)產(chǎn)業(yè)發(fā)展,提升國家競爭力。促進(jìn)數(shù)據(jù)共享和集成通過標(biāo)準(zhǔn)化,可以促進(jìn)不同系統(tǒng)、不同設(shè)備之間的數(shù)據(jù)共享和集成,提高數(shù)據(jù)的質(zhì)量和效率。推動產(chǎn)業(yè)創(chuàng)新和升級標(biāo)準(zhǔn)化可以推動產(chǎn)業(yè)創(chuàng)新和升級,提高生產(chǎn)效率和質(zhì)量,降低成本,提高企業(yè)競爭力。提升國家競爭力通過標(biāo)準(zhǔn)化,可以提升國家在信息技術(shù)領(lǐng)域的競爭力,促進(jìn)經(jīng)濟發(fā)展和產(chǎn)業(yè)升級。標(biāo)準(zhǔn)化對未來大數(shù)據(jù)發(fā)展的意義通信大數(shù)據(jù)分析與應(yīng)用實訓(xùn)教學(xué)平臺簡介-經(jīng)典的4大實訓(xùn)場景完美契合課程內(nèi)容關(guān)鍵步驟按需回傳輕松掌握實訓(xùn)效果可視化的數(shù)據(jù)和算法界面降低跨專業(yè)應(yīng)用門檻專有的通信大數(shù)據(jù)源一鍵修復(fù)升級和更新01020304高并發(fā)和高可用性不同權(quán)限賬號的數(shù)據(jù)隔離05使用鏈接:/lab-txdaj/THANKS感謝觀看第2章
大數(shù)據(jù)關(guān)鍵組件《5G通信大數(shù)據(jù)分析與應(yīng)用》CATALOGUE目錄大數(shù)據(jù)的社會變革潛力Hadoop組件Hive組件Spark組件通信與大數(shù)據(jù)的融合01大數(shù)據(jù)的社會變革潛力數(shù)據(jù)驅(qū)動決策大數(shù)據(jù)利用將成為提高核心競爭力的關(guān)鍵因素,各行各業(yè)的決策正在從“業(yè)務(wù)驅(qū)動”轉(zhuǎn)變“數(shù)據(jù)驅(qū)動”。大數(shù)據(jù)驅(qū)動信息技術(shù)大數(shù)據(jù)的處理分析已成為新一代信息技術(shù)融合應(yīng)用的結(jié)點,標(biāo)志著信息技術(shù)的發(fā)展進(jìn)入了一個新的階段。大數(shù)據(jù)驅(qū)動產(chǎn)業(yè)增長大數(shù)據(jù)是信息產(chǎn)業(yè)持續(xù)高速增長的新引擎,為各行各業(yè)提供了無限商機和價值。大數(shù)據(jù)的社會變革潛力大數(shù)據(jù)的社會變革潛力改變科學(xué)研究方法大數(shù)據(jù)時代科學(xué)研究的方法手段將發(fā)生重大改變,大數(shù)據(jù)將成為推動科技進(jìn)步的重要力量。大數(shù)據(jù)框架和組件大數(shù)據(jù)技術(shù)組件概述掌握大數(shù)據(jù)的框架和主要組件,包括Hadoop、Hive、Spark、Kafka和Zookeeper等,是應(yīng)對大數(shù)據(jù)挑戰(zhàn)的關(guān)鍵。Hadoop是一個能夠?qū)A繑?shù)據(jù)進(jìn)行分布式存儲和處理的軟件框架,包括YARN、HDFS、MapReduce組件服務(wù)。Hive數(shù)據(jù)倉庫工具Hive是基于Hadoop的一個數(shù)據(jù)倉庫工具,可以將結(jié)構(gòu)化的數(shù)據(jù)文件映射為一張數(shù)據(jù)庫表,并提供簡單的SQL查詢功能。大數(shù)據(jù)的社會變革潛力Spark分布式計算平臺Spark是一個分布式計算平臺,負(fù)責(zé)計算任務(wù)的分布式計算,包含SparkCore、SparkML、SparkStreaming等模塊。Kafka分布式消息系統(tǒng)Kafka是一種高吞吐量的分布式發(fā)布訂閱消息系統(tǒng),支持分區(qū)的多副本的分布式消息系統(tǒng)。Zookeeper協(xié)調(diào)服務(wù)Zookeeper是一個應(yīng)用于分布式應(yīng)用的高性能的協(xié)調(diào)服務(wù),能為分布式應(yīng)用提供一致性服務(wù)的軟件。HBase開源數(shù)據(jù)庫HBase是一個分布式的、面向列的開源數(shù)據(jù)庫,適合于非結(jié)構(gòu)化數(shù)據(jù)存儲,支持隨機讀寫。大數(shù)據(jù)的社會變革潛力02Hadoop組件Hadoop是一個由Apache基金會所開發(fā)的分布式系統(tǒng)基礎(chǔ)架構(gòu),主要用于解決海量數(shù)據(jù)的存儲和分析計算問題。Hadoop介紹廣義上來說,Hadoop通常是指一個更廣泛的概念——Hadoop生態(tài)圈,它涵蓋了與Hadoop相關(guān)的各種工具和服務(wù)。Hadoop生態(tài)圈Hadoop是什么Hadoop優(yōu)勢Hadoop底層維護(hù)多個數(shù)據(jù)副本,即使某個計算元素或存儲出現(xiàn)故障,也不會導(dǎo)致數(shù)據(jù)丟失。高可靠性Hadoop可以在集群間分配任務(wù)數(shù)據(jù),方便地擴展數(shù)以千計的節(jié)點,以滿足不斷增長的數(shù)據(jù)處理需求。Hadoop能夠自動將失敗的任務(wù)重新分配,確保任務(wù)的可靠執(zhí)行,從而避免因個別節(jié)點故障導(dǎo)致的整體任務(wù)失敗。高擴展性借助MapReduce思想,Hadoop可以并行處理任務(wù),從而加快任務(wù)處理速度,提高整體效率。高效性01020403高容錯性在Hadoop1.x時代,MapReduce同時處理業(yè)務(wù)邏輯運算和資源的調(diào)度,耦合性較大。MapReduce職責(zé)在Hadoop2.x時代,增加了Yarn。Yarn只負(fù)責(zé)資源的調(diào)度,MapReduce只負(fù)責(zé)運算。Yarn的作用Hadoop3.x在組成上沒有變化,仍然保留了Yarn和MapReduce的架構(gòu)。Hadoop3.x的組成Hadoop組成HDFS架構(gòu)概述HDFS的組成01HadoopDistributedFileSystem(HDFS)是一個分布式文件系統(tǒng),由NameNode、DataNode和SecondaryNameNode等組件組成。NameNode的職責(zé)02NameNode負(fù)責(zé)存儲文件的元數(shù)據(jù),如文件名、文件目錄結(jié)構(gòu)、文件屬性等,以及每個文件的塊列表和塊所在的數(shù)據(jù)節(jié)點信息。DataNode的職責(zé)03DataNode在本地文件系統(tǒng)存儲文件塊數(shù)據(jù),并負(fù)責(zé)塊數(shù)據(jù)的校驗,以確保數(shù)據(jù)的一致性和完整性。SecondaryNameNode的職責(zé)04SecondaryNameNode每隔一段時間對NameNode的元數(shù)據(jù)進(jìn)行備份,以防止元數(shù)據(jù)丟失或損壞。YARN概述YARN是Hadoop的資源管理器,負(fù)責(zé)整個集群的資源協(xié)調(diào)和分配。ResourceManagerResourceManager是整個集群資源的管理者,負(fù)責(zé)內(nèi)存、CPU等資源的分配和管理。NodeManagerNodeManager是單個節(jié)點服務(wù)器資源的管理者,監(jiān)控和管理節(jié)點上的資源使用情況。ApplicationMasterApplicationMaster是單個任務(wù)運行的管理者,負(fù)責(zé)在容器中協(xié)調(diào)和管理應(yīng)用程序的執(zhí)行。ContainerContainer相當(dāng)于一臺獨立的服務(wù)器,封裝了任務(wù)運行所需要的資源,如內(nèi)存、CPU、磁盤、網(wǎng)絡(luò)等。YARN架構(gòu)概述0102030405Map階段輸入數(shù)據(jù)被拆分成多個小塊,每個小塊由一個Mapper處理,Mapper負(fù)責(zé)將輸入數(shù)據(jù)中的每個元素映射為鍵值對。鍵值對生成對于每個輸入元素,Mapper生成一個或多個鍵值對,這些鍵值對包括一個鍵和與之相關(guān)聯(lián)的值。中間結(jié)果Mapper生成的鍵值對構(gòu)成中間結(jié)果,根據(jù)鍵進(jìn)行分組,相同鍵的值被聚合在一起。并行執(zhí)行不同的Mapper可以并行執(zhí)行,處理輸入數(shù)據(jù)的不同部分,允許MapReduce有效地處理大規(guī)模數(shù)據(jù),提高計算性能。Reduce階段對Map結(jié)果進(jìn)行匯總,按鍵分組,歸約操作是由開發(fā)人員定義的,用于處理、聚合和計算中間結(jié)果,生成最終結(jié)果。MapReduce架構(gòu)概述0102030405三者關(guān)系圖HDFS提供存儲圖1-4展示了HDFS、YARN和MapReduce三者之間的關(guān)系,有助于理解Hadoop生態(tài)系統(tǒng)中各個組件的互動。HDFS作為Hadoop分布式文件系統(tǒng),提供可靠的存儲服務(wù),適用于處理海量數(shù)據(jù)。HDFS、YARNYARN管理資源YARN作為Hadoop資源管理系統(tǒng),負(fù)責(zé)管理集群資源,確保任務(wù)高效執(zhí)行。MapReduce編程模型MapReduce作為Hadoop編程模型,適用于處理大規(guī)模數(shù)據(jù)集,能高效地進(jìn)行數(shù)據(jù)處理和計算。03Hive組件Hive開源工具數(shù)據(jù)存儲在HDFS底層實現(xiàn)是MapReduce執(zhí)行程序運行在Yarn上轉(zhuǎn)化MapReduce程序構(gòu)建數(shù)據(jù)倉庫Hive是由Facebook開源的一個數(shù)據(jù)倉庫工具,用于解決海量結(jié)構(gòu)化日志的數(shù)據(jù)統(tǒng)計問題。Hive基于Hadoop構(gòu)建,可以將結(jié)構(gòu)化的數(shù)據(jù)文件映射為一張表,并提供類SQL查詢功能。Hive本質(zhì)上是將HQL轉(zhuǎn)化成MapReduce程序,從而實現(xiàn)對海量數(shù)據(jù)的處理和分析。Hive處理的數(shù)據(jù)存儲在HDFS上,這意味著數(shù)據(jù)可以輕松地與Hadoop的其他組件進(jìn)行交互。Hive分析數(shù)據(jù)底層的實現(xiàn)是MapReduce,這意味著Hive可以充分利用MapReduce的優(yōu)勢。執(zhí)行Hive程序的驅(qū)動程序運行在Yarn上,Yarn負(fù)責(zé)管理集群中的資源,為程序的運行提供穩(wěn)定的平臺。什么是Hive優(yōu)點簡單易用Hive的操作接口采用類SQL語法,提供快速開發(fā)的能力,簡單、容易上手,避免了去寫MapReduce,減少開發(fā)人員的學(xué)習(xí)成本。缺點HQL表達(dá)能力有限Hive的HQL表達(dá)能力有限,迭代式算法無法表達(dá),數(shù)據(jù)挖掘方面不擅長,這是Hive目前存在的一些問題。Hive的優(yōu)缺點Client用戶接口Metastore元數(shù)據(jù)DriverHadoop。驅(qū)動器Hive架構(gòu)原理01020304Spark組件Spark整體架構(gòu)Spark核心組件MLlib是用于構(gòu)建機器學(xué)習(xí)應(yīng)用的模塊,提供了常用的機器學(xué)習(xí)算法和工具。MLlibSparkStreaming是用于處理實時數(shù)據(jù)的模塊,支持批處理和流處理。SparkStreamingSparkSQL是用于處理結(jié)構(gòu)化數(shù)據(jù)的模塊,提供了SQL查詢和分析數(shù)據(jù)的能力。SparkSQLSpark整體架構(gòu)是一種大規(guī)模數(shù)據(jù)處理引擎,具有高性能、可擴展、容錯性強等特點。Spark整體架構(gòu)由多個核心組件組成,包括SparkSQL、SparkStreaming、MLlib等。Spark整體架構(gòu)Spark的特性計算速度快Spark將每個任務(wù)構(gòu)建成DAG進(jìn)行計算,通過彈性式分布式數(shù)據(jù)集RDD在內(nèi)存中進(jìn)行計算,效率提升100倍。易于使用Spark提供了大量的算子,開發(fā)只需調(diào)用相關(guān)API,無需關(guān)注底層實現(xiàn)原理,降低了學(xué)習(xí)使用門檻。支持多種資源管理模式Spark支持local、standalone、yarn等多種資源管理模式,方便用戶選擇合適的模式進(jìn)行適配。社區(qū)支持Spark生態(tài)圈豐富,迭代更新快,成為大數(shù)據(jù)領(lǐng)域必備的計算引擎,受到了廣泛的社區(qū)支持。Spark基本工作原理分布式數(shù)據(jù)集RDD是一種元素集合,包含了數(shù)據(jù)。它是被分區(qū)的,分為多個分區(qū),每個分區(qū)分布在集群中的不同節(jié)點上,從而讓RDD中的數(shù)據(jù)可以被并行操作。RowKey設(shè)計重要HBase表中的每行數(shù)據(jù)都由一個RowKey和多個Column(列)組成,數(shù)據(jù)是按照RowKey的字典順序存儲的,查詢數(shù)據(jù)時只能根據(jù)RowKey進(jìn)行檢索。RDD特性理解深刻理解RDD的特性是理解Spark基本工作原理的關(guān)鍵,RDD是Spark提供的核心抽象,全稱為ResillientDistributedDataset,即彈性分布式數(shù)據(jù)集。030201HBase中的每個列都由ColumnFamily(列族)和ColumnQualifier(列限定符)進(jìn)行限定,建表時只需指明列族,而列限定符無需預(yù)先定義。列族與列限定符時間戳用于標(biāo)識數(shù)據(jù)的不同版本,每條數(shù)據(jù)寫入時,如果不指定時間戳,系統(tǒng)會自動為其加上該字段,其值為寫入HBase的時間。時間戳標(biāo)識版本Spark基本工作原理RegionServer為Region的管理者,其實現(xiàn)類為HRegionServer,主要作用包括數(shù)據(jù)的操作以及Region的操作。Master是所有RegionServer的管理者,其實現(xiàn)類為HMaster,主要作用包括對表和RegionServer的操作。HBase通過Zookeeper來做Master的高可用、RegionServer的監(jiān)控、元數(shù)據(jù)的入口以及集群配置的維護(hù)等工作。HDFS為HBase提供最終的底層數(shù)據(jù)存儲服務(wù),同時為HBase提供高可用的支持。HBase基本架構(gòu)RegionServerMasterZookeeperHDFSPostgreSQL的許可證因為許可證的靈活,任何人都可以以任何目的免費使用、修改和分發(fā)PostgreSQL,為開發(fā)者提供了很大的便利。PostgreSQL的定義PostgreSQL是一種自由軟件的對象-關(guān)系型數(shù)據(jù)庫管理系統(tǒng)(ORDBMS),以加州大學(xué)計算機系開發(fā)的POSTGRES,4.2版本為基礎(chǔ)。POSTGRES的概念POSTGRES的許多領(lǐng)先概念只是在比較遲的時候才出現(xiàn)在商業(yè)網(wǎng)站數(shù)據(jù)庫中,而PostgreSQL支持大部分的SQL標(biāo)準(zhǔn)并提供了許多現(xiàn)代特性。PostgreSQL的擴展性PostgreSQL可以用許多方法擴展,例如通過增加新的數(shù)據(jù)類型、函數(shù)、操作符、聚集函數(shù)、索引方法、過程語言等。PostgreSQL組件簡單的物理架構(gòu)PostgreSQL的物理架構(gòu)由共享內(nèi)存、一系列后臺進(jìn)程和數(shù)據(jù)文件組成,提供了數(shù)據(jù)庫緩存和事務(wù)日志緩存的內(nèi)存緩存空間。共享內(nèi)存的重要性減少磁盤IOPostgreSQL架構(gòu)共享內(nèi)存是服務(wù)器為數(shù)據(jù)庫緩存和事務(wù)日志緩存預(yù)留的內(nèi)存緩存空間,其中的SharedBuffer和WALBuffer是重要組成部分。SharedBuffer的目標(biāo)是減少磁盤IO,為此需要滿足特定規(guī)則,如緩存大塊數(shù)據(jù)、多用戶共享緩存、頻繁訪問的磁盤塊長期放在緩存中。PostgreSQL架構(gòu)WALBuffer的作用WALBuffer是用來臨時存儲數(shù)據(jù)庫變化的緩存區(qū)域,其內(nèi)容會根據(jù)提前定義好的時間點參數(shù)要求寫入到磁盤的WAL文件中。PostgreSQL的進(jìn)程類型PostgreSQL有四種進(jìn)程類型,包括Postmaster(Daemon)Process、BackgroundProcess、BackendProcess和ClientProcess。PostmasterProcess的角色PostmasterProcess是主后臺駐留進(jìn)程,負(fù)責(zé)恢復(fù)、初始化共享內(nèi)存、運行后臺進(jìn)程操作,并負(fù)責(zé)創(chuàng)建后端進(jìn)程。05通信與大數(shù)據(jù)的融合任務(wù)目的結(jié)合的數(shù)據(jù)通過結(jié)合學(xué)生基礎(chǔ)信息、成績、就業(yè)數(shù)據(jù)等校內(nèi)熟悉的多份數(shù)據(jù),以及大數(shù)據(jù)平臺,可以更全面地了解大數(shù)據(jù)技術(shù)如何幫助我們提高數(shù)據(jù)分析的效率。數(shù)據(jù)來源通過校內(nèi)熟悉的多份數(shù)據(jù)(包含學(xué)生基礎(chǔ)信息、成績、就業(yè)數(shù)據(jù)等),跟大數(shù)據(jù)平臺相結(jié)合的方式,來了解大數(shù)據(jù)技術(shù)如何幫助我們提高數(shù)據(jù)分析的效率。通過通信大數(shù)據(jù)平臺,可以獲取到學(xué)生的通信數(shù)據(jù),進(jìn)而分析學(xué)生的社交網(wǎng)絡(luò)、興趣偏好等信息。通信大數(shù)據(jù)平臺通過校內(nèi)學(xué)生成績數(shù)據(jù),可以了解到學(xué)生的學(xué)習(xí)情況、成績分布、學(xué)習(xí)困難等信息。校內(nèi)學(xué)生成績數(shù)據(jù)任務(wù)準(zhǔn)備根據(jù)學(xué)生成績表設(shè)計結(jié)果表,包含結(jié)果表的表名、字段等關(guān)鍵信息。數(shù)據(jù)推送在大數(shù)據(jù)平臺通過算法將多張表格關(guān)聯(lián),得出結(jié)果表。數(shù)據(jù)關(guān)聯(lián)將結(jié)果表通過BI展示。結(jié)果戰(zhàn)術(shù)任務(wù)工作過程算法輸出在計算機科學(xué)中,算法是用于執(zhí)行特定任務(wù)或解決特定問題的步驟。算法的輸出是問題解決方案或任務(wù)結(jié)果。結(jié)果表在數(shù)據(jù)處理和分析中,結(jié)果表是一種用于展示分析結(jié)果或數(shù)據(jù)的表格。結(jié)果表可以包含多種數(shù)據(jù)類型,如數(shù)字、文本、日期等。BI展示BI展示即商業(yè)智能展示,是一種將商業(yè)智能數(shù)據(jù)和分析結(jié)果以可視化形式展現(xiàn)給決策者或業(yè)務(wù)人員的方法。任務(wù)報告本章總結(jié)大數(shù)據(jù)平臺核心組件本章節(jié)介紹了大數(shù)據(jù)平臺的核心組件,包括HDFS、YARN、MapReduce、Spark、Hive、Kafka和Zookeeper等。組件協(xié)同工作這些組件在大數(shù)據(jù)生態(tài)系統(tǒng)中相互配合,構(gòu)建了一個完整的數(shù)據(jù)處理和存儲平臺,能夠處理和分析大規(guī)模數(shù)據(jù)集。組件選擇取決于任務(wù)性質(zhì)不同組件的選擇取決于任務(wù)的性質(zhì),例如Spark適合需要快速交互和復(fù)雜分析的場景,而Kafka適合實時數(shù)據(jù)流處理。Hadoop版本更新大數(shù)據(jù)組件中,提供數(shù)據(jù)存儲的組件稱為HadoopDistributedFileSystem(HDFS),包含了NameNode和DataNode兩個實例。大數(shù)據(jù)組件存儲YARN的作用YARN主要負(fù)責(zé)集群資源的協(xié)調(diào)管理,包含ResourceManager和NodeManager兩個實例,分別負(fù)責(zé)集群資源和單個節(jié)點服務(wù)器資源的管理。Hadoop發(fā)展至現(xiàn)在經(jīng)歷了3個大版本的更新,分別是hadoop1.0、hadoop2.0、hadoop3.0。本章習(xí)題MapReduce架構(gòu)用于計算的階段分為Map和Reduce兩個階段,Map過程將輸入數(shù)據(jù)拆分成多個小塊分別進(jìn)行處理,Reduce過程主要負(fù)責(zé)匯聚結(jié)果值。MapReduce計算階段本章習(xí)題Hive的優(yōu)點包括操作接口采用類SQL語法,提供快速開發(fā)的能力,避免了去寫MapReduce,減少學(xué)習(xí)成本,并支持用戶自定義函數(shù)。缺點是實現(xiàn)算法比較局限,迭代式算法無法表達(dá),且調(diào)優(yōu)困難,粒度較粗。Hive優(yōu)缺點章節(jié)介紹的計算法框架有Spark和MapReduce兩種,Spark的計算更加優(yōu)秀。計算框架比較消息隊列組件消息隊列的組件是Kafka。Zookeeper作用本章習(xí)題ZooKeeper的主要作用是提供一種可靠的、分布式的協(xié)調(diào)服務(wù),實現(xiàn)可靠的分布式應(yīng)用。0102通信大數(shù)據(jù)分析與應(yīng)用實訓(xùn)教學(xué)平臺簡介-經(jīng)典的4大實訓(xùn)場景完美契合課程內(nèi)容關(guān)鍵步驟按需回傳輕松掌握實訓(xùn)效果可視化的數(shù)據(jù)和算法界面降低跨專業(yè)應(yīng)用門檻專有的通信大數(shù)據(jù)源一鍵修復(fù)升級和更新01020304高并發(fā)和高可用性不同權(quán)限賬號的數(shù)據(jù)隔離05使用鏈接:/lab-txdaj/THANKS感謝觀看第3章語言基礎(chǔ)《5G通信大數(shù)據(jù)分析與應(yīng)用》CATALOGUE目錄數(shù)據(jù)庫操作指南數(shù)據(jù)表操作(字段)基礎(chǔ)查詢條件查詢介紹高級非過程化編程SQL是一種高級非過程化編程語言,這意味著它不需要程序員指定數(shù)據(jù)處理的細(xì)節(jié),而是讓數(shù)據(jù)庫管理系統(tǒng)來執(zhí)行這些操作。數(shù)據(jù)庫查詢語言SQL是一種用于查詢和管理數(shù)據(jù)庫的編程語言。它使用特定的語法來檢索、插入、更新和刪除數(shù)據(jù)庫中的數(shù)據(jù)。數(shù)據(jù)庫管理語言SQL也用于數(shù)據(jù)庫的管理,包括創(chuàng)建數(shù)據(jù)庫、創(chuàng)建數(shù)據(jù)表、刪除數(shù)據(jù)表等。SQL語言分號結(jié)尾SQL語句通常以分號結(jié)尾,表示語句的結(jié)束??崭窈涂s進(jìn)SQL語句可以用空格和縮進(jìn)來增加可讀性。盡管不是強制性的,但良好的格式設(shè)置可以使代碼更易于閱讀和理解。語法要求數(shù)據(jù)庫語言分類DDL(定義對象)DDL(DataDefinitionLanguage)是定義數(shù)據(jù)庫對象的語言,包括定義表、列、索引等。DML(操作數(shù)據(jù))DCL(控制權(quán)限)DML(DataManipulationLanguage)是用于操作數(shù)據(jù)庫中的數(shù)據(jù)的語言,包括檢索、插入、更新和刪除數(shù)據(jù)等。DCL(DataControlLanguage)是用于控制對數(shù)據(jù)庫的訪問權(quán)限的語言,包括授予權(quán)限和回收權(quán)限等。01數(shù)據(jù)庫操作指南使用“SHOWDATABASES;”命令,可以列出當(dāng)前服務(wù)器上所有的數(shù)據(jù)庫。列出所有數(shù)據(jù)庫使用“USE數(shù)據(jù)庫名字;”命令,可以切換到特定數(shù)據(jù)庫,并查看該數(shù)據(jù)庫的相關(guān)信息。查看特定數(shù)據(jù)庫使用“SHOWCREATEDATABASE數(shù)據(jù)庫名字;”命令,可以顯示特定數(shù)據(jù)庫的創(chuàng)建語句和相關(guān)信息。顯示數(shù)據(jù)庫結(jié)構(gòu)顯示數(shù)據(jù)庫切換到特定數(shù)據(jù)庫使用“USE數(shù)據(jù)庫名字;”命令,可以切換到特定數(shù)據(jù)庫,并查看該數(shù)據(jù)庫的相關(guān)信息。列出當(dāng)前數(shù)據(jù)庫使用“SHOWTABLES;”命令,可以列出當(dāng)前數(shù)據(jù)庫中所有的數(shù)據(jù)表。切換回默認(rèn)數(shù)據(jù)庫使用“USEmysql;”命令,可以切換回默認(rèn)數(shù)據(jù)庫(通常為“mysql”)。切換數(shù)據(jù)庫創(chuàng)建數(shù)據(jù)庫使用“USE數(shù)據(jù)庫名字;”命令,可以查看特定數(shù)據(jù)庫的相關(guān)信息。查看數(shù)據(jù)庫刪除數(shù)據(jù)庫使用“DROPDATABASE數(shù)據(jù)庫名字;”命令,可以刪除一個數(shù)據(jù)庫。注意,這個操作是不可逆的,請謹(jǐn)慎使用。使用“CREATEDATABASE數(shù)據(jù)庫名字;”命令,可以創(chuàng)建一個新的數(shù)據(jù)庫。創(chuàng)建、查看與刪除數(shù)據(jù)庫02數(shù)據(jù)表操作(字段)使用CREATETABLE語句顯式地創(chuàng)建數(shù)據(jù)表,并指定表名、字段名、數(shù)據(jù)類型和注釋等信息。例如,```sqlCREATETABLE表名(字段名1數(shù)據(jù)類型COMMENT'備注...',字段名2數(shù)據(jù)類型COMMENT'備注...',顯式創(chuàng)建新增數(shù)據(jù)表通過USE語句指定要使用的數(shù)據(jù)庫,然后通過CREATETABLE語句創(chuàng)建數(shù)據(jù)表。這種方式會自動將數(shù)據(jù)表創(chuàng)建在當(dāng)前數(shù)據(jù)庫中。例如,USE數(shù)據(jù)庫名字;隱式創(chuàng)建在創(chuàng)建數(shù)據(jù)表時,可以通過指定存儲引擎來定義數(shù)據(jù)表的存儲方式。常見的存儲引擎包括InnoDB、MyISAM、Memory等。例如,)ENGINE=InnoDB;存儲引擎顯示所有數(shù)據(jù)表使用SHOWTABLES語句可以查看當(dāng)前數(shù)據(jù)庫中的所有數(shù)據(jù)表。例如,SHOWTABLES;查看指定數(shù)據(jù)表使用SHOWTABLES語句配合LIKE關(guān)鍵字可以查看指定名稱的數(shù)據(jù)表。例如,SHOWTABLESLIKE'pattern';#與數(shù)據(jù)庫的pattern一樣,_和%兩個通配符查看數(shù)據(jù)表結(jié)構(gòu)使用SHOWCREATETABLE語句可以查看數(shù)據(jù)表的創(chuàng)建語句,從而了解數(shù)據(jù)表的結(jié)構(gòu)。例如,SHOWCREATETABLE表名;查看數(shù)據(jù)表010203數(shù)據(jù)表結(jié)構(gòu)查看查看數(shù)據(jù)表主鍵使用SHOWINDEXES語句可以查看數(shù)據(jù)表的主鍵信息,包括主鍵名、字段名等。例如,SHOWINDEXESFROM表名;查看數(shù)據(jù)表索引使用SHOWINDEXES語句可以查看數(shù)據(jù)表的索引信息,包括索引名、字段名等。例如,查看數(shù)據(jù)表字段使用DESC語句可以查看數(shù)據(jù)表的字段信息,包括字段名、數(shù)據(jù)類型、是否為主鍵等。例如,DESC表名;03020103基礎(chǔ)查詢SELECT*FROM表名;語法從指定的數(shù)據(jù)表中選擇所有的列和所有的行。含義SELECT*FROMstu;示例查詢所有列010203SELECT列名1,列名2,...FROM表名;語法含義示例從指定的數(shù)據(jù)表中選擇特定的列和所有的行。SELECTsid,sname,ageFROMstu;查詢指定列從指定的數(shù)據(jù)表中選擇滿足特定條件的列和行。含義SELECTsid,sname,ageFROMstuWHEREage>20;示例SELECT列名1,列名2,...FROM表名WHERE條件;語法條件查詢04條件查詢介紹條件查詢基本概念WHERE子句WHERE子句用于過濾查詢結(jié)果,只返回滿足條件的記錄。運算符及關(guān)鍵字條件查詢中使用了一些特定的運算符和關(guān)鍵字,如=、!=、<>、<、<=、>、>=、BETWEEN…AND、IN(set)、ISNULL、AND、OR和NOT等。注意事項在編寫條件查詢時,需要注意運算符的優(yōu)先級和結(jié)合性,以及如何使用括號來改變運算順序。=等于運算符,用于比較兩個值是否相等。!=、<>不等于運算符,用于比較兩個值是否不相等。<、<=小于和不大于運算符,用于比較兩個值的大小關(guān)系。運算符及關(guān)鍵字詳解大于和不低于運算符,用于比較兩個值的大小關(guān)系。、>=范圍運算符,用于指定一個范圍,返回范圍內(nèi)的所有記錄。BETWEEN…AND集合運算符,用于指定一個集合,返回屬于該集合的記錄。IN(set)運算符及關(guān)鍵字詳解ISNULL空值運算符,用于判斷字段是否為NULL值。AND邏輯與運算符,用于連接多個條件,當(dāng)且僅當(dāng)所有條件都滿足時,返回結(jié)果。OR邏輯或運算符,用于連接多個條件,只要有一個條件滿足時,就返回結(jié)果。NOT邏輯非運算符,用于對條件進(jìn)行取反操作。運算符及關(guān)鍵字詳解條件查詢注意事項運算符的優(yōu)先級和結(jié)合性在編寫條件查詢時,需要注意運算符的優(yōu)先級和結(jié)合性。例如,AND運算符的優(yōu)先級高于OR運算符,因此需要使用括號來改變運算順序。括號的使用在條件查詢中,可以使用括號來改變運算順序。例如,(AANDB)ORC的運算順序是先進(jìn)行AND運算,再進(jìn)行OR運算。條件的書寫在編寫條件查詢時,需要注意條件的書寫格式。例如,應(yīng)該使用"="而不是"==",因為"=="在SQL中并不是一個合法的比較運算符。通信大數(shù)據(jù)分析與應(yīng)用實訓(xùn)教學(xué)平臺簡介-經(jīng)典的4大實訓(xùn)場景完美契合課程內(nèi)容關(guān)鍵步驟按需回傳輕松掌握實訓(xùn)效果可視化的數(shù)據(jù)和算法界面降低跨專業(yè)應(yīng)用門檻專有的通信大數(shù)據(jù)源一鍵修復(fù)升級和更新01020304高并發(fā)和高可用性不同權(quán)限賬號的數(shù)據(jù)隔離05使用鏈接:/lab-txdaj/THANKS感謝觀看第4章5G移動通信《5G通信大數(shù)據(jù)分析與應(yīng)用》CATALOGUE目錄5G網(wǎng)絡(luò)概述NG-RAN與5GC的連接4G/5G互操作參數(shù)智能網(wǎng)優(yōu)關(guān)鍵參數(shù)提取網(wǎng)絡(luò)優(yōu)化與應(yīng)用015G網(wǎng)絡(luò)概述NG-RAN與5GC介紹5GC5GC是5G網(wǎng)絡(luò)的核心網(wǎng),它包括所有的網(wǎng)絡(luò)設(shè)備,如網(wǎng)關(guān)、路由器、防火墻等,以實現(xiàn)數(shù)據(jù)的傳輸、路由和存儲。5GC是5G網(wǎng)絡(luò)的大腦,負(fù)責(zé)控制網(wǎng)絡(luò)的運行和管理。NG接口NG接口是NG-RAN和5GC之間的接口,它負(fù)責(zé)數(shù)據(jù)的傳輸和路由。NG接口是5G網(wǎng)絡(luò)的重要組成部分,其性能直接影響整個網(wǎng)絡(luò)的性能。NG-RANNG-RAN是5G網(wǎng)絡(luò)的接入網(wǎng),它包括所有與移動設(shè)備通信的基站和天線。NG-RAN是5G網(wǎng)絡(luò)的核心,負(fù)責(zé)將移動設(shè)備連接到5G網(wǎng)絡(luò),并實現(xiàn)數(shù)據(jù)的傳輸和路由。030201gNBgNB是5G網(wǎng)絡(luò)中的基站節(jié)點,它負(fù)責(zé)向用戶提供5G控制面和用戶面功能。gNB是NG-RAN中的核心節(jié)點,其性能直接影響整個網(wǎng)絡(luò)的性能。NG-RAN節(jié)點類型ng-eNBng-eNB是5G網(wǎng)絡(luò)中的演進(jìn)型基站節(jié)點,它負(fù)責(zé)向用戶提供4G控制面和用戶面功能。ng-eNB是NG-RAN中的過渡節(jié)點,其性能對整個網(wǎng)絡(luò)的性能有一定影響。ODUODU是5G網(wǎng)絡(luò)中的光數(shù)字單元,它負(fù)責(zé)數(shù)據(jù)的傳輸和路由。ODU是NG-RAN中的重要設(shè)備,其性能直接影響整個網(wǎng)絡(luò)的性能。5GC架構(gòu)AMFAMF是5GC中的接入和移動性管理功能,它負(fù)責(zé)用戶的接入、移動性管理和會話管理。AMF是5GC中的核心設(shè)備,其性能直接影響整個網(wǎng)絡(luò)的性能。UPFUPF是5GC中的用戶面的轉(zhuǎn)發(fā)功能,它負(fù)責(zé)數(shù)據(jù)的傳輸和路由。UPF是5GC中的重要設(shè)備,其性能直接影響整個網(wǎng)絡(luò)的性能。SMFSMF是5GC中的會話管理功能,它負(fù)責(zé)建立、修改和終止用戶的會話。SMF是5GC中的重要設(shè)備,其性能影響整個網(wǎng)絡(luò)的性能。02NG-RAN與5GC的連接NG接口協(xié)議NG接口傳輸包括了許多不同的數(shù)據(jù)傳輸方式,如HTTP、HTTPS、WebSocket等,這些協(xié)議在NG接口中都有廣泛的應(yīng)用。NG接口傳輸NG接口功能NG接口功能包括了許多不同的功能,如設(shè)備接入、數(shù)據(jù)傳輸、控制協(xié)議轉(zhuǎn)換等,這些功能在NG-RAN和5GC的通信中都有重要的作用。NG接口協(xié)議是NG-RAN和5GC之間的通信協(xié)議,它包括了許多用于數(shù)據(jù)傳輸和控制的功能。NG接口介紹接口功能與數(shù)據(jù)傳輸設(shè)備接入設(shè)備接入是NG-RAN和5GC連接的重要步驟,它包括了許多不同的協(xié)議和步驟,如設(shè)備注冊、登錄、身份驗證等。數(shù)據(jù)傳輸控制協(xié)議轉(zhuǎn)換數(shù)據(jù)傳輸是NG-RAN和5GC連接的主要目的,它包括了許多不同的數(shù)據(jù)傳輸方式和協(xié)議,如HTTP、HTTPS、WebSocket等??刂茀f(xié)議轉(zhuǎn)換是NG-RAN和5GC連接的重要功能,它包括了許多不同的協(xié)議轉(zhuǎn)換方式和步驟,如協(xié)議轉(zhuǎn)換器、網(wǎng)關(guān)等。gNB是5G接入網(wǎng)中的主設(shè)備,它負(fù)責(zé)向用戶提供5G控制面和用戶面功能。在NG-RAN和5GC連接中,gNB是主要的接口設(shè)備之一,它負(fù)責(zé)通過NG接口向5GC傳輸數(shù)據(jù)和控制信號。gNBgNB和ng-eNB在連接中的作用ng-eNB是4G和5G互操作中的設(shè)備,它負(fù)責(zé)向用戶提供4G控制面和用戶面功能。在NG-RAN和5GC連接中,ng-eNB也可以通過NG接口與5GC進(jìn)行通信,但是需要通過4G核心網(wǎng)進(jìn)行數(shù)據(jù)傳輸。ng-eNBgNB和ng-eNB在連接中起到了重要的作用,它們負(fù)責(zé)通過NG接口向5GC傳輸數(shù)據(jù)和控制信號,從而實現(xiàn)了5G接入網(wǎng)和5GC之間的通信。連接作用034G/5G互操作參數(shù)EUTRA鄰頻點在SIB5的carrierFreqListEUTRA->CarrierFreqEUTRA中定義,表示EUTRA鄰頻點。服務(wù)小區(qū)重選優(yōu)先級最低優(yōu)先級為0,值越高絕對優(yōu)先級越高,影響UE重選到該頻點的優(yōu)先級。NR服務(wù)小區(qū)重選子優(yōu)先級在SIB2的cellReselectionServingFreqInfo中定義,表示服務(wù)頻點的小區(qū)重選子優(yōu)先級?;ゲ僮鲄?shù)概覽參數(shù)英文名中文含義所在消息功能含義對網(wǎng)絡(luò)質(zhì)量的影響5->4重選參數(shù),NR側(cè)設(shè)置cellReselectionPriority服務(wù)小區(qū)重選優(yōu)先級SIB2->cellReselectionServingFreqInfo該參數(shù)表示服務(wù)頻點的小區(qū)重選優(yōu)先級,0表示最低優(yōu)先級,對應(yīng)3GPPTS38.331協(xié)議SIB2中的cellReselectionPriority信元。值設(shè)置越高,絕對優(yōu)先級就越高,則UE就越優(yōu)先重選到該頻點cellReselectionSubPriorityNR服務(wù)小區(qū)重選子優(yōu)先級SIB2->cellReselectionServingFreqInfo該參數(shù)表示服務(wù)頻點的小區(qū)重選子優(yōu)先級。CarrierFreqEUTRAEUTRA鄰頻點SIB5->carrierFreqListEUTRA->CarrierFreqEUTRA該參數(shù)表示EUTRA鄰頻點
s-NonInraSearchP異頻異系統(tǒng)重選起測門限RSRPSIB2->cellReselectionServingFreqInfo該參數(shù)表示異頻異系統(tǒng)小區(qū)重選測量觸發(fā)RSRP門限。對于重選優(yōu)先級大于服務(wù)頻點的異系統(tǒng),UE總是啟動測量;對于重選優(yōu)先級小于等于服務(wù)頻點的異頻或者重選優(yōu)先級小于服務(wù)頻點的異系統(tǒng),當(dāng)測量RSRP值大于該值時,UE無需啟動異系統(tǒng)測量;當(dāng)測量RSRP值小于或等于該值時,UE需啟動異系統(tǒng)測量。該參數(shù)配置的越小,則提高異頻異系統(tǒng)小區(qū)重選中測量的觸發(fā)難度;該參數(shù)配置的越大,則降低異頻異系統(tǒng)小區(qū)重選中測量的觸發(fā)難度。threshSeringLowP異頻異系統(tǒng)低優(yōu)先級重選門限RSRPSIB2->cellReselectionServingFreqInfo該參數(shù)表示服務(wù)頻點向低優(yōu)先級異頻異系統(tǒng)重選時的RSRP門限該參數(shù)配置的越小,更難觸發(fā)到低優(yōu)先級異頻或異系統(tǒng)的小區(qū)重選。該參數(shù)配置的越大,更容易觸發(fā)到低優(yōu)先級異頻或異系統(tǒng)的小區(qū)重選。q-Hyst小區(qū)重選遲滯SIB2->cellReselectionCommon->speedStateReselectionPars該參數(shù)表示UE在小區(qū)重選時,服務(wù)小區(qū)RSRP測量值的遲滯值該參數(shù)設(shè)置越小,同頻或異頻同優(yōu)先級重選越容易,但是乒乓重選的概率增加;該參數(shù)設(shè)置的越大,同頻或異頻同優(yōu)先級重選越難,乒乓重選的概率減小。TreselectionEUTRA重選信號判決時長SIB5該參數(shù)表示重選EUTRAN小區(qū)定時器長。在重選EUTRAN小區(qū)定時器時長內(nèi),當(dāng)服務(wù)小區(qū)的信號質(zhì)量和新小區(qū)信號質(zhì)量滿足重選門限,且UE在當(dāng)前服務(wù)小區(qū)駐留超過1秒時,UE才會向EUTRAN小區(qū)發(fā)起重選。該參數(shù)配置的越小,UE在本小區(qū)就越容易發(fā)起重選,但是增大了乒乓重選的概率;該參數(shù)配置的越大,UE在本小區(qū)越難發(fā)起重選,但是減小了乒乓重選的概率。threshX-HighEUTRAN頻點高優(yōu)先級重選RSRP門限SIB5->CarrierFreqEUTRA該參數(shù)表示異系統(tǒng)EUTRAN頻點高優(yōu)先級重選的RSRP門限值,在目標(biāo)頻點的小區(qū)重選優(yōu)先級比服務(wù)小區(qū)的小區(qū)重選優(yōu)先級要高時,作為UE從服務(wù)小區(qū)重選至目標(biāo)頻點下小區(qū)的接入電平門限。該參數(shù)設(shè)置的越小,觸發(fā)UE對高優(yōu)先級小區(qū)重選的難度越??;該參數(shù)設(shè)置的越大,觸發(fā)UE對高優(yōu)先級小區(qū)重選的難度越大。threshX-lowEUTRAN頻點低優(yōu)先級重選RSRP門限SIB5->CarrierFreqEUTRA該參數(shù)表示異系統(tǒng)EUTRAN頻點低優(yōu)先級重選的RSRP門限值,在目標(biāo)頻點的絕對優(yōu)先級低于服務(wù)小區(qū)的絕對優(yōu)先級時,作為UE從服務(wù)小區(qū)重選至目標(biāo)頻點下的小區(qū)的接入電平門限。該參數(shù)設(shè)置的越小,觸發(fā)UE對低優(yōu)先級小區(qū)重選的難度越??;該參數(shù)設(shè)置的越大,觸發(fā)UE對低優(yōu)先級小區(qū)重選的難度越大。q-RxlevMinEUTRA最小接入電平SIB5->CarrierFreqEUTRA該參數(shù)表示異系統(tǒng)EUTRAN小區(qū)最低接入RSRP電平,應(yīng)用于小區(qū)選擇準(zhǔn)則(S準(zhǔn)則)的判決。該參數(shù)設(shè)置的越小,觸發(fā)UE重選的難度越小,該參數(shù)設(shè)置的越大,觸發(fā)UE重選的難度越大。在SIB2的cellReselectionServingFreqInfo中定義,表示異頻異系統(tǒng)小區(qū)重選測量觸發(fā)的RSRP門限。異頻異系統(tǒng)重選起測門限RSRP在SIB2的cellReselectionServingFreqInfo中定義,表示服務(wù)頻點向低優(yōu)先級異頻異系統(tǒng)重選時的RSRP門限。異頻異系統(tǒng)低優(yōu)先級重選門限RSRP互操作參數(shù)概覽04智能網(wǎng)優(yōu)關(guān)鍵參數(shù)提取通過提取和分析智能網(wǎng)優(yōu)參數(shù),可以更好地理解網(wǎng)絡(luò)性能,包括覆蓋率、容量、數(shù)據(jù)傳輸速度、設(shè)備故障率等。理解網(wǎng)絡(luò)性能通過提取和分析智能網(wǎng)優(yōu)參數(shù),可以優(yōu)化網(wǎng)絡(luò)配置,包括調(diào)整天線、更改協(xié)議參數(shù)、優(yōu)化網(wǎng)絡(luò)架構(gòu)等,以提高網(wǎng)絡(luò)性能和效率。優(yōu)化網(wǎng)絡(luò)配置通過提取和分析智能網(wǎng)優(yōu)參數(shù),可以診斷設(shè)備故障和網(wǎng)絡(luò)問題,以便及時修復(fù)和解決這些問題。故障診斷參數(shù)提取的意義與目的01L2NR的重選/切換/重定向這些參數(shù)涉及4G和5G網(wǎng)絡(luò)之間的互操作性問題,包括小區(qū)重選、切換和重定向等。NR2L的重選/切換/重定向這些參數(shù)涉及5G網(wǎng)絡(luò)到4G網(wǎng)絡(luò)的互操作性問題,包括小區(qū)重選、切換和重定向等。EPSFB/fastreturn這些參數(shù)涉及4G網(wǎng)絡(luò)到5G網(wǎng)絡(luò)的互操作性問題,包括EPSfallback和fastreturn等。4/5G互操作參數(shù)提取0203網(wǎng)絡(luò)日志分析通過分析網(wǎng)絡(luò)日志,可以提取出智能網(wǎng)優(yōu)參數(shù),包括設(shè)備狀態(tài)、協(xié)議參數(shù)、數(shù)據(jù)傳輸速度等。命令行界面通過訪問設(shè)備的命令行界面,可以執(zhí)行特定的命令來提取智能網(wǎng)優(yōu)參數(shù)。專用工具使用一些專用工具,如網(wǎng)絡(luò)分析儀、協(xié)議分析儀等,可以更容易地提取和分析智能網(wǎng)優(yōu)參數(shù)。提取方法與應(yīng)用05網(wǎng)絡(luò)優(yōu)化與應(yīng)用網(wǎng)絡(luò)優(yōu)化策略優(yōu)化4/5G互操作參數(shù)根據(jù)業(yè)務(wù)需求和終端能力,調(diào)整4/5G互操作參數(shù),包括L2NR和NR2L的重選、切換、重定向參數(shù),以及EPSFB和fastreturn參數(shù)。優(yōu)化網(wǎng)絡(luò)覆蓋改善網(wǎng)絡(luò)覆蓋質(zhì)量,包括5G網(wǎng)絡(luò)的覆蓋率和邊緣區(qū)域的覆蓋質(zhì)量。優(yōu)化網(wǎng)絡(luò)容量根據(jù)業(yè)務(wù)需求,調(diào)整網(wǎng)絡(luò)容量參數(shù),包括小區(qū)重選優(yōu)先級、小區(qū)間干擾協(xié)調(diào)等參數(shù)。4/5G互操作參數(shù)調(diào)整根據(jù)業(yè)務(wù)需求和終端能力,調(diào)整4/5G互操作參數(shù),可以改善網(wǎng)絡(luò)質(zhì)量,提高用戶感知。網(wǎng)絡(luò)覆蓋優(yōu)化改善網(wǎng)絡(luò)覆蓋質(zhì)量,可以提高5G網(wǎng)絡(luò)的覆蓋率和邊緣區(qū)域的覆蓋質(zhì)量,從而改善網(wǎng)絡(luò)質(zhì)量。網(wǎng)絡(luò)容量調(diào)整根據(jù)業(yè)務(wù)需求,調(diào)整網(wǎng)絡(luò)容量參數(shù),可以改善網(wǎng)絡(luò)質(zhì)量,提高網(wǎng)絡(luò)容量和小區(qū)間干擾協(xié)調(diào)能力。參數(shù)調(diào)整對網(wǎng)絡(luò)質(zhì)量的影響實際應(yīng)用案例分享網(wǎng)絡(luò)覆蓋優(yōu)化案例改善網(wǎng)絡(luò)覆蓋質(zhì)量可以提高5G網(wǎng)絡(luò)的覆蓋率和邊緣區(qū)域的覆蓋質(zhì)量。例如,通過增加基站數(shù)量和優(yōu)化基站位置,可以改善網(wǎng)絡(luò)覆蓋質(zhì)量。網(wǎng)絡(luò)容量調(diào)整案例根據(jù)業(yè)務(wù)需求調(diào)整網(wǎng)絡(luò)容量參數(shù)可以改善網(wǎng)絡(luò)質(zhì)量提高網(wǎng)絡(luò)容量和小區(qū)間干擾協(xié)調(diào)能力。例如根據(jù)業(yè)務(wù)需求增加小區(qū)重選優(yōu)先級可以使UE在重選時更傾向于選擇該小區(qū)從而提高網(wǎng)絡(luò)容量。4/5G互操作參數(shù)調(diào)整案例根據(jù)業(yè)務(wù)需求和終端能力,調(diào)整4/5G互操作參數(shù),可以改善網(wǎng)絡(luò)質(zhì)量,提高用戶感知。例如,將L2NR的重選優(yōu)先級設(shè)置為最高,可以使UE在空閑態(tài)時優(yōu)先重選到5G小區(qū)。030201通信大數(shù)據(jù)分析與應(yīng)用實訓(xùn)教學(xué)平臺簡介-經(jīng)典的4大實訓(xùn)場景完美契合課程內(nèi)容關(guān)鍵步驟按需回傳輕松掌握實訓(xùn)效果可視化的數(shù)據(jù)和算法界面降低跨專業(yè)應(yīng)用門檻專有的通信大數(shù)據(jù)源一鍵修復(fù)升級和更新01020304高并發(fā)和高可用性不同權(quán)限賬號的數(shù)據(jù)隔離05使用鏈接:/lab-txdaj/THANKS感謝觀看第5章無線網(wǎng)絡(luò)優(yōu)化5.2弱覆蓋大數(shù)據(jù)分析《5G通信大數(shù)據(jù)分析與應(yīng)用》CATALOGUE目錄室內(nèi)覆蓋系統(tǒng)概述信道分布系統(tǒng)設(shè)計射頻同軸電纜與接頭網(wǎng)絡(luò)優(yōu)化與覆蓋場景路測數(shù)據(jù)收集與處理基于大數(shù)據(jù)技術(shù)處理覆蓋問題01室內(nèi)覆蓋系統(tǒng)概述傳統(tǒng)無源室內(nèi)分布系統(tǒng)優(yōu)缺點傳統(tǒng)無源室內(nèi)分布系統(tǒng)具有結(jié)構(gòu)簡單、安裝方便、成本低廉等優(yōu)點,但同時存在覆蓋范圍有限、信號質(zhì)量較差等缺點。工作原理傳統(tǒng)無源室內(nèi)分布系統(tǒng)通過天線接收基站信號,然后通過饋線將信號傳輸?shù)礁鱾€房間或區(qū)域。在傳輸過程中,信號會通過避雷器進(jìn)行保護(hù),避免雷擊等干擾。同時,可以通過衰減器等器件對信號進(jìn)行衰減,以適應(yīng)不同的覆蓋需求。架構(gòu)傳統(tǒng)無源室內(nèi)分布系統(tǒng)由天線、饋線、避雷器、衰減器等無源器件組成,通過分支器和耦合器等器件將信號分配給不同的房間或區(qū)域。有源室內(nèi)分布系統(tǒng)架構(gòu)有源室內(nèi)分布系統(tǒng)由天線、饋線、避雷器、衰減器等無源器件和放大器、濾波器等有源器件組成。01工作原理有源室內(nèi)分布系統(tǒng)通過天線接收基站信號,然后通過饋線將信號傳輸?shù)礁鱾€房間或區(qū)域。在傳輸過程中,信號會通過避雷器進(jìn)行保護(hù),避免雷擊等干擾。同時,可以通過衰減器等器件對信號進(jìn)行衰減,以適應(yīng)不同的覆蓋需求。02優(yōu)缺點有源室內(nèi)分布系統(tǒng)具有覆蓋范圍廣、信號質(zhì)量較好等優(yōu)點,但存在設(shè)備復(fù)雜、成本較高、需要專業(yè)人員維護(hù)等缺點。03室內(nèi)分布系統(tǒng)的主要特點與選擇安裝和維護(hù)室內(nèi)分布系統(tǒng)的安裝和維護(hù)難易程度也是選擇系統(tǒng)類型的重要指標(biāo)。傳統(tǒng)無源室內(nèi)分布系統(tǒng)安裝方便、成本低廉,但有源室內(nèi)分布系統(tǒng)需要專業(yè)人員維護(hù)、成本較高。可靠性室內(nèi)分布系統(tǒng)的可靠性是選擇系統(tǒng)類型的重要指標(biāo)。傳統(tǒng)無源室內(nèi)分布系統(tǒng)可靠性較高,但有源室內(nèi)分布系統(tǒng)需要專業(yè)人員維護(hù)、成本較高。覆蓋范圍和信號質(zhì)量室內(nèi)分布系統(tǒng)的覆蓋范圍和信號質(zhì)量是選擇系統(tǒng)類型的重要指標(biāo)。傳統(tǒng)無源室內(nèi)分布系統(tǒng)覆蓋范圍有限,信號質(zhì)量較差,而有源室內(nèi)分布系統(tǒng)覆蓋范圍廣、信號質(zhì)量較好。03020102信道分布系統(tǒng)設(shè)計單通道室內(nèi)分布系統(tǒng)的信源端僅采用單天線的一路輸出,這意味著系統(tǒng)只能接收和傳輸一路信號。信源端僅采用單天線的一路輸出由于單通道室內(nèi)分布系統(tǒng)的數(shù)據(jù)傳輸速率較低,系統(tǒng)容量較小,因此它適用于對數(shù)據(jù)速率、系統(tǒng)容量要求較低的室分區(qū)域。適用于對數(shù)據(jù)速率、系統(tǒng)容量要求低的室分區(qū)域單通道室內(nèi)分布系統(tǒng)的建設(shè)成本較低,建設(shè)難度較小,因此它適用于大規(guī)模部署。成本低、建設(shè)容易單通道室內(nèi)分布系統(tǒng)01提高數(shù)據(jù)傳輸速率和系統(tǒng)容量雙通道室內(nèi)分布系統(tǒng)采用兩個通道進(jìn)行信號傳輸,可以顯著提高數(shù)據(jù)傳輸速率和系統(tǒng)容量。適用于對數(shù)據(jù)速率、系統(tǒng)容量要求高的室分區(qū)域由于雙通道室內(nèi)分布系統(tǒng)的數(shù)據(jù)傳輸速率較高,系統(tǒng)容量較大,因此它適用于對數(shù)據(jù)速率、系統(tǒng)容量要求較高的室分區(qū)域。成本高、建設(shè)難雙通道室內(nèi)分布系統(tǒng)的建設(shè)成本較高,建設(shè)難度較大,因此它適用于小規(guī)模部署。雙通道室內(nèi)分布系統(tǒng)0203無源與有源器件介紹無源器件無源器件是指無電源供應(yīng)的器件,它們只能傳遞、存儲或處理信號,而不能對信號進(jìn)行放大或衰減。常見的無源器件包括電阻、電容、電感、傳輸線等。有源器件有源器件是指有電源供應(yīng)的器件,它們可以對信號進(jìn)行放大、衰減、傳輸和處理等操作。常見的有源器件包括放大器、衰減器、調(diào)制器、解調(diào)器等。射頻同軸電纜射頻同軸電纜是室內(nèi)分布系統(tǒng)中常用的傳輸媒介,它由內(nèi)導(dǎo)體、外導(dǎo)體和絕緣層組成,可以傳輸射頻信號并減少信號損失。03射頻同軸電纜與接頭陶瓷內(nèi)導(dǎo)體射頻同軸電纜這種電纜的內(nèi)導(dǎo)體采用陶瓷材料,具有較好的耐磨性和抗氧化性。同時,由于采用同軸結(jié)構(gòu),具有較好的抗干擾能力和承重能力。編織外導(dǎo)體射頻同軸電纜這種電纜的外導(dǎo)體由編織的銅線或鋁線組成,具有較好的彈性和耐磨性。同時,由于采用同軸結(jié)構(gòu),具有較好的抗干擾能力和承重能力。皺紋銅管外導(dǎo)體射頻同軸電纜這種電纜的外導(dǎo)體采用皺紋銅管,內(nèi)層為銅絲編織層,外層為絕緣層。這種結(jié)構(gòu)的電纜具有較好的密封性和耐磨性,同時對于信號的衰減較小。射頻同軸電纜的類型與特點安裝注意事項在安裝射頻同軸電纜接頭時,要注意固定好電纜和接頭,避免松動或脫落。同時,要注意保持接頭的清潔和干燥,避免影響信號傳輸質(zhì)量。接頭器件的選用與安裝04網(wǎng)絡(luò)優(yōu)化與覆蓋場景無線網(wǎng)絡(luò)優(yōu)化可以提高網(wǎng)絡(luò)的信號質(zhì)量、數(shù)據(jù)傳輸速度和系統(tǒng)可靠性,從而提高網(wǎng)絡(luò)的整體質(zhì)量。提高網(wǎng)絡(luò)質(zhì)量無線網(wǎng)絡(luò)優(yōu)化的重要性無線網(wǎng)絡(luò)優(yōu)化可以改善用戶的網(wǎng)絡(luò)體驗,提高用戶滿意度,增強企業(yè)的競爭力。增加用戶滿意度無線網(wǎng)絡(luò)優(yōu)化可以降低網(wǎng)絡(luò)的能耗、維護(hù)成本和設(shè)備更新成本,從而降低運營成本。降低運營成本室內(nèi)覆蓋場景對于室外覆蓋場景,可以采用宏蜂窩接入室內(nèi)分布系統(tǒng)、微蜂窩室內(nèi)分布系統(tǒng)和分布式室內(nèi)分布系統(tǒng)等多種方式。室外覆蓋場景特殊場景對于特殊場景如地鐵、隧道等,可以采用直放站接入室內(nèi)分布系統(tǒng)等方式來實現(xiàn)網(wǎng)絡(luò)覆蓋。對于室內(nèi)覆蓋場景,可以采用傳統(tǒng)無源室內(nèi)分布系統(tǒng)、有源室內(nèi)分布系統(tǒng)、微蜂窩室內(nèi)分布系統(tǒng)和分布式室內(nèi)分布系統(tǒng)等多種方式。各類覆蓋場景下的優(yōu)化策略未來無線網(wǎng)絡(luò)發(fā)展趨勢與室內(nèi)覆蓋系統(tǒng)的挑戰(zhàn)0102035G網(wǎng)絡(luò)的大規(guī)模應(yīng)用和智能設(shè)備的快速發(fā)展將推動無線網(wǎng)絡(luò)向更高速度和更大容量發(fā)展。室內(nèi)覆蓋系統(tǒng)需要滿足更多設(shè)備的同時接入和更高的數(shù)據(jù)傳輸速度,這對其穩(wěn)定性和性能提出了更高的要求。室內(nèi)覆蓋系統(tǒng)需要不斷創(chuàng)新和完善,以適應(yīng)無線網(wǎng)絡(luò)技術(shù)的發(fā)展和應(yīng)用場景的變化。05路測數(shù)據(jù)收集與處理路測數(shù)據(jù)收集與處理路測數(shù)據(jù)弱覆蓋分析基于路測數(shù)據(jù)進(jìn)行問題路段弱覆蓋分析,旨在優(yōu)化移動通信網(wǎng)絡(luò)覆蓋質(zhì)量,確保用戶獲得穩(wěn)定、高質(zhì)量的通信服務(wù)。通信網(wǎng)絡(luò)覆蓋優(yōu)化用戶滿意度提升通過分析路測數(shù)據(jù),可以識別出移動通信網(wǎng)絡(luò)的弱覆蓋區(qū)域,對網(wǎng)絡(luò)進(jìn)行優(yōu)化和調(diào)整,提升覆蓋質(zhì)量。優(yōu)化移動通信網(wǎng)絡(luò)覆蓋質(zhì)量,使用戶在不同地理區(qū)域和使用場景中都能獲得穩(wěn)定、高質(zhì)量的通信服務(wù),提升用戶滿意度。輸入網(wǎng)址http://x.x.x.x:端口號進(jìn)行登錄,即可訪問相應(yīng)網(wǎng)站或應(yīng)用程序的登錄頁面。登錄網(wǎng)址登錄頁面通常會要求用戶輸入用戶名和密碼,以驗證其身份并允許其訪問受保護(hù)的資源。登錄頁面用戶需要在登錄頁面上輸入正確的用戶名和密碼,以成功登錄并訪問所需的資源。驗證身份登錄010203單擊新建實訓(xùn),填寫實訓(xùn)名稱和項目描述,完成實訓(xùn)創(chuàng)建。新建實訓(xùn)步驟項目名稱必填,只能由英文、數(shù)字、下劃線組成,長度3-255個字符。項目名稱規(guī)范教師賬號權(quán)限可操作,配置實訓(xùn)基本信息,將實訓(xùn)任務(wù)下發(fā)到對應(yīng)班級或者學(xué)生。實訓(xùn)任務(wù)下發(fā)新建項目06基于大數(shù)據(jù)技術(shù)處理覆蓋問題要求配置實訓(xùn)時間,關(guān)聯(lián)課程,并確保老師和學(xué)生知道對應(yīng)的知識點和教材章節(jié)。實訓(xùn)時間配置實訓(xùn)任務(wù)下發(fā)配置調(diào)度器以申請開發(fā)環(huán)境和生產(chǎn)環(huán)境的計算資源,可限制每個任務(wù)占用的資源數(shù)量以避免擁塞。計算資源配置學(xué)員申請權(quán)限后,管理員需進(jìn)行學(xué)生屬性配置,關(guān)聯(lián)相關(guān)課程和實訓(xùn)任務(wù)。用戶配置建表邏輯結(jié)構(gòu)需要建立一張結(jié)果表,表的邏輯結(jié)構(gòu)應(yīng)如下圖所示。邏輯結(jié)構(gòu)圖提供了表的各個字段和字段的數(shù)據(jù)類型等信息。表名規(guī)范表名應(yīng)遵循一定的規(guī)范,以避免在同個數(shù)據(jù)庫下出現(xiàn)多張同樣的表名。同學(xué)在創(chuàng)建表時后面需統(tǒng)一加上唯一的學(xué)號加以區(qū)分。建表可視化開發(fā)平臺通過可視化開發(fā)平臺,先新建一個項目,新建項目后點擊應(yīng)用開發(fā),新建一個功能。拖拽建數(shù)據(jù)表通過拖拽的方式新建一張數(shù)據(jù)表,并定義好表存儲的數(shù)據(jù)庫和表名。確定新建的表點擊確定后,在可視化開發(fā)畫布中可以看到新建的這張表。定義字段及類型定義好表名和庫名后,需要給這張表定義字段及字段類型。添加或DDL建表語句可以通過添加操作選擇字段,也可以通過DDL建表語句來定義字段和字段類型。字段匹配數(shù)據(jù)表字段名稱和字段類型要和輸入的數(shù)據(jù)表必須一一匹配。登錄可視化開發(fā)平臺010203040506算法面板配置根據(jù)學(xué)號姓名修改入?yún)?,日期需要加英文狀態(tài)下的引號,姓名學(xué)號參數(shù)和創(chuàng)建hive表時參數(shù)填寫要一致,否則可能出現(xiàn)表找不到的情況。算法名稱在創(chuàng)建新算法時,需要自定義算法名稱,例如res_result_nr_bg_segments_poorcover_學(xué)號,其中學(xué)號表示學(xué)生的唯一標(biāo)識符。輸入輸出表名稱在開發(fā)算法時,需要確定與弱覆蓋相關(guān)的輸入輸出表名稱,這些表將用于存儲算法所需的數(shù)據(jù)和生成的輸出結(jié)果。算法命令開發(fā)算法命令開發(fā)是算法實現(xiàn)的重要環(huán)節(jié),具體內(nèi)容將在3.5算法實現(xiàn)中詳細(xì)闡述,包括命令格式、參數(shù)設(shè)置和執(zhí)行流程等。算法開發(fā)數(shù)據(jù)同步數(shù)據(jù)同步目的01從大數(shù)據(jù)集群中的PG數(shù)據(jù)庫提取弱覆蓋信息進(jìn)行BI呈現(xiàn),需要先將清洗計算后的結(jié)果保存到關(guān)系型數(shù)據(jù)庫中,以方便后續(xù)查詢。創(chuàng)建PG表02在可視化開發(fā)平臺中拖拽PG圖標(biāo),新建PG表,自定義庫名和表名,并勾選伴生算法。補充MySQL創(chuàng)建表語句03補充MySQL創(chuàng)建表語句,注意頂端一定要加%mysql,指定代碼執(zhí)行環(huán)境為mysql,點擊執(zhí)行按鈕后下方會彈出參數(shù)。填寫參數(shù)并執(zhí)行04在下方彈出參數(shù)中填寫學(xué)號和姓名,再次點擊執(zhí)行即可創(chuàng)建mysql表,注意參數(shù)與前邊的一致性。數(shù)據(jù)查詢通過命令,看結(jié)果表是否有數(shù)據(jù),select*from表名;執(zhí)行算法完成參數(shù)填寫后點擊上方的三角形執(zhí)行按鈕,執(zhí)行查看下兩圖位置,均如圖所示則說明執(zhí)行算法成功。調(diào)試算法根據(jù)出現(xiàn)的log提示,修改錯誤,直到?jīng)]有報錯為止,可以通過點擊右上角的任務(wù)看板去查看清洗任務(wù)的運行狀態(tài)和結(jié)果。算法調(diào)試算法設(shè)計邏輯通過質(zhì)差路段中間表、原始采樣點匯表和工參表,根據(jù)時間和小區(qū)相關(guān)性獲取質(zhì)差時間內(nèi)所有小區(qū)索引號、名稱和siteID,生成質(zhì)差路段中覆蓋問題的結(jié)果表。弱覆蓋算法設(shè)計輸入nr_poorquality_points表,通過可視化開發(fā)平臺篩選質(zhì)差路段并輸出nr_bq_segments_cellinfo表,該表聚合了數(shù)據(jù)庫中符合特定條件的點,形成質(zhì)差路段。質(zhì)差區(qū)域定義質(zhì)差區(qū)域定義需滿足3個條件,即SINR<=-3dB、質(zhì)差采樣點比例>=80%且路段長度>=50m,聚合數(shù)據(jù)庫中符合條件的點形成質(zhì)差路段nr_bq_segments_cellinfo表。表格字段說明對兩個表的關(guān)鍵字段進(jìn)行說明,包括timestamp、longitude、latitude、gridh、pci、nr_arfcn、rsrp、rsrq、sinr和siteid,這些字段在路測原始數(shù)據(jù)表中也有出現(xiàn)。大數(shù)據(jù)算法設(shè)計01020304創(chuàng)建中間表`edu_middata.mid_nr_servingcellinfo__${student_name}__${student_id}`,用于存儲質(zhì)差區(qū)域弱覆蓋根因分析案例中的關(guān)鍵數(shù)據(jù)。創(chuàng)建中間表先判斷臨時表是否存在,存在即先刪除,然后取出中間表指定時間的數(shù)據(jù)作為臨時表(edu_tmpdata為臨時庫,t${student_id}為我的編號)。臨時表操作算法實現(xiàn)通信大數(shù)據(jù)分析與應(yīng)用實訓(xùn)教學(xué)平臺簡介經(jīng)典的4大實訓(xùn)場景完美契合課程內(nèi)容關(guān)鍵步驟按需回傳輕松掌握實訓(xùn)效果可視化的數(shù)據(jù)和算法界面降低跨專業(yè)應(yīng)用門檻專有的通信大數(shù)據(jù)源一鍵修復(fù)升級和更新01020304高并發(fā)和高可用性不同權(quán)限賬號的數(shù)據(jù)隔離05試用鏈接/lab-txdaj/通信大數(shù)據(jù)分析與應(yīng)用實訓(xùn)教學(xué)平臺簡介-經(jīng)典的4大實訓(xùn)場景完美契合課程內(nèi)容關(guān)鍵步驟按需回傳輕松掌握實訓(xùn)效果可視化的數(shù)據(jù)和算法界面降低跨專業(yè)應(yīng)用門檻專有的通信大數(shù)據(jù)源一鍵修復(fù)升級和更新01020304高并發(fā)和高可用性不同權(quán)限賬號的數(shù)據(jù)隔離05使用鏈接:/lab-txdaj/THANKS感謝觀看第5章無線網(wǎng)絡(luò)優(yōu)化5.3切換問題大數(shù)據(jù)理論基礎(chǔ)《5G通信大數(shù)據(jù)分析與應(yīng)用》CATALOGUE目錄切換流程概述SA空閑態(tài)移動性管理GNR切換關(guān)鍵參數(shù)小區(qū)選擇和重選的實際應(yīng)用切換流程優(yōu)化和故障排查01切換流程概述切換失敗待報告源gNodeB判決執(zhí)行在切換失敗待報告的狀態(tài)下,源gNodeB會繼續(xù)執(zhí)行預(yù)先設(shè)定的切換策略,包括選擇小區(qū)、進(jìn)行功率控制等。同時,源gNodeB會持續(xù)監(jiān)測UE的轉(zhuǎn)發(fā)數(shù)據(jù),以便在合適的時間繼續(xù)執(zhí)行切換。執(zhí)行切換,UE轉(zhuǎn)發(fā)數(shù)據(jù)在監(jiān)測到合適的切換時機時,源gNodeB會執(zhí)行切換操作,并轉(zhuǎn)發(fā)UE的數(shù)據(jù)。同時,UE也會將數(shù)據(jù)轉(zhuǎn)發(fā)給目標(biāo)gNodeB。切換失敗待報告在執(zhí)行切換過程中,如果發(fā)生切換失敗的情況,源gNodeB會暫停執(zhí)行切換,并等待UE轉(zhuǎn)發(fā)數(shù)據(jù)。同時,源gNodeB會繼續(xù)監(jiān)測切換進(jìn)程,以便在合適的時間繼續(xù)執(zhí)行切換。030201在切換成功后,目標(biāo)gNodeB會開始承載UE的業(yè)務(wù),而源gNodeB會釋放相關(guān)的資源,包括無線資源、處理資源等。同時,UE也會停止轉(zhuǎn)發(fā)數(shù)據(jù)給目標(biāo)gNodeB。切換成功切換成功,資源釋放在資源釋放后,源gNodeB會進(jìn)入空閑狀態(tài),等待新的切換請求。同時,UE也會進(jìn)入新的服務(wù)小區(qū),并開始正常的業(yè)務(wù)傳輸。資源釋放在切換成功后,如果滿足重定向策略的條件,UE會被重定向到新的服務(wù)小區(qū)。同時,源gNodeB會更新UE的上下文信息,以便UE在新的小區(qū)上繼續(xù)業(yè)務(wù)傳輸。重定向策略切換執(zhí)行02SA空閑態(tài)移動性管理小區(qū)選擇策略UE在選擇小區(qū)時,會根據(jù)自己的位置和需求,選擇不同的策略。例如,如果UE在覆蓋范圍之外,或者信號質(zhì)量較差,它會優(yōu)先選擇Qrxlev較高的小區(qū)。小區(qū)選擇規(guī)則UE在轉(zhuǎn)移時需要選擇小區(qū),選擇的依據(jù)是Srxlev和測量值Qrxlev。Srxlev是服務(wù)小區(qū)的參考信號接收功率,Qrxlev是測量小區(qū)的參考信號接收功率。出功率管理出功率管理是關(guān)于UE發(fā)射功率的管理。UE在發(fā)射信號時,會根據(jù)小區(qū)的選擇結(jié)果和調(diào)整策略,選擇合適的發(fā)射功率。小區(qū)選擇規(guī)則(S準(zhǔn)則)小區(qū)重選規(guī)則滿足條件則UE重選小區(qū),否則駐留原小區(qū)。條件是服務(wù)小區(qū)駐留超1s,且滿足R_n>R_s。R_n是鄰區(qū)報告的數(shù)量,R_s是服務(wù)小區(qū)報告的數(shù)量。小區(qū)重選策略UE在重選小區(qū)時,會根據(jù)自己的位置和需求,選擇不同的策略。例如,如果UE在服務(wù)小區(qū)的質(zhì)量較差,或者鄰區(qū)報告的數(shù)量較多,它會優(yōu)先選擇R_n>R_s的小區(qū)。出功率管理出功率管理是關(guān)于UE發(fā)射功率的管理。UE在發(fā)射信號時,會根據(jù)小區(qū)的重選結(jié)果和調(diào)整策略,選擇合適的發(fā)射功率。小區(qū)重選規(guī)則(R準(zhǔn)則)發(fā)射功率調(diào)整策略:UE在調(diào)整發(fā)射功率時,會根據(jù)小區(qū)的選擇結(jié)果和重選策略,調(diào)整發(fā)射功率的大小。例如,如果UE在覆蓋范圍之外,或者信號質(zhì)量較差,它會增加發(fā)射功率以提高信號質(zhì)量。最大功率限制出功率管理03GNR切換關(guān)鍵參數(shù)事件A1當(dāng)UE測量到的服務(wù)小區(qū)的信號質(zhì)量低于一個預(yù)定的閾值,同時鄰區(qū)的信號質(zhì)量高于另一個預(yù)定的閾值時,UE會觸發(fā)事件A1。這通常會導(dǎo)致UE切換到鄰區(qū)。01.測量事件概述事件A2事件A2與事件A1類似,但是它是基于參考信號接收質(zhì)量(RSRQ)而不是基于參考信號接收功率(RSRP)來觸發(fā)的。02.事件A5事件A5是在服務(wù)小區(qū)的信號質(zhì)量下降到一定程度,同時鄰區(qū)的信號質(zhì)量上升到一定程度時觸發(fā)的。它通常會導(dǎo)致UE切換到鄰區(qū)。03.這個參數(shù)定義了一個測量事件,包括事件類型、觸發(fā)條件、報告條件等。measurementEvent這個參數(shù)定義了觸發(fā)事件的測量量,例如RSRP、RSRQ等。triggerQuantity這個參數(shù)定義了觸發(fā)事件的閾值,例如A1事件的閾值、A5事件的閾值等。threshold測量事件參數(shù)詳解小區(qū)個體偏移值是一個用于控制終端切換的參數(shù),它屬于小區(qū)切換參數(shù)的一部分。定義小區(qū)個體偏移值主要用于控制終端的切換行為,包括是否進(jìn)行切換、何時進(jìn)行切換等。作用小區(qū)個體偏移值通常隨測量控制消息下發(fā)給終端,由網(wǎng)絡(luò)側(cè)進(jìn)行設(shè)定。根據(jù)具體場景選擇合適的值。設(shè)定小區(qū)個體偏移值(cellIndividualOffset)04小區(qū)選擇和重選的實際應(yīng)用S準(zhǔn)則與R準(zhǔn)則的實際部署案例S準(zhǔn)則與R準(zhǔn)則的定義與應(yīng)用S準(zhǔn)則,UE在嘗試連接到網(wǎng)絡(luò)時,通過測量每個小區(qū)的Srxlev值(參考信號接收功率)和Qrxlev值(接收信號質(zhì)量)來決定要連接的小區(qū)。R準(zhǔn)則,UE在已經(jīng)連接到網(wǎng)絡(luò)后,不斷測量服務(wù)小區(qū)和鄰區(qū)的RSRP值(參考信號接收功率),并根據(jù)此值來決定是否進(jìn)行小區(qū)重選。S準(zhǔn)則的實際部署案例場景描述,包含三個小區(qū)(小區(qū)A、小區(qū)B和小區(qū)C)的5G網(wǎng)絡(luò)。UE行為,UE測量每個小區(qū)的Srxlev和Qrxlev值,基于這些值做出連接決策。R準(zhǔn)則的實際部署案例場景描述,包含四個小區(qū)(小區(qū)D、小區(qū)E、小區(qū)F和小區(qū)G)的5G網(wǎng)絡(luò)。UE行為,UE在已連接狀態(tài)下,持續(xù)測量服務(wù)小區(qū)和鄰區(qū)的RSRP值,根據(jù)R準(zhǔn)則判斷是否進(jìn)行小區(qū)重選。優(yōu)化小區(qū)選擇和重選參數(shù)以提升用戶體驗優(yōu)化測量事件5G網(wǎng)絡(luò)中的測量事件包括A1、A2等,這些事件用于啟動切換功能,并衡量鄰區(qū)信號質(zhì)量。管理員可以通過優(yōu)化這些事件的觸發(fā)條件和報告機制來提升用戶體驗。調(diào)整小區(qū)個體偏移值小區(qū)個體偏移值是屬于小區(qū)切換參數(shù)的,主要用于控制終端切換。管理員可以通過調(diào)整這個參數(shù)來影響UE在切換過程中的行為。調(diào)整S準(zhǔn)則和R準(zhǔn)則的參數(shù)網(wǎng)絡(luò)管理員可以通過調(diào)整S準(zhǔn)則和R準(zhǔn)則的參數(shù)來影響UE的小區(qū)選擇和重選行為。例如,管理員可以增加Srxlev和Qrxlev的閾值,使得UE在連接網(wǎng)絡(luò)時更加嚴(yán)格地篩選小區(qū)。030201監(jiān)測和分析小區(qū)選擇和重選性能收集測量報告網(wǎng)絡(luò)管理員可以收集UE的測量報告來分析小區(qū)選擇和重選的性能。測量報告中應(yīng)該包括服務(wù)小區(qū)和鄰區(qū)的RSRP值、RSRQ值等信息。01分析切換成功率管理員可以分析切換成功率來衡量小區(qū)選擇和重選的性能。如果切換成功率較低,那么可能需要檢查S準(zhǔn)則和R準(zhǔn)則的配置是否正確。02檢查重定向策略管理員還可以檢查重定向策略是否正確實施。重定向策略是運營商用來控制UE連接到最佳小區(qū)的一種策略。如果重定向策略不正確,那么可能會導(dǎo)致UE連接到不適合的小區(qū)。0305切換流程優(yōu)化和故障排查切換時間不足在切換過程中,如果目標(biāo)小區(qū)的資源不足,可能會導(dǎo)致切換失敗。優(yōu)化策略是增加目標(biāo)小區(qū)的資源,例如增加小區(qū)的天線數(shù)量、功率等。資源不足切換參數(shù)配置不正確在配置切換參數(shù)時,如果參數(shù)配置不正確,可能會導(dǎo)致切換失敗。優(yōu)化策略是檢查并正確配置切換參數(shù),例如測量事件、切換閾值等。在切換過程中,如果切換時間不足,可能會導(dǎo)致切換失敗。優(yōu)化策略是增加切換時間,確保UE有足夠的時間完成切換過程。切換失敗的常見原因與解決方案使用協(xié)議分析儀協(xié)議分析儀可以監(jiān)測和分析網(wǎng)絡(luò)中的通信協(xié)議,包括切換過程中的各種消息和信號。通過協(xié)議分析儀,可以觀察到切換過程的細(xì)節(jié),從而更好地了解切換失敗的原因。如何使用工具監(jiān)控和分析切換流程分析日志運營商和設(shè)備制造商通常會在網(wǎng)絡(luò)上記錄日志,以跟蹤網(wǎng)絡(luò)的行為和性能。通過分析日志,可以了解網(wǎng)絡(luò)的狀態(tài)和性能,從而更好地了解切換失敗的原因?,F(xiàn)場測試在現(xiàn)場測試過程中,可以使用手機或其他設(shè)備嘗試進(jìn)行切換操作,同時監(jiān)測和分析切換過程。通過現(xiàn)場測試,可以更好地了解網(wǎng)絡(luò)的實際情況和性能。優(yōu)化硬件和軟件針對硬件和軟件故障導(dǎo)致的切換失敗問題,可以采取優(yōu)化措施。例如,可以改善硬件質(zhì)量、修復(fù)軟件漏洞等。優(yōu)化測量參數(shù)通過調(diào)整測量參數(shù),例如測量時間、測量閾值等,可以更好地評估鄰區(qū)信號的質(zhì)量,從而提高切換的成功率。優(yōu)化小區(qū)重選參數(shù)通過調(diào)整小區(qū)重選參數(shù),例如重選閾值、重選時間等,可以更好地控制UE的行為,使其更好地選擇小區(qū)進(jìn)行駐留和切換。切換流程優(yōu)化策略與案例分析通信大數(shù)據(jù)分析與應(yīng)用實訓(xùn)教學(xué)平臺簡介-經(jīng)典的4大實訓(xùn)場景完美契合課程內(nèi)容關(guān)鍵步驟按需回傳輕松掌握實訓(xùn)效果可視化的數(shù)據(jù)和算法界面降低跨專業(yè)應(yīng)用門檻專有的通信大數(shù)據(jù)源一鍵修復(fù)升級和更新01020304高并發(fā)和高可用性不同權(quán)限賬號的數(shù)據(jù)隔離05使用鏈接:/lab-txdaj/THANKS感謝觀看第6章位置信息大數(shù)據(jù)分析《5G通信大數(shù)據(jù)分析與應(yīng)用》CATALOGUE目錄位置大數(shù)據(jù)分析概述室外定位技術(shù)室內(nèi)定位技術(shù)定位技術(shù)的應(yīng)用場景車輛疏導(dǎo)與定位技術(shù)01位置大數(shù)據(jù)分析概述熱點區(qū)域定位數(shù)據(jù)理論介紹基站定位技術(shù)基站定位技術(shù)是通過手機與基站之間的通信,實現(xiàn)手機位置的定位。這種定位技術(shù)的精度較低,容易受到干擾,但定位速度較快。室內(nèi)分布系統(tǒng)建設(shè)室內(nèi)分布系統(tǒng)建設(shè)包括在建筑物內(nèi)安裝信號發(fā)射裝置,如天線、路由器等,以實現(xiàn)手機等設(shè)備的室內(nèi)定位。室內(nèi)分布系統(tǒng)建設(shè)對于提高室內(nèi)環(huán)境的信號覆蓋率和信號質(zhì)量具有重要作用。衛(wèi)星定位技術(shù)GPS系統(tǒng)是應(yīng)用最廣的衛(wèi)星定位技術(shù),由空間部分、地面控制部分和用戶設(shè)備部分組成。GPS通過接收衛(wèi)星信號,實現(xiàn)全球范圍內(nèi)的定位、導(dǎo)航和授時功能。030201通過室內(nèi)分布系統(tǒng)建設(shè),可以在建筑物內(nèi)實現(xiàn)全面的信號覆蓋,解決室內(nèi)環(huán)境信號弱或信號干擾的問題。提高室內(nèi)環(huán)境信號覆蓋率室內(nèi)分布系統(tǒng)建設(shè)可以改善室內(nèi)環(huán)境的信號質(zhì)量,提高數(shù)據(jù)傳輸速度和穩(wěn)定性,從而提升用戶體驗。提升室內(nèi)環(huán)境信號質(zhì)量室內(nèi)分布系統(tǒng)建設(shè)可以為室內(nèi)環(huán)境提供準(zhǔn)確的定位數(shù)據(jù),從而促進(jìn)位置大數(shù)據(jù)的應(yīng)用,如車輛疏導(dǎo)、安全監(jiān)控等。促進(jìn)位置大數(shù)據(jù)
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 高效授課服務(wù)合同
- 酒店用品招標(biāo)采購流程
- 苗木種植購銷合同
- 土地使用權(quán)流轉(zhuǎn)協(xié)議書修改
- 唯一住房保證書范本
- 智能化船舶監(jiān)控系統(tǒng)招標(biāo)
- 國內(nèi)購銷合同書版
- 石粉購銷合同范本
- 飼料青貯采購平臺
- 優(yōu)化勞務(wù)分包合同制度
- 工藝研發(fā)工程師崗位說明書
- 中國聯(lián)通機房標(biāo)準(zhǔn)化規(guī)范
- 國開本科《商務(wù)英語4》機考題庫及答案
- 2023年電大期末考試勞動與社會保障法
- GB/T 41805-2022光學(xué)元件表面疵病定量檢測方法顯微散射暗場成像法
- GB/T 6438-2007飼料中粗灰分的測定
- GB/T 33661-2017農(nóng)歷的編算和頒行
- 《鄉(xiāng)土中國》之《從欲望到需要》同步教學(xué)
- 國內(nèi)外總部基地研究多案例及經(jīng)濟分析課件
- 醫(yī)院管理案例分享:醫(yī)院人文關(guān)懷-華中科技大學(xué)同濟醫(yī)學(xué)院附屬協(xié)和醫(yī)院課件
- 風(fēng)電場場內(nèi)集電線路建安工程施工組織設(shè)計
評論
0/150
提交評論