數(shù)據(jù)分析及可視化

1.1數(shù)據(jù)分析概述第1章數(shù)據(jù)分析及可視化概述1.1.1傳統(tǒng)的數(shù)據(jù)分析1.數(shù)據(jù)分析基礎(chǔ)1.1數(shù)據(jù)分析概述第1章數(shù)據(jù)分析及可視化概述1.1.1傳統(tǒng)的數(shù)據(jù)分析2.數(shù)據(jù)分析基本步驟1.1數(shù)據(jù)分析概述第1章數(shù)據(jù)分析及可視化概述1.1.2大數(shù)據(jù)分析基礎(chǔ)1.大數(shù)據(jù)的含義PB是大數(shù)據(jù)的臨界點(diǎn)KB->MB->GB->TB->PB->EB->ZB->YB->NB->DB1s是大數(shù)據(jù)的臨界點(diǎn)微信、微博、物聯(lián)網(wǎng)結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)數(shù)據(jù)挖掘統(tǒng)計(jì)分析1.1數(shù)據(jù)分析概述第1章數(shù)據(jù)分析及可視化概述1.1.2大數(shù)據(jù)分析基礎(chǔ)2.大數(shù)據(jù)分析方法1.1數(shù)據(jù)分析概述第1章數(shù)據(jù)分析及可視化概述1.1.2大數(shù)據(jù)分析基礎(chǔ)2.大數(shù)據(jù)分析方法1.1數(shù)據(jù)分析概述第1章數(shù)據(jù)分析及可視化概述1.1.3數(shù)據(jù)分析可視化工具1.常用數(shù)據(jù)分析工具簡(jiǎn)介1.1數(shù)據(jù)分析概述第1章數(shù)據(jù)分析及可視化概述1.1.3數(shù)據(jù)分析可視化工具2.數(shù)據(jù)分析及可視化工具選擇（1）可視化圖表分析工具①

Echart②

Highcharts③

AntV1.1數(shù)據(jù)分析概述第1章數(shù)據(jù)分析及可視化概述1.1.3數(shù)據(jù)分析可視化工具2.數(shù)據(jù)分析及可視化工具選擇（2）商業(yè)智能分析工具

①Tableau

②FineBI

③PowerBI1.1數(shù)據(jù)分析概述第1章數(shù)據(jù)分析及可視化概述1.1.3數(shù)據(jù)分析可視化工具2.數(shù)據(jù)分析及可視化工具選擇（3）編程分析語(yǔ)言

如果僅僅是做一般數(shù)據(jù)分析和可視化，數(shù)據(jù)量不是特別大，而且要求系統(tǒng)免費(fèi)、開(kāi)源、跨平臺(tái)，那么首選的數(shù)據(jù)分析和可視化組合應(yīng)該是WPS+Python。

如果你的數(shù)據(jù)量不大，使用Window平臺(tái)的話，也可考慮用Excel+Python進(jìn)行數(shù)據(jù)分析和可視化，但Excel收費(fèi)。1.2數(shù)據(jù)的收集與管理第1章數(shù)據(jù)分析及可視化概述1.2.1數(shù)據(jù)集的構(gòu)成1.數(shù)據(jù)分析指標(biāo)的性質(zhì)（1）定性指標(biāo)（也稱計(jì)數(shù)數(shù)據(jù)）：度量事物進(jìn)行分類的結(jié)果，只能歸入某一類而不能用數(shù)值進(jìn)行測(cè)度的數(shù)據(jù)稱為定性數(shù)據(jù)。數(shù)據(jù)表現(xiàn)為類別，常用文字來(lái)表述，如地區(qū)、年份、性別、區(qū)域、產(chǎn)品分類等。地區(qū)：廣州,深圳,珠海,佛山,惠州,東莞,中山,江門,肇慶年份：2000,2001,2002,2003,2004,2005,......,2015,2016,20171.2數(shù)據(jù)的收集與管理第1章數(shù)據(jù)分析及可視化概述1.2.1數(shù)據(jù)集的構(gòu)成1.數(shù)據(jù)分析指標(biāo)的性質(zhì)（2）定量指標(biāo)（也稱計(jì)量數(shù)據(jù)）：度量事物的精確測(cè)度。結(jié)果表現(xiàn)為具體的數(shù)值，如國(guó)內(nèi)生產(chǎn)總值（GDP）、從業(yè)人員、人均國(guó)內(nèi)生產(chǎn)總值（人均GDP）、身高、體重、家庭收入、成績(jī)等人均GDP：2.58,3.33,2.81,2.02,1.39,1.36,1.51,1.28,0.74,21.32,12.92消費(fèi)總額：0.88,30.61,30.62,34.62,45.04,41.58,62.1,61.37,47.36,54.93,95.381.2數(shù)據(jù)的收集與管理第1章數(shù)據(jù)分析及可視化概述1.2.1數(shù)據(jù)集的構(gòu)成1.數(shù)據(jù)分析指標(biāo)的性質(zhì)2.分析指標(biāo)體系的構(gòu)建

指標(biāo)體系通常由一個(gè)或多個(gè)指標(biāo)組成。構(gòu)建多變量指標(biāo)體系應(yīng)遵循以下幾項(xiàng)原則：（1）系統(tǒng)全面性原則（2）穩(wěn)定可比性原則（3）簡(jiǎn)明科學(xué)性原則（4）靈活可操作性原則1.2數(shù)據(jù)的收集與管理第1章數(shù)據(jù)分析及可視化概述3.指標(biāo)體系的組成（1）指標(biāo)體系的構(gòu)建1.2數(shù)據(jù)的收集與管理第1章數(shù)據(jù)分析及可視化概述3.指標(biāo)體系的組成（2）指標(biāo)體系的組成形式1.2數(shù)據(jù)的收集與管理第1章數(shù)據(jù)分析及可視化概述1.2.2數(shù)據(jù)的收集與保存1.數(shù)據(jù)的收集范圍

本課程的數(shù)據(jù)收集范圍是廣東省21個(gè)地區(qū)（廣州,深圳,珠海,佛山,惠州,東莞,中山,江門,肇慶……），時(shí)間跨度為2000~2019年，共20年。由于數(shù)據(jù)具有一定的時(shí)滯性，故選擇2000年作為研究的起點(diǎn)。本文的數(shù)據(jù)主要從歷年的《廣東省統(tǒng)計(jì)年鑒》和廣東省各地區(qū)統(tǒng)計(jì)網(wǎng)站等獲取。1.2數(shù)據(jù)的收集與管理第1章數(shù)據(jù)分析及可視化概述1.2.2數(shù)據(jù)的收集與保存2.數(shù)據(jù)的構(gòu)成形式7.2.2自同步法數(shù)字鎖相法：比較接收碼元與本地碼元定時(shí)(位定時(shí))脈沖的相位，通過(guò)控制電路調(diào)整定時(shí)脈沖的相位，直至獲得精確同步7.2.2自同步法數(shù)字鎖相環(huán)輸出脈沖7.1載波同步方法7.2 位同步7.3 群同步7.4網(wǎng)同步7.5頻分復(fù)用7.6時(shí)分復(fù)用7.7 碼分復(fù)用7.8 多址技術(shù)第7章同步和多路復(fù)用7.3.1

起止同步法原理：收、發(fā)兩端時(shí)鐘相互獨(dú)立，以字符為單位，前有起始位，后有1-2位停止位優(yōu)點(diǎn)：1)位定時(shí)的頻率誤差只在一個(gè)字符范圍內(nèi)積累；2)對(duì)收發(fā)時(shí)鐘的頻率標(biāo)準(zhǔn)性要求不高；3)終止信號(hào)長(zhǎng)度可變?nèi)秉c(diǎn)：1)字符間的間隔不定；2)額外開(kāi)銷大；3)不適合傳長(zhǎng)位串，容易產(chǎn)生誤差積累應(yīng)用：常用于低速傳輸場(chǎng)合且效率較低7.3.2集中插入法原理：將群同步碼以集中的形式插入信息碼流要求同位碼組具有良好的自相關(guān)特性，便于與信息碼區(qū)別識(shí)別同步碼組的識(shí)別器盡量簡(jiǎn)單碼長(zhǎng)適當(dāng)，以保證傳輸效率應(yīng)用：要求快速建立同步或間斷傳輸信息且每次傳輸時(shí)間很短的場(chǎng)合7.3.2集中插入法巴克碼組N巴克碼1＋2＋＋或

＋－3＋＋－4＋＋＋－或＋＋－＋5＋＋＋－＋7＋＋＋――＋－11＋＋＋－－－＋－－＋－13＋＋＋＋＋－－＋＋－＋－＋注：“+”代表“+1”，“-”代表“-1”7.3.2集中插入法巴克碼的識(shí)別識(shí)別器識(shí)別器輸出波形7.4網(wǎng)同步定義：通信網(wǎng)中各站之間時(shí)鐘的同步單向通信或一對(duì)一通信

接收設(shè)備以發(fā)送設(shè)備的時(shí)鐘為準(zhǔn)，調(diào)整自己的時(shí)鐘，使之和發(fā)送設(shè)備的時(shí)鐘同步多站雙向通信同步網(wǎng)：全網(wǎng)各站具有統(tǒng)一的時(shí)間標(biāo)準(zhǔn)異步網(wǎng)：容許各站時(shí)鐘有誤差，但是通過(guò)調(diào)整碼元速率的辦法使全網(wǎng)能協(xié)調(diào)工作，也稱為準(zhǔn)同步網(wǎng)7.4網(wǎng)同步同步網(wǎng)：全網(wǎng)的同步可能是由接收設(shè)備負(fù)責(zé)解決，也可能需要收發(fā)雙方共同解決

7.4網(wǎng)同步發(fā)射機(jī)同步

開(kāi)環(huán)法：終端站根據(jù)所存儲(chǔ)的鏈路長(zhǎng)度等信息預(yù)先校正其發(fā)送時(shí)間。捕捉快，運(yùn)算量?。恍枰獠刻峁╂溌穮⒘繑?shù)據(jù)，靈活性差閉環(huán)法：中心站測(cè)量來(lái)自終端站的信號(hào)的同步準(zhǔn)確度，并將結(jié)果通過(guò)反向信道送給終端站，終端站根據(jù)此反饋信息適當(dāng)調(diào)整其時(shí)鐘。不需要外界提供鏈路參量數(shù)據(jù)，靈活性強(qiáng)；需要雙向鏈路，捕捉時(shí)間較長(zhǎng)，終端站運(yùn)算量大7.5頻分復(fù)用頻分復(fù)用(FDM)原理：將信號(hào)調(diào)制到不同載波頻率上，載波頻率彼此間隔足以使信號(hào)帶寬不會(huì)交迭，從而同時(shí)傳送多路信號(hào)

7.5頻分復(fù)用頻分復(fù)用系統(tǒng)的發(fā)送和接收

發(fā)送接收7.5頻分復(fù)用多路載波電話系統(tǒng)

頻譜結(jié)構(gòu)接收端7.5頻分復(fù)用頻分復(fù)用信號(hào)正?；謴?fù)的條件

載波頻率之間頻率差