《Python數(shù)據(jù)分析基礎(chǔ)與案例實(shí)戰(zhàn)》第3章 了解數(shù)據(jù)的常見(jiàn)類(lèi)型

了解數(shù)據(jù)的常見(jiàn)類(lèi)型1半結(jié)構(gòu)化數(shù)據(jù)目錄結(jié)構(gòu)化數(shù)據(jù)2非結(jié)構(gòu)化數(shù)據(jù)3數(shù)據(jù)的類(lèi)型多種多樣，按照數(shù)據(jù)的結(jié)構(gòu)可分為結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)。結(jié)構(gòu)化數(shù)據(jù)的表現(xiàn)形式為二維的列表結(jié)構(gòu)，嚴(yán)格地遵循數(shù)據(jù)格式與長(zhǎng)度規(guī)范，主要通過(guò)關(guān)系型數(shù)據(jù)庫(kù)進(jìn)行存儲(chǔ)和管理。結(jié)構(gòu)化數(shù)據(jù)由行和列構(gòu)成，通常每一行對(duì)應(yīng)一條記錄，每一列對(duì)應(yīng)一個(gè)屬性，同一個(gè)表中的數(shù)據(jù)具有相同的屬性集，即同一張表中所有記錄的列的個(gè)數(shù)是一致的。一個(gè)結(jié)構(gòu)化數(shù)據(jù)的例子，如下表所示。結(jié)構(gòu)化數(shù)字IDSexbodyTypecreatDate1男020160309表中展示了一條結(jié)構(gòu)化的汽車(chē)交易記錄，ID列表示該交易的編號(hào)為1，通常為數(shù)值型或字符型。Sex列表示該客戶(hù)的性別為男性，通常為字符型；bodyType列的0表示該車(chē)的車(chē)型是豪華轎車(chē)，為數(shù)值型。creatDate列表示該客戶(hù)的消費(fèi)時(shí)間為2016年3月9日，通常為字符型或時(shí)間型。結(jié)構(gòu)化數(shù)據(jù)主要應(yīng)用于各類(lèi)業(yè)務(wù)系統(tǒng)的關(guān)系型數(shù)據(jù)庫(kù)中，其存儲(chǔ)需求包括高速存儲(chǔ)應(yīng)用需求、數(shù)據(jù)備份需求、數(shù)據(jù)共享需求以及數(shù)據(jù)容災(zāi)需求等。結(jié)構(gòu)化數(shù)字1半結(jié)構(gòu)化數(shù)據(jù)目錄結(jié)構(gòu)化數(shù)字2非結(jié)構(gòu)化數(shù)據(jù)3半結(jié)構(gòu)化數(shù)據(jù)是結(jié)構(gòu)化數(shù)據(jù)的一種特殊形式，是以樹(shù)或圖的數(shù)據(jù)結(jié)構(gòu)存儲(chǔ)的數(shù)據(jù)，其結(jié)構(gòu)并不符合關(guān)系型數(shù)據(jù)庫(kù)或其他數(shù)據(jù)表的形式關(guān)聯(lián)起來(lái)的數(shù)據(jù)模型結(jié)構(gòu)。半結(jié)構(gòu)化數(shù)據(jù)包含相關(guān)標(biāo)記，用來(lái)分隔語(yǔ)義元素以及對(duì)記錄和字段進(jìn)行分層，這種結(jié)構(gòu)也被稱(chēng)為自描述的結(jié)構(gòu)。半結(jié)構(gòu)化數(shù)據(jù)的數(shù)據(jù)庫(kù)是節(jié)點(diǎn)的集合，每個(gè)節(jié)點(diǎn)都是一個(gè)葉子節(jié)點(diǎn)或一個(gè)內(nèi)部節(jié)點(diǎn)。葉子節(jié)點(diǎn)與數(shù)據(jù)相關(guān)，數(shù)據(jù)的類(lèi)型可以是任意原子類(lèi)型，如數(shù)字和字符串。每個(gè)內(nèi)部節(jié)點(diǎn)至少有一條外向的弧。每條弧都有一個(gè)標(biāo)簽，該標(biāo)簽指明弧開(kāi)始處的節(jié)點(diǎn)與弧末端的節(jié)點(diǎn)之間的關(guān)系。半結(jié)構(gòu)化數(shù)據(jù)一個(gè)名為根的內(nèi)部節(jié)點(diǎn)沒(méi)有進(jìn)入的弧，它代表整個(gè)數(shù)據(jù)庫(kù)。每個(gè)節(jié)點(diǎn)都從根可達(dá)整個(gè)圖的結(jié)構(gòu)未必是一棵樹(shù)。常見(jiàn)的半結(jié)構(gòu)化數(shù)據(jù)格式有XML和JSON。一個(gè)XML文件中的記錄，可以看到兩條記錄的屬性個(gè)數(shù)是不一樣的。第一條記錄有name、age和gender三個(gè)屬性，而第二條記錄只有name和gender兩個(gè)屬性。半結(jié)構(gòu)化文件記錄的屬性個(gè)數(shù)是可以變動(dòng)的，這點(diǎn)與結(jié)構(gòu)化數(shù)據(jù)要求數(shù)據(jù)必須具有相同的屬性集不同，使得半結(jié)構(gòu)化數(shù)據(jù)具有更好的靈活性。半結(jié)構(gòu)化數(shù)據(jù)半結(jié)構(gòu)化數(shù)據(jù)包括郵件、HTML、報(bào)表、資源庫(kù)等，常見(jiàn)的應(yīng)用場(chǎng)景有郵件系統(tǒng)、WEB集群、教學(xué)資源庫(kù)和檔案系統(tǒng)等。這些應(yīng)用的存儲(chǔ)要求主要有數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)備份、數(shù)據(jù)共享以及數(shù)據(jù)歸檔等。半結(jié)構(gòu)化數(shù)據(jù)1半結(jié)構(gòu)化數(shù)據(jù)目錄結(jié)構(gòu)化數(shù)字2非結(jié)構(gòu)化數(shù)據(jù)3非結(jié)構(gòu)化數(shù)據(jù)是數(shù)據(jù)結(jié)構(gòu)不規(guī)則或不完整，沒(méi)有預(yù)定義的數(shù)據(jù)模型，不方便用數(shù)據(jù)庫(kù)二維邏輯表來(lái)表現(xiàn)的數(shù)據(jù)。常見(jiàn)的非結(jié)構(gòu)化數(shù)據(jù)包括辦公文檔、文本、圖像、音頻、視頻等。非結(jié)構(gòu)化數(shù)據(jù)的格式非常多樣，標(biāo)準(zhǔn)也具有多樣性，在技術(shù)上非結(jié)構(gòu)化信息比結(jié)構(gòu)化信息更難標(biāo)準(zhǔn)化和理解。其存儲(chǔ)、檢索、發(fā)布以及利用需要更加智能化的IT技術(shù)。常見(jiàn)具體應(yīng)用有醫(yī)療影像系統(tǒng)、教育視頻點(diǎn)播、視頻監(jiān)控、地理信息系統(tǒng)、設(shè)計(jì)院、文件服務(wù)器（PDM/FTP）、媒體資源管理等。非結(jié)構(gòu)化數(shù)據(jù)非結(jié)構(gòu)化數(shù)據(jù)常見(jiàn)具體應(yīng)用有。醫(yī)療