《信息素養(yǎng)概論（第三版）》課件第8章 大數(shù)據(jù)技術(shù)與應(yīng)用

《信息技術(shù)與人工智能》第八章大數(shù)據(jù)技術(shù)與應(yīng)用第8章大數(shù)據(jù)技術(shù)與應(yīng)用目錄大數(shù)據(jù)概論1大數(shù)據(jù)采集2大數(shù)據(jù)采集實(shí)訓(xùn)3目錄大數(shù)據(jù)概論1大數(shù)據(jù)采集2大數(shù)據(jù)采集實(shí)訓(xùn)3第8章大數(shù)據(jù)技術(shù)與應(yīng)用大數(shù)據(jù)的特點(diǎn)有哪些？目前大數(shù)據(jù)的應(yīng)用場景有哪些？問題引入大數(shù)據(jù)是“海量數(shù)據(jù)”，是指無法在可承受的時間范圍內(nèi)用常規(guī)軟件工具進(jìn)行捕捉、管理和處理的數(shù)據(jù)集合，是需要采用新處理模式才能獲得更多智能的、深入的、有價值的信息，以期得到更強(qiáng)的決策力、洞察力。8.1大數(shù)據(jù)概論8.1.1大數(shù)據(jù)的特點(diǎn)Volume（大量）Variety（多樣）Value（價值）Velocity（高速）Veracity（真實(shí)性）大數(shù)據(jù)是以容量大、類型多、存儲速度快、應(yīng)用價值高為特征的數(shù)據(jù)集合。

任務(wù)8.1大數(shù)據(jù)概論大數(shù)據(jù)，樣本=全部數(shù)據(jù)。不是精確性，而是復(fù)雜性?！皵?shù)據(jù)之和的價值遠(yuǎn)遠(yuǎn)大于各數(shù)據(jù)價值的和”（GOOGLE的大數(shù)據(jù)翻譯器）大數(shù)據(jù)研究，重關(guān)聯(lián)大于重因果，預(yù)測是核心（亞馬遜圖書推薦？GOOGLE與流感預(yù)測）大數(shù)據(jù)的戰(zhàn)略意義是實(shí)現(xiàn)數(shù)據(jù)的增值，數(shù)據(jù)就像一個神奇的鉆石礦（阿里、騰訊與銀行）8.1.2大數(shù)據(jù)的價值與應(yīng)用（1）打造精準(zhǔn)治理、多方協(xié)作的社會治理新模式。（2）建立運(yùn)行平穩(wěn)、安全高效的經(jīng)濟(jì)運(yùn)行新機(jī)制。大數(shù)據(jù)的戰(zhàn)略意義是實(shí)現(xiàn)數(shù)據(jù)的增值，數(shù)據(jù)就像一個神奇的鉆石礦（阿里、騰訊與銀行）（3）構(gòu)建以人為本、惠及全民的民生服務(wù)新體系（4）開啟大眾創(chuàng)業(yè)、萬眾創(chuàng)新的創(chuàng)新驅(qū)動新格局。（5）培育高端智能、新業(yè)繁榮的產(chǎn)業(yè)發(fā)展新生態(tài)。8.1.3大數(shù)據(jù)發(fā)展應(yīng)用的目標(biāo)目錄大數(shù)據(jù)概論1大數(shù)據(jù)采集2大數(shù)據(jù)采集實(shí)訓(xùn)3第8章大數(shù)據(jù)技術(shù)與應(yīng)用什么是大數(shù)據(jù)采集技術(shù)？八爪魚采集工具的應(yīng)用模式有哪些？問題引入什么是大數(shù)據(jù)采集技術(shù)？大數(shù)據(jù)采集技術(shù)就是對數(shù)據(jù)進(jìn)行ETL操作，通過對數(shù)據(jù)進(jìn)行提取、轉(zhuǎn)換、加載，最終挖掘數(shù)據(jù)的潛在價值。然后提供給用戶解決方案或者決策參考。

8.2大數(shù)據(jù)采集八爪魚采集器是深圳視界信息技術(shù)有限公司開發(fā)，它具有以下優(yōu)勢：（1）1分鐘獲得數(shù)據(jù)（2）1千萬數(shù)據(jù)采集（3）全場景解決方案（4）數(shù)據(jù)處理能力8.2.1數(shù)據(jù)采集器介紹8.2.1數(shù)據(jù)采集器1是什么？2怎么用？3簡易采集模式4練習(xí)題一、功能散亂數(shù)據(jù)數(shù)據(jù)庫ExcelBI平臺八爪魚結(jié)構(gòu)化數(shù)據(jù)是什么？二、優(yōu)勢電商數(shù)據(jù)例如：/list.html?cat=9987,653,655適用場景：競品分析銷售分析用戶評論分析是什么？二、優(yōu)勢復(fù)制粘貼：工作效率低爬蟲編寫：學(xué)習(xí)成本高是什么？二、優(yōu)勢電商數(shù)據(jù)適用場景：競品分析銷售分析用戶評論分析1.輸入網(wǎng)址2.保存并啟動操作演示：數(shù)據(jù)采集是什么？目錄1是什么？2怎么用？3簡易采集模式4練習(xí)題采集模式

智能采集：智能識別，無需配置簡易采集：內(nèi)置模板，即點(diǎn)即用向?qū)Ｊ剑嘿N心指引，規(guī)則配置自定義采集：自由配置，隨心采集怎么用？目錄1是什么？2怎么用？3簡易采集模式4練習(xí)題

操作演示：簡易采集模式簡易采集模式目錄1是什么？2怎么用？3簡易采集模式4練習(xí)題選擇本地生活、電子商務(wù)、媒體閱讀三個板塊各一個簡易采集模板進(jìn)行數(shù)據(jù)采集并導(dǎo)出結(jié)果學(xué)生練習(xí):1上機(jī)練習(xí)1-使用模板進(jìn)行簡易采集自定義采集模式1自定義采集模式演示2如何復(fù)制3如何粘貼4練習(xí)題操作演示：自定義采集模式自定義采集模式演示目錄1自定義采集模式演示2如何復(fù)制3如何粘貼4練習(xí)題一、案例例如：/omn/20180607/20180607A05ZM3.html/omn/20180606/20180606A1UE30.html/omn/20180607/20180607A07333.html適用場景：輿情監(jiān)控品牌分析如何復(fù)制操作演示：自定義采集模式如何復(fù)制操作演示：自定義采集模式如何復(fù)制目錄1自定義采集模式演示2如何復(fù)制3如何粘貼4練習(xí)題

如何粘貼/6946599.html/6773561.h