大數(shù)據(jù)時代下的數(shù)據(jù)挖掘簡易PPT學習教案

1、會計學1大數(shù)據(jù)時代下的數(shù)據(jù)挖掘簡易大數(shù)據(jù)時代下的數(shù)據(jù)挖掘簡易一場生活、工作與思維的大變革第1頁/共33頁一場生活、工作與思維的大變革第2頁/共33頁第3頁/共33頁FarecastBing第4頁/共33頁大數(shù)據(jù)大數(shù)據(jù)的特性的特性第5頁/共33頁大數(shù)據(jù)時代的思維變革大數(shù)據(jù)時代的商業(yè)變革大數(shù)據(jù)時代的管理變革第6頁/共33頁第7頁/共33頁“更多”不是隨機樣本，而是全體數(shù)據(jù) 當數(shù)據(jù)處理技術(shù)已經(jīng)發(fā)生翻天覆地的變化時，在大數(shù)據(jù)時代進行抽樣分析就像在汽車時代騎馬一樣。一切都改變了，我們需要的是所有的數(shù)據(jù)，“樣本總體”。讓數(shù)據(jù)“發(fā)聲”小數(shù)據(jù)時代的隨機采樣，最少的數(shù)據(jù)獲得最多的信息全數(shù)據(jù)模式，樣本總體第8頁/

2、共33頁“更雜”不是精確性，而是混雜性 執(zhí)迷于精確性是信息缺乏時代和模擬時代的產(chǎn)物。只有5%的數(shù)據(jù)是有框架且能適用于傳統(tǒng)數(shù)據(jù)庫的。如果不能接受混亂，剩下95%的非框架數(shù)據(jù)都無法被利用，只有接受不精確性，我們才能打開一扇從未涉足的世界的窗戶。允許不精確大數(shù)據(jù)的簡單算法比小數(shù)據(jù)的復(fù)雜算法更有效紛繁的數(shù)據(jù)越多越好混雜性，不是竭力避免，而是標準途徑新的數(shù)據(jù)庫設(shè)計的誕生第9頁/共33頁“更好”不是因果關(guān)系，而是相關(guān)關(guān)系 知道“是什么”就夠了，沒必要知道“為什么”。在大數(shù)據(jù)時代，我們不必非得知道現(xiàn)象背后的原因，而是要讓數(shù)據(jù)自己“發(fā)聲”。關(guān)聯(lián)物，預(yù)測的關(guān)鍵“是什么”，而不是“為什么”改變，從操作方式開始大數(shù)

3、據(jù)，改變?nèi)祟愄剿魇澜绲姆椒ǖ?0頁/共33頁第11頁/共33頁“數(shù)據(jù)化”一切皆可“量化” 大數(shù)據(jù)發(fā)展的核心動力來源于人類測量、記錄和分析世界的渴望。信息技術(shù)變革隨處可見，但是如今信息技術(shù)變革的重點在“T”（技術(shù)）上，而不是在“I”(信息）上?，F(xiàn)在，我們是時候把聚光燈打向“I”，開始關(guān)注信息本身了。數(shù)據(jù)，從最不可能的地方提取出來數(shù)據(jù)化，不是數(shù)字化量化一切，數(shù)據(jù)化的核心當文字變成數(shù)據(jù)當方位變成數(shù)據(jù)當溝通成為數(shù)據(jù)一切事物的數(shù)據(jù)化第12頁/共33頁“價值”“取之不盡，用之不竭”的數(shù)據(jù)創(chuàng)新 數(shù)據(jù)就像一個神奇的鉆石礦，當它的首要價值被發(fā)掘后仍能不斷給予。它的真實價值就像漂浮在海洋中的冰山，第一眼只能看到冰

4、山的一角，而絕大部分都隱藏在表面之下。數(shù)據(jù)創(chuàng)新1：數(shù)據(jù)的再利用數(shù)據(jù)創(chuàng)新2：重組數(shù)據(jù)數(shù)據(jù)創(chuàng)新3：可擴展數(shù)據(jù)數(shù)據(jù)創(chuàng)新4：數(shù)據(jù)的折舊值數(shù)據(jù)創(chuàng)新5：數(shù)據(jù)廢氣數(shù)據(jù)創(chuàng)新6：開放數(shù)據(jù)給數(shù)據(jù)估值第13頁/共33頁“角色定位”數(shù)據(jù)、技術(shù)與思維的三足鼎立 微軟以億美元的價格購買了大數(shù)據(jù)公司Farecast，而兩年后谷歌則以7億美元的價格購買了給Farecast提供數(shù)據(jù)的ITA Software公司。如今，我們正處在大數(shù)據(jù)時代的早期，思維和技術(shù)是最有價值的，但是最終大部分價值還是必須從數(shù)據(jù)本身來挖掘。大數(shù)據(jù)價值的3大構(gòu)成大數(shù)據(jù)掌控公司大數(shù)據(jù)技術(shù)公司大數(shù)據(jù)思維公司和個人全新的數(shù)據(jù)中間商專家的消亡與數(shù)據(jù)科學家的崛起大數(shù)

5、據(jù)，決定企業(yè)的競爭力第14頁/共33頁第15頁/共33頁“風險”讓數(shù)據(jù)主宰一切的隱憂 我們時刻都暴露在“第三只眼”之下：亞馬遜監(jiān)視著我們的購物習慣，谷歌監(jiān)視著我們的網(wǎng)頁瀏覽習慣，而微博似乎什么都知道，不僅竊聽到了我們心中的“TA”，還有我們的社交關(guān)系網(wǎng)。無處不在的“第三只眼”我們的隱私被二次利用了預(yù)測與懲罰，不是因為“所做”，而是因為“將做”數(shù)據(jù)獨裁掙脫大數(shù)據(jù)的困境第16頁/共33頁“掌控”責任與自由并舉的信息管理 當世界開始邁向大數(shù)據(jù)時代時，社會也將經(jīng)歷類似的地殼運動。在改變?nèi)祟惢镜纳钆c思考方式的同時，大數(shù)據(jù)早已在推動人類信息管理準則上重新定位。然而，不同于印刷革命，我們沒有幾個世紀的時

6、間去適應(yīng)，我們也許只有幾年時間。管理變革1：個人隱私保護，從個人許可到讓數(shù)據(jù)使用者承擔責任管理變革2：個人動因VS預(yù)測分析管理變革3：擊碎黑盒子，大數(shù)據(jù)程序員的崛起管理變革4：反數(shù)據(jù)壟斷大亨第17頁/共33頁正在發(fā)生的未來大數(shù)據(jù)并不是一個充斥著算法和機器的冰冷世界，人類的作用依然無法被完全替代。大數(shù)據(jù)為我們提供的不是最終答案，只是參考答案，幫助是暫時的，而更好的方法和答案還在不久的未來。第18頁/共33頁大數(shù)據(jù)時代下的數(shù)據(jù)挖掘 第19頁/共33頁數(shù)據(jù)挖掘簡介數(shù)據(jù)挖掘簡介1數(shù)據(jù)挖掘分類數(shù)據(jù)挖掘分類2成功案例成功案例3總結(jié)與展望總結(jié)與展望4第20頁/共33頁第21頁/共33頁第22頁/共33頁第23頁/共33頁數(shù)據(jù)倉庫數(shù)據(jù)挖掘數(shù)據(jù)庫原始文件原始文件處理原始文件處理紙張紙張界面、查詢界面、查詢硬盤硬盤聯(lián)機分析處理聯(lián)機分析處理各個數(shù)據(jù)庫各個數(shù)據(jù)庫各種媒體各種媒體20世紀60年代前20世紀60年代20世紀80年代現(xiàn)在現(xiàn)在第24頁/共33頁統(tǒng)計學數(shù)據(jù)庫技術(shù)信息科學其他學科機器學習第25頁/共33頁結(jié)果解釋和評估數(shù)據(jù)挖掘算法執(zhí)行數(shù)據(jù)收集數(shù)據(jù)收集和與處理和與處理問題定義第26頁/共33頁