大數(shù)據(jù)融合及應(yīng)用經(jīng)典

大數(shù)據(jù)融合及應(yīng)用演講人：李月月第四組人員：潘正兵、馮衛(wèi)嬌、閔青焱、劉雙龍李月月、白雪、劉超目錄

大數(shù)據(jù)應(yīng)用案例1

大數(shù)據(jù)關(guān)鍵技術(shù)42

大數(shù)據(jù)帶來的時代變革56

大數(shù)據(jù)風(fēng)險

大數(shù)據(jù)在“工業(yè)4.0”中的應(yīng)用

認(rèn)識大數(shù)據(jù)37

結(jié)語目錄

大數(shù)據(jù)應(yīng)用案例1

大數(shù)據(jù)關(guān)鍵技術(shù)42

大數(shù)據(jù)帶來的時代變革56

大數(shù)據(jù)風(fēng)險

大數(shù)據(jù)在“工業(yè)4.0”中的應(yīng)用

認(rèn)識大數(shù)據(jù)37

結(jié)語一個父親有一個高中的女兒，接到了一個促銷的廣告，是關(guān)于嬰兒的廣告，這個父親勃然大怒，說商家無良，為了促銷向我的高中生女兒促銷嬰兒產(chǎn)品。但是過了一兩個星期，他感到非常內(nèi)疚，因?yàn)樗麑τ谏碳业倪@種態(tài)度是錯誤的，原因是他的高中女兒確實(shí)懷孕了。為什么商家會發(fā)現(xiàn)這個問題呢？商家實(shí)際上就是通過在商場的一些數(shù)據(jù)挖掘和對比，發(fā)現(xiàn)這個女孩子經(jīng)常在商場里購買過類似的一些商品，在有一些類似的貨架面前駐足觀看，而且這個頻度很高，商家對于后臺大數(shù)據(jù)的分析，篩選出潛在的客戶，發(fā)出商業(yè)廣告。案例1“無良”商家案例2農(nóng)夫山泉利用大數(shù)據(jù)賣礦泉水案例3阿迪達(dá)斯的“黃金羅盤”

案例4淘寶網(wǎng)掘金大數(shù)據(jù)金融市場

淘寶推出信用貸款服務(wù)，不依賴擔(dān)保、抵押，僅基于海量的企業(yè)經(jīng)營數(shù)據(jù)，通過大數(shù)據(jù)分析，分析出企業(yè)經(jīng)營狀況和信譽(yù)度，作出決策，這種金融模式獲得了巨大的成功！大數(shù)據(jù)幫助提高制造績效的3個主要方面分別是：更好的預(yù)測產(chǎn)品需求并調(diào)整產(chǎn)能（46%），跨多重指標(biāo)理解工廠績效（45%）以及更快地為消費(fèi)者提供服務(wù)與支持（39%）。上述數(shù)據(jù)是根據(jù)“LNS研究與MESA國際”的近期調(diào)查得出的。案例5麥肯錫：如何利用大數(shù)據(jù)改進(jìn)制造業(yè)

案例5喬布斯的癌癥治療

蘋果公司的傳奇總裁史蒂夫-喬布斯在與癌癥斗爭的過程中采用了不同的方式，成為世界上第一個對自身所有DNA和腫瘤DNA進(jìn)行排序的人。喬布斯生病后，治療團(tuán)隊(duì)也調(diào)用了大數(shù)據(jù)，對喬布斯的個人情況匹配海量的診療數(shù)據(jù)，得到一個更好的治療方案，因此他的生命得以延長了好幾年。喬布斯開玩笑說：“我要么是第一個通過這種方式戰(zhàn)勝癌癥的人，要么就是最后一個因?yàn)檫@種方式死于癌癥的人。趣多多在愚人節(jié)的這次營銷活動，創(chuàng)造了6億多次頁面瀏覽并影響到近1,500萬獨(dú)立用戶，品牌被提及的次數(shù)增長了270%?？梢哉f這是一次成功的品牌營銷活動，廣泛的發(fā)聲，讓趣多多的用戶關(guān)注度得到了一次巨大的提升，詼諧幽默的品牌基因更加深入的進(jìn)入到用戶的意識層面。案例6依靠大數(shù)據(jù)玩轉(zhuǎn)愚人節(jié)營銷目錄錄

大數(shù)據(jù)應(yīng)用案例1

大數(shù)據(jù)關(guān)鍵技術(shù)42

大數(shù)據(jù)帶來的時代變革56

大數(shù)據(jù)風(fēng)險

大數(shù)據(jù)在“工業(yè)4.0”中的應(yīng)用

認(rèn)識大數(shù)據(jù)37

結(jié)語大數(shù)數(shù)據(jù)據(jù)帶帶來來的的時時代代變變革革———一場場生生活活、、工工作作與與思思維維的的大大變變革革??！大數(shù)數(shù)據(jù)據(jù)開開啟啟了了一一次次重重大大的的時時代代轉(zhuǎn)轉(zhuǎn)型型。。就就想想望望遠(yuǎn)遠(yuǎn)鏡鏡讓讓我我們們能能夠夠感感受受宇宇宙宙，，顯顯微微鏡鏡讓讓我我們們能能夠夠觀觀測測微微生生物物一一樣樣，，大大數(shù)數(shù)據(jù)據(jù)正正在在改改變變我我們們的的生生活活以以及及理理解解世世界界的的方方式式，，成成為為新新發(fā)發(fā)明明和和新新服服務(wù)務(wù)的的源源泉泉，，而而更更多多的的改改變變正正蓄蓄勢勢待待發(fā)發(fā)………大數(shù)數(shù)據(jù)據(jù)，，變變革革公共共衛(wèi)衛(wèi)生生大數(shù)數(shù)據(jù)據(jù)，，變變革革商業(yè)業(yè)大數(shù)數(shù)據(jù)據(jù)，，變變革革思維維大數(shù)數(shù)據(jù)據(jù)，，開開啟啟重重大大的的時代代轉(zhuǎn)轉(zhuǎn)型型預(yù)測測，，大大數(shù)數(shù)據(jù)據(jù)的的核心心大數(shù)數(shù)據(jù)據(jù)，，大挑挑戰(zhàn)戰(zhàn)一、、大大數(shù)數(shù)據(jù)據(jù)時時代代的的思思維維變變革革“更更多多””———不是是隨隨機(jī)機(jī)樣樣本本，，而而是是全全體體數(shù)數(shù)據(jù)據(jù)??！當(dāng)數(shù)數(shù)據(jù)據(jù)處處理理技技術(shù)術(shù)已已經(jīng)經(jīng)發(fā)發(fā)生生翻翻天天覆覆地地的的變變化化時時，，在在大大數(shù)數(shù)據(jù)據(jù)時時代代進(jìn)進(jìn)行行抽抽樣樣分分析析就就像像在在汽汽車車時時代代騎騎馬馬一一樣樣。。一一切切都都改改變變了了，，我我們們需需要要的的是是所所有有的的數(shù)數(shù)據(jù)據(jù)，，““樣樣本本＝＝總總體體””。。讓數(shù)數(shù)據(jù)據(jù)“發(fā)發(fā)聲聲””小數(shù)數(shù)據(jù)據(jù)時時代代的的隨隨機(jī)機(jī)采采樣樣，，最最少少的的數(shù)數(shù)據(jù)據(jù)獲獲得得最最多多的的信信息息全數(shù)數(shù)據(jù)據(jù)模模式式，樣樣本本＝＝總總體體執(zhí)迷迷于于精精確確性性是是信信息息缺缺乏乏時時代代和和模模擬擬時時代代的的產(chǎn)產(chǎn)物物。。只只有有5%的數(shù)數(shù)據(jù)據(jù)是是有有框框架架且且能能適適用用于于傳傳統(tǒng)統(tǒng)數(shù)數(shù)據(jù)據(jù)庫庫的的。。如如果果不不能能接接受受混混亂亂，，剩剩下下95%的非非框框架架數(shù)數(shù)據(jù)據(jù)都都無無法法被被利利用用，，只只有有接接受受不不精精確確性性，，我我們們才才能能打打開開一一扇扇從從未未涉涉足足的的世世界界的的窗窗戶戶。。允許許不不精精確確大數(shù)數(shù)據(jù)據(jù)的的簡簡單單算算法法比比小小數(shù)數(shù)據(jù)據(jù)的的復(fù)復(fù)雜雜算算法法更更有有效效紛繁的數(shù)數(shù)據(jù)越多多越好混雜性，，不是竭竭力避免免，而是是標(biāo)準(zhǔn)途途徑新的數(shù)據(jù)據(jù)庫設(shè)計(jì)計(jì)的誕生生“更雜””——不是精確確性，而而是混雜雜性！知道“是是什么””就夠了了，沒必必要知道道“為什什么”。。在大數(shù)數(shù)據(jù)時代代，我們們不必非非得知道道現(xiàn)象背背后的原原因，而而是要讓讓數(shù)據(jù)自自己“發(fā)發(fā)聲”。。關(guān)聯(lián)物，，預(yù)測的的關(guān)鍵“是什么么”，而而不是““為什么么”改變，從從操作方方式開始始大數(shù)據(jù)，，改變?nèi)巳祟愄剿魉魇澜绲牡姆椒ā案谩薄薄皇且蚬P(guān)系，，而是相相關(guān)關(guān)系系二、大數(shù)數(shù)據(jù)時代代的商業(yè)業(yè)變革大數(shù)據(jù)發(fā)發(fā)展的核核心動力力來源于于人類測測量、記記錄和分分析世界界的渴望望。信息息技術(shù)變變革隨處處可見，，但是如如今信息息技術(shù)變變革的重重點(diǎn)在““T”（技術(shù)術(shù)）上，，而不是是在“I”(信息）上上?，F(xiàn)在在，我們們是時候候把聚光光燈打向向“I”，開始始關(guān)注信信息本身身了。數(shù)據(jù)，從從最不可可能的地地方提取取出來數(shù)據(jù)化，，不是數(shù)數(shù)字化量化一切切，數(shù)據(jù)據(jù)化的核核心當(dāng)文字變變成數(shù)據(jù)據(jù)當(dāng)方位變變成數(shù)據(jù)據(jù)當(dāng)溝通成成為數(shù)據(jù)據(jù)一切事物物的數(shù)據(jù)據(jù)化“數(shù)據(jù)化化”——一切皆可可“量化化”數(shù)據(jù)就像像一個神神奇的鉆鉆石礦，，當(dāng)它的的首要價價值被發(fā)發(fā)掘后仍仍能不斷斷給予。。它的真真實(shí)價值值就像漂漂浮在海海洋中的的冰山，，第一眼眼只能看看到冰山山的一角角，而絕絕大部分分都隱藏藏在表面面之下。。數(shù)據(jù)創(chuàng)新新1：數(shù)據(jù)的的再利用用數(shù)據(jù)創(chuàng)新新2：重組數(shù)數(shù)據(jù)數(shù)據(jù)創(chuàng)新新3：可擴(kuò)展展數(shù)據(jù)數(shù)據(jù)創(chuàng)新新4：數(shù)據(jù)的的折舊值值數(shù)據(jù)創(chuàng)新新5：數(shù)據(jù)廢廢氣數(shù)據(jù)創(chuàng)新新6：開放數(shù)數(shù)據(jù)給數(shù)據(jù)估估值“價值””——“取之不不盡，用用之不竭竭”的數(shù)數(shù)據(jù)創(chuàng)新新微軟以1.1億美元的的價格購購買了大大數(shù)據(jù)公公司Farecast，而兩年年后谷歌歌則以7億美元的的價格購購買了給給Farecast提供數(shù)據(jù)據(jù)的ITASoftware公司。如如今，我我們正處處在大數(shù)數(shù)據(jù)時代代的早期期，思維維和技術(shù)術(shù)是最有有價值的的，但是是最終大大部分價價值還是是必須從從數(shù)據(jù)本本身來挖挖掘?！敖巧ǘㄎ弧薄獢?shù)據(jù)、技技術(shù)與思思維的三三足鼎立立三、大數(shù)數(shù)據(jù)時代代的管理理變革我們時刻刻都暴露露在“第第三只眼眼”之下下：亞馬馬遜監(jiān)視視著我們們的購物物習(xí)慣，，谷歌監(jiān)監(jiān)視著我我們的網(wǎng)網(wǎng)頁瀏覽覽習(xí)慣，，而微博博似乎什什么都知知道，不不僅竊聽聽到了我我們心中中的“TA”，還有有我們的的社交關(guān)關(guān)系網(wǎng)。。無處不在在的“第第三只眼眼”我們的隱隱私被二二次利用用了預(yù)測與懲懲罰，不不是因?yàn)闉椤八鲎觥?，而而是因?yàn)闉椤皩⒆鲎觥睌?shù)據(jù)獨(dú)裁裁掙脫大數(shù)數(shù)據(jù)的困困境“風(fēng)險””——讓數(shù)據(jù)主主宰一切切的隱憂憂當(dāng)世界開開始邁向向大數(shù)據(jù)據(jù)時代時時，社會會也將經(jīng)經(jīng)歷類似似的地殼殼運(yùn)動。。在改變變?nèi)祟惢镜纳钆c思思考方式式的同時時，大數(shù)數(shù)據(jù)早已已在推動動人類信信息管理理準(zhǔn)則上上重新定定位。然然而，不不同于印印刷革命命，我們們沒有幾幾個世紀(jì)紀(jì)的時間間去適應(yīng)應(yīng)，我們們也許只只有幾年年時間。。管理變革革1：個人隱隱私保護(hù)護(hù)，從個個人許可可到讓數(shù)數(shù)據(jù)使用用者承擔(dān)擔(dān)責(zé)任管理變革革2：個人動動因VS預(yù)測分析析管理變革革3：擊碎黑黑盒子，，大數(shù)據(jù)據(jù)程序員員的崛起起管理變革革4：反數(shù)據(jù)據(jù)壟斷大大亨“掌控””——責(zé)任與自自由并舉舉的信息息管理正在發(fā)生生的未來來大數(shù)據(jù)并并不是一一個充斥斥著算法法和機(jī)器器的冰冷冷世界，，人類的的作用依依然無法法被完全全替代。。大數(shù)據(jù)據(jù)為我們們提供的的不是最最終答案案，只是是參考答答案，幫幫助是暫暫時的，，而更好好的方法法和答案案還在不不久的未未來?。。∧夸?/p>

大數(shù)據(jù)應(yīng)用案例1

大數(shù)據(jù)關(guān)鍵技術(shù)42

大數(shù)據(jù)帶來的時代變革56

大數(shù)據(jù)風(fēng)險

大數(shù)據(jù)在“工業(yè)4.0”中的應(yīng)用

認(rèn)識大數(shù)據(jù)37

結(jié)語最早提出出“大數(shù)數(shù)據(jù)”時時代到來來的是全全球知名名咨詢公公司麥肯肯錫。麥麥肯錫稱稱：數(shù)據(jù)據(jù)，已經(jīng)經(jīng)滲透到到當(dāng)今每每領(lǐng)域一一個行業(yè)業(yè)和業(yè)務(wù)務(wù)職能領(lǐng)領(lǐng)域，成成為重要要的生產(chǎn)產(chǎn)因素??！“大量化化(Volume)、多樣化化(Variety)、快速化化(Velocity)、價值密密度低（（Value）”就是是“大數(shù)數(shù)據(jù)”的的顯著特特征，或或者說，，只有具具備這些些特點(diǎn)的的數(shù)據(jù)，，才是大大數(shù)據(jù)。。VolumeVelocityValueVariety大數(shù)據(jù)的的4V特征數(shù)據(jù)體量巨大百度資料表明，其新首頁導(dǎo)航每天需要提供的數(shù)據(jù)超過1.5PB（1PB=1024TB），這些數(shù)據(jù)如果打印出來將超過5千億張A4紙。有資料證實(shí)，到目前為止，人類生產(chǎn)的所有印刷材料的數(shù)據(jù)量僅為200PB。數(shù)據(jù)類型多樣現(xiàn)在的數(shù)據(jù)類型不僅是文本形式，更多的是圖片、視頻、音頻、地理、位置信息等多類型的數(shù)據(jù)，個性化數(shù)據(jù)占絕對多數(shù)。處理速度快數(shù)據(jù)處理遵循“1秒定律”，可從各種類型的數(shù)據(jù)中快速獲得高價值的信息。價值密度低以視頻為例，一小時的視頻，在不間斷的監(jiān)控過程中，可能有用的數(shù)據(jù)僅僅只有一兩秒。目錄

大數(shù)據(jù)應(yīng)用案例1

大數(shù)據(jù)相關(guān)技術(shù)42

大數(shù)據(jù)帶來的時代變革56

大數(shù)據(jù)風(fēng)險

大數(shù)據(jù)在“工業(yè)4.0”中的應(yīng)用

認(rèn)識大數(shù)據(jù)37

結(jié)語Structurebased:keyvalueintegrationYourtextinhere

Contentbased:spatial-temporallinkageKnowledge:ontologyguideddatafusion,Commonsenseintegration,DomainknowledgeObserverelationshipsbetweeneverydataitems

Revealthetrends

CreatenewconceptsShowthecategoriesandhierarchies

Datamining:association,clustering,time-seriesandclassificationanalytics

Graphmining

Rankingeverything數(shù)據(jù)融合大數(shù)據(jù)分析可視化

大

數(shù)

據(jù)

處

理

理

論

依

據(jù)大數(shù)據(jù)系統(tǒng)構(gòu)件數(shù)據(jù)管理知識開發(fā)用戶互動基于SQL語言:面對OLAP的傳統(tǒng)行行和列不基于SQL或map-reduce的:由谷歌率率先發(fā)起起數(shù)據(jù)流:基于運(yùn)行行商數(shù)據(jù)據(jù)直接生生成任意意圖形新平臺技術(shù)數(shù)據(jù)入口口/匯聚數(shù)據(jù)平臺臺分析不同范圍的服務(wù)傳統(tǒng)交付付模式-單片或基基于設(shè)備備的解決決方案云:能夠充分分利用物物理設(shè)施施的彈性性，以實(shí)實(shí)現(xiàn)處理理快速增增長數(shù)據(jù)據(jù)的能力力“數(shù)據(jù)庫將演變成一個虛擬的，基于云計(jì)算，超級可擴(kuò)展的分布式平臺?！?ForresteranalystJimKobielus新的傳輸方案大數(shù)據(jù)新新模式和和新技術(shù)術(shù)Gartner2011年技術(shù)成成熟度曲曲線,大數(shù)據(jù)處處于高速速發(fā)展期期

大數(shù)據(jù)應(yīng)用案例1

大數(shù)據(jù)關(guān)鍵技術(shù)42

大數(shù)據(jù)帶來的時代變革56

大數(shù)據(jù)風(fēng)險

大數(shù)據(jù)在“工業(yè)4.0”中的應(yīng)用

認(rèn)識大數(shù)據(jù)37

結(jié)語一、制造造業(yè)正處處于一個個數(shù)據(jù)爆爆炸的時時代【制造業(yè)企企業(yè)的運(yùn)運(yùn)營越來來越依賴賴信息技技術(shù)】【制造業(yè)整整個價值值鏈、制制造業(yè)產(chǎn)產(chǎn)品的整整個生命命周期都都涉及到到諸多的的數(shù)據(jù)】【數(shù)據(jù)量的的暴漲成成了許多多行業(yè)共共同面對對的嚴(yán)峻峻挑戰(zhàn)和和寶貴機(jī)機(jī)遇】制造業(yè)大大數(shù)據(jù)分分布圖產(chǎn)品數(shù)據(jù)據(jù)：設(shè)計(jì)、建建模、工工藝、加加工、測測試、維維護(hù)數(shù)據(jù)據(jù)、產(chǎn)品品結(jié)構(gòu)、、零部件件配置關(guān)關(guān)系、變變更記錄錄等。運(yùn)營數(shù)數(shù)據(jù)：組織結(jié)結(jié)構(gòu)、、業(yè)務(wù)務(wù)管理理、生生產(chǎn)設(shè)設(shè)備、、市場場營銷銷、質(zhì)質(zhì)量控控制、、生產(chǎn)產(chǎn)、采采購、、庫存存、目目標(biāo)計(jì)計(jì)劃、、電子子商務(wù)務(wù)等。。價值鏈鏈數(shù)據(jù)據(jù)：客戶、、供應(yīng)應(yīng)商、、合作作伙伴伴等。。外部數(shù)數(shù)據(jù)：經(jīng)濟(jì)運(yùn)運(yùn)行數(shù)數(shù)據(jù)、、行業(yè)業(yè)數(shù)據(jù)據(jù)、市市場數(shù)數(shù)據(jù)、、競爭爭對手手?jǐn)?shù)據(jù)據(jù)等。。個性化化定制制數(shù)據(jù)據(jù)：大規(guī)模模定制制和網(wǎng)網(wǎng)絡(luò)協(xié)協(xié)同的的發(fā)展展，使使得個個性化化定制制數(shù)據(jù)據(jù)一躍躍成為為消費(fèi)費(fèi)者張張揚(yáng)個個性的的載體體。二、大大數(shù)據(jù)據(jù)是工工業(yè)互互聯(lián)網(wǎng)網(wǎng)的命命脈大數(shù)據(jù)據(jù)可能能帶來來的巨巨大價價值正正在被被傳統(tǒng)統(tǒng)產(chǎn)業(yè)業(yè)認(rèn)可可！通過技技術(shù)創(chuàng)創(chuàng)新與與發(fā)展展，以以及數(shù)數(shù)據(jù)的的全面面感知知、收收集、、分析析、共共享，，為企企業(yè)管管理者者和參參與者者呈現(xiàn)現(xiàn)出看看待制制造業(yè)業(yè)價值值鏈的的全新新視角角。二、大大數(shù)據(jù)據(jù)是工工業(yè)互互聯(lián)網(wǎng)網(wǎng)的命命脈1）實(shí)現(xiàn)現(xiàn)智能能生產(chǎn)產(chǎn)2）實(shí)現(xiàn)現(xiàn)大規(guī)規(guī)模定定制“兩個海量”①消費(fèi)需求產(chǎn)生海量數(shù)據(jù)②生產(chǎn)過程產(chǎn)生海量數(shù)據(jù)這兩方面大數(shù)據(jù)信息流最終通過互聯(lián)網(wǎng)在智能設(shè)備之間傳遞，由智能設(shè)備進(jìn)行分析、判斷、決策、調(diào)整、控制并繼續(xù)開展智能生產(chǎn)，生產(chǎn)出高品質(zhì)的個性化產(chǎn)品實(shí)現(xiàn)工業(yè)4.0的兩大特征：智能與互聯(lián)大數(shù)據(jù)應(yīng)用將帶來制造業(yè)企業(yè)創(chuàng)新和變革的新時代。三、大大數(shù)據(jù)據(jù)構(gòu)成成新一一代智智能工工廠工業(yè)4.0時代的的到來來，意意味著著工業(yè)業(yè)大數(shù)數(shù)據(jù)時時代的的到來來。工工業(yè)大大數(shù)據(jù)據(jù)的應(yīng)應(yīng)用，，也必必將成成為未未來提提升制制造業(yè)業(yè)生產(chǎn)