大數(shù)據(jù)與互聯(lián)網(wǎng)經(jīng)濟解讀課件

大數(shù)據(jù)與互聯(lián)網(wǎng)經(jīng)濟解瀆大數(shù)據(jù)概念與應用大數(shù)據(jù)的概念與意義大數(shù)據(jù)的來源13大數(shù)據(jù)應用場景14大數(shù)據(jù)處理方法02af40●1.1大數(shù)據(jù)的概念與意義第一章大數(shù)據(jù)概念與應用1.從“數(shù)據(jù)”到“大數(shù)據(jù)時至今日,“數(shù)據(jù)”變身“大數(shù)據(jù)”,"開啟了一次重大的時代轉型大數(shù)據(jù)”這一概念的形成,有三個標志性事件008年9月,美國淚然(Nate)雜志?？?Thenextgoogle第一次正式提出“大數(shù)據(jù)”1年2月日,鋼學3(Sene)雜志?？疍ealingwithdata,通過社查的方式,第一次綜合分了大巍框?qū)θ藗兩钤斐傻?詳述了人類正臨的數(shù)框垸2019年5月,麥肯锝樂究院發(fā)布報告Bigdata:Thenextfrontierforin,competition,andproductity第一次給大數(shù)框出程對時清斯衾是其大小起出了常效庫I具取稈分吁能力釣數(shù)030f4001.1大數(shù)據(jù)的概念與意義第一章大數(shù)據(jù)概念與應用價值高(Value量大(oume)大數(shù)據(jù)有巨大的潛在價值,但同其呈幾何從2019年至2020年,人類的數(shù)據(jù)機模指數(shù)發(fā)式長相比,某一對象或模塊數(shù)將擴大50倍,每年產(chǎn)生的數(shù)據(jù)量將增長挹的價值密廈較飯,這無疑給我們開發(fā)海到44萬億GB,相當于美國國家酸書館≡數(shù)據(jù)垍加了難度和成本數(shù)據(jù)顯的數(shù)百萬倍,且每18個月一鑿。4V速度快(Velocity)特征多(variety隨著現(xiàn)代馬測、互聯(lián)網(wǎng)、計鎬機技大數(shù)據(jù)與傳統(tǒng)數(shù)據(jù)比,數(shù)據(jù)來源廣、維術的發(fā)展,數(shù)據(jù)生成、存、分析度多、類型雜,各種機器儀表在自動產(chǎn)生處理的速度遠遠超出人們的想象力數(shù)據(jù)的同時,人自身的生活行為也在不新創(chuàng)造數(shù)據(jù);不僅有企業(yè)組織內(nèi)部的業(yè)務數(shù)據(jù)的顯著特征據(jù),還有海相關的外部數(shù)據(jù)。040f400O1.1大數(shù)據(jù)的概念與意義第一章大數(shù)據(jù)概念與應用2.大數(shù)據(jù)的技術支撐數(shù)據(jù)源整合進行存儲、清洗云計算、硬件性價比的提行、計算速度被來越?jīng)Q挖掘、分析后得出結果直到高以及軟件技術的進步◆優(yōu)化企業(yè)管理提南效率大數(shù)據(jù)存情成本下降放力,機擁有人的智慧智能設備、傳感器的普及,推動物聯(lián)網(wǎng)、人工智能的發(fā)展●O1.1大數(shù)據(jù)的概念與意義第一章大數(shù)據(jù)概念與應用1)存儲∶存儲成本的下降云計算出現(xiàn)之前云計算出現(xiàn)之后計算出現(xiàn)后,數(shù)據(jù)存儲服務衍生出了新非常高的的商業(yè)漠式,數(shù)據(jù)中心的出現(xiàn)降低了公司例如,公司要建設網(wǎng)站,需要購置和部的計算和存儲成本署服務器,安排技術人員維護服務器例如,公司現(xiàn)在要建設網(wǎng)站,不需要去購保亞數(shù)據(jù)存儲的安全性和數(shù)據(jù)傳輸?shù)臅迟I服務器,不需要去雇用技術人員維護服通性,還會定期清理數(shù)據(jù),跨出空間以務器,可以通過租用硬件設備的方式解決便存餡新的數(shù)據(jù),機房整體的人力和管同題瑪成本都很高存情成本的下降,也改變了大家對數(shù)據(jù)的看法,更加愿意把1年、2年甚至更久遠的歷史數(shù)據(jù)保存下來,有了歷史數(shù)據(jù)的沉淀,才可以通過對比,發(fā)現(xiàn)數(shù)據(jù)之間的關聯(lián)和價值,正是由于存諂成本的下降,才能為大數(shù)據(jù)搭建最好的基礎設施06af400O1.1大數(shù)據(jù)的概念與意義第一章大數(shù)據(jù)概念與應用2)計算:運算速度越來越快海量數(shù)據(jù)從原始數(shù)據(jù)源到產(chǎn)生價值,期間會經(jīng)過存儲、清洗、挖、分析等多個環(huán)節(jié),如果計算速度不夠快,很多事青是無法實現(xiàn)的。所以,在大數(shù)據(jù)的發(fā)展過程中,計算速度是非常關踺的因素●分布式系統(tǒng)基礎架構Hadoop的出現(xiàn),為大數(shù)據(jù)帶來了新的曙光HDFS為海量的數(shù)據(jù)提供了存儲MapReduce則為海量的數(shù)據(jù)提供了并行計算,從而大大提高了計算效率Spark、Storm、Impala等各種各樣的技術進入人們的視野07af400O1.1大數(shù)據(jù)的概念與意義第一章大數(shù)據(jù)概念與應用3)智能:機器捋有理解數(shù)據(jù)的數(shù)據(jù)帶來的最大價值就是大數(shù)據(jù)讓機器變得有智慧,同時人工智能進步提升了處理和理解數(shù)據(jù)的能力。例如谷歌AlphaGo大勝世界圍冠車李世石2阿里云小A成功預測出《我是歌手》的總決賽歌王iPhone上智能化語音機器人Si微信上與大家聊天的微軟小冰08af4001.1大數(shù)據(jù)的概念與意義第一章大數(shù)據(jù)概念與應用3.大數(shù)據(jù)的意義美國著名管理學家愛德華戟明所言:“我們信靠上帝。除了帝,任何人都必須用數(shù)據(jù)來說話。(1)有數(shù)據(jù)可說在大數(shù)據(jù)時代,萬物皆數(shù)”,“呈化一切”,“切都將被數(shù)據(jù)化",人類生活在一個海呈、動態(tài)、多樣的數(shù)據(jù)世界中,數(shù)椐無處不在、無時不有、無人不用,數(shù)據(jù)貮像陽光、空氣、水分樣常見,姸放大澆望遠澆、顯微那殳重要。(2)說數(shù)據(jù)可靠大數(shù)據(jù)中的^數(shù)爛”真實可靠,它實質(zhì)上是表征事物現(xiàn)象的_種符號語言和邏輯關系,貝冋靠性的數(shù)理哲學基礎是世界同構原坦。世界貝有物質(zhì)統(tǒng)性,統(tǒng)的世界中的—切事協(xié)都存在時空致性的同構關系,這意味莓任恫事物旳屬性和規(guī)律,只妻通過適當綜碼,均可以通過統(tǒng)一的數(shù)字信號表達出來。因此,“用數(shù)據(jù)說話”、“讓數(shù)據(jù)發(fā)聲”,已成為人類認知世界的-種全新方法。09af4001.1從“數(shù)據(jù)”到“大數(shù)據(jù)第一章大數(shù)據(jù)概念與應用風馬?？上嗉霸诖髷?shù)背景下,因海至無限、包羅萬象的數(shù)據(jù)存在,讓許多看似