大數(shù)據(jù)變革世界的關(guān)鍵資源概述

大數(shù)據(jù)變革世界的關(guān)鍵資源概述大數(shù)據(jù)：變革世界的關(guān)鍵資源123什么是大數(shù)據(jù)大數(shù)據(jù)可以做什么大數(shù)據(jù)是如何產(chǎn)生的contents引言第一次信息革命第二次信息革命第三次信息革命第四次信息革命第五次信息革命第六次信息革命語(yǔ)言的創(chuàng)造猿→人信息得以交流和傳遞文字的出現(xiàn)信息可以被儲(chǔ)存在文字中進(jìn)行傳播，解決了語(yǔ)言的時(shí)間和空間的局限性印刷術(shù)的發(fā)明擴(kuò)大了信息的交流、傳遞的容量和范圍無(wú)線電的發(fā)明電磁波傳播信息，速度增長(zhǎng)幾十億倍電視的出現(xiàn)聲音、圖片影像、文字實(shí)現(xiàn)同時(shí)遠(yuǎn)距離實(shí)時(shí)傳播（摘自人民出版社《大數(shù)據(jù)領(lǐng)導(dǎo)干部讀本》）計(jì)算機(jī)與互聯(lián)網(wǎng)的使用突破了人類大腦及感覺(jué)器官加工利用信息的能力，人類進(jìn)入信息社會(huì)時(shí)代引言第七次信息革命？現(xiàn)在我們正經(jīng)歷著一場(chǎng)信息革命。這不是在技術(shù)上、機(jī)器設(shè)備上、軟件上或速度上的一場(chǎng)革命，而是一場(chǎng)“概念”上的革命。以往50年信息技術(shù)的重點(diǎn)在“技術(shù)”上，目的在于提升信息傳播范圍、傳播能力和傳播效率。而新的信息革命的重點(diǎn)將會(huì)在“信息”上。——彼得·德魯克《21世紀(jì)的管理挑戰(zhàn)》一、什么是大數(shù)據(jù)觸手可及的數(shù)據(jù)0102什么是大數(shù)據(jù)大數(shù)據(jù)的五個(gè)特點(diǎn)1.什么是大數(shù)據(jù)它什么都知道會(huì)員卡號(hào)是：342623我想要一個(gè)海鮮披薩。**披薩店為您服務(wù)。您的會(huì)員卡號(hào)是？為什么？海鮮披薩不適合您。根據(jù)您的醫(yī)療記錄，你的血壓和膽固醇都偏高。您可以試試我們的低脂健康比薩。那你們有什么推薦？您上星期一在國(guó)家圖書館借了一本《低脂健康食譜》。你怎么知道我會(huì)喜歡吃這種的？好。那要一個(gè)家庭特大號(hào)，多少錢？99元，它足夠您一家六口吃。但您母親應(yīng)該少吃。你們直接把比薩送我家吧，你們多久會(huì)送到？大約30分鐘。如果您不想等，可以自己騎車來(lái)。根據(jù)我們CRM全球定位系統(tǒng)的車輛行駛自動(dòng)跟蹤系統(tǒng)記錄，您登記有一輛車號(hào)為SV-568的摩托車，而您目前正在鐵山路右側(cè)騎著這輛摩托車……她上月剛做了心臟手術(shù)，還在恢復(fù)期。1.什么是大數(shù)據(jù)大數(shù)據(jù)——挖掘和整合一切有用的信息，為人類社會(huì)提供更好的服務(wù)。21世紀(jì)前10年……社交媒體的產(chǎn)生，數(shù)據(jù)開(kāi)始呈現(xiàn)爆炸式的增長(zhǎng)，大數(shù)據(jù)的提法開(kāi)始進(jìn)入大眾的視野并獲得了越來(lái)越多的關(guān)注。2.大數(shù)據(jù)的五個(gè)特點(diǎn)類型多75%網(wǎng)絡(luò)日志、音頻、視頻、圖片、地理位置信息社交媒體中產(chǎn)生的數(shù)據(jù)25%“1、2、3、4”等傳統(tǒng)數(shù)字以及符號(hào)非結(jié)構(gòu)化數(shù)據(jù)結(jié)構(gòu)化數(shù)據(jù)2.大數(shù)據(jù)的五個(gè)特點(diǎn)容量大美國(guó)的國(guó)會(huì)圖書館5000百度每天處理數(shù)據(jù)量根據(jù)IDC（國(guó)際數(shù)據(jù)公司）的監(jiān)測(cè)統(tǒng)計(jì)，2011年全球數(shù)據(jù)總量已經(jīng)達(dá)到1.8ZB，而這個(gè)數(shù)值還在以每?jī)赡攴环乃俣仍鲩L(zhǎng)，預(yù)計(jì)到2020年全球?qū)⒖偣矒碛?5ZB的數(shù)據(jù)量，增長(zhǎng)近20倍，相當(dāng)于我們地球上所有海灘沙?？倲?shù)的57倍。截至2010年，人類擁有的信息總量大概是1.2Z存儲(chǔ)數(shù)據(jù)量最大的圖書館之一。2011年4月，擁有235TB的數(shù)據(jù)一首歌4M×1024×1024一部電影1G×1024一圖書館藏書1T×1024谷歌每小時(shí)處理1P13億中國(guó)人人手1本500頁(yè)書的信息量總和=1E×1024吉（G）兆（M）太（T）拍（P）艾（E）澤（Z）約為5000個(gè)美國(guó)圖書館總和2.大數(shù)據(jù)的五個(gè)特點(diǎn)數(shù)據(jù)產(chǎn)生得快一臺(tái)大型粒子對(duì)撞機(jī)里共有1.5億個(gè)傳感器每秒鐘發(fā)生粒子對(duì)撞6億次僅僅使用十萬(wàn)分之一一年積累25PB的數(shù)據(jù)1TB的硬盤×25000個(gè)剔除99.999%數(shù)據(jù)處理速度快大數(shù)據(jù)通過(guò)云計(jì)算，以上數(shù)據(jù)儲(chǔ)存僅需20分鐘共計(jì)1PB，速度1G/s，還剩144小時(shí)已完成50%存取速度快2.大數(shù)據(jù)的五個(gè)特點(diǎn)應(yīng)用價(jià)值大大數(shù)據(jù)之“大”，其實(shí)并不在于其表面的“大容量”，而在于其潛在的“大價(jià)值”。如果不能把擁有的數(shù)據(jù)轉(zhuǎn)化為價(jià)值，那么擁有再多的數(shù)據(jù)也是毫無(wú)意義的。個(gè)人位置大數(shù)據(jù)服務(wù)8000億美元的市場(chǎng)規(guī)模——麥肯錫研究院對(duì)美國(guó)的測(cè)算零售業(yè)大數(shù)據(jù)幫助企業(yè)增加60%的利潤(rùn)制造業(yè)大數(shù)據(jù)降低50%的產(chǎn)品開(kāi)發(fā)制造裝配成本2.大數(shù)據(jù)的五個(gè)特點(diǎn)具備大智能更加智能的社會(huì)傳感器、可穿戴式設(shè)備等微小的計(jì)算設(shè)備將進(jìn)一步普及“萬(wàn)物皆互聯(lián)、無(wú)處不計(jì)算”實(shí)時(shí)收集數(shù)據(jù)確保安全行駛谷歌無(wú)人駕駛汽車二、大數(shù)據(jù)是如何產(chǎn)生的123保存數(shù)據(jù)的能力在增強(qiáng)處理數(shù)據(jù)的能力在增強(qiáng)生產(chǎn)數(shù)據(jù)的能力在增強(qiáng)大數(shù)據(jù)的背后推手1.隨著存儲(chǔ)器硬件能力的提升，人類保存數(shù)據(jù)的能力在增強(qiáng)世界上第一款硬盤——IBM商用硬盤存儲(chǔ)器一兆字節(jié)的存儲(chǔ)量需要6000多美元1955年2010年一兆字節(jié)的存儲(chǔ)量?jī)H需要0.005美分2020年1T硬盤=一杯咖啡的錢=一個(gè)圖書館的全部信息2.隨著物聯(lián)網(wǎng)技術(shù)與互聯(lián)網(wǎng)經(jīng)濟(jì)的發(fā)展，人類生產(chǎn)數(shù)據(jù)的能力在增強(qiáng)機(jī)器產(chǎn)生的數(shù)據(jù)傳感器感知和運(yùn)輸不斷生產(chǎn)的數(shù)據(jù)移動(dòng)設(shè)備收集了大量的用戶數(shù)據(jù)2.隨著物聯(lián)網(wǎng)技術(shù)與互聯(lián)網(wǎng)經(jīng)濟(jì)的發(fā)展，人類生產(chǎn)數(shù)據(jù)的能力在增強(qiáng)人創(chuàng)造的數(shù)據(jù)社交媒體及互聯(lián)網(wǎng)經(jīng)濟(jì)的發(fā)展移動(dòng)設(shè)備收集了大量的用戶數(shù)據(jù)記錄各自的活動(dòng)和行為留下支付行為、空間位置、興趣愛(ài)好、信用歷史等發(fā)微博寫微信網(wǎng)上購(gòu)物每個(gè)網(wǎng)民都是數(shù)據(jù)的生產(chǎn)者3.隨著云計(jì)算的誕生與發(fā)展，人類處理數(shù)據(jù)的能力在增強(qiáng)A

大數(shù)據(jù)B

云計(jì)算云計(jì)算一般由數(shù)量驚人的計(jì)算機(jī)群構(gòu)成，谷歌云計(jì)算擁有的服務(wù)器超過(guò)100萬(wàn)臺(tái)；云計(jì)算系統(tǒng)是一個(gè)極其龐大的資源池子，用戶可以隨時(shí)、隨地、按需靈活地購(gòu)買，就像購(gòu)買煤氣和自來(lái)水一樣便利；云計(jì)算讓普通人體驗(yàn)每秒10萬(wàn)億次的運(yùn)算能力。而如此強(qiáng)大的計(jì)算能力，可以模擬核爆炸、預(yù)測(cè)氣候變化和市場(chǎng)發(fā)展趨勢(shì)。三、大數(shù)據(jù)可以做什么1234大數(shù)據(jù)讓政府治理更精準(zhǔn)透明大數(shù)據(jù)讓公共服務(wù)更智慧大數(shù)據(jù)讓商業(yè)創(chuàng)新更迅猛大數(shù)據(jù)讓經(jīng)濟(jì)治理更有效大數(shù)據(jù)可以做什么1.大數(shù)據(jù)讓政府治理更精準(zhǔn)透明精準(zhǔn)預(yù)測(cè)智慧治理風(fēng)險(xiǎn)預(yù)警輿情監(jiān)測(cè)大數(shù)據(jù)邁向“數(shù)據(jù)驅(qū)動(dòng)”的精準(zhǔn)治理方式“主觀主義”“經(jīng)驗(yàn)主義”1.大數(shù)據(jù)讓政府治理更精準(zhǔn)透明百度地圖1用戶去目的地前，用百度地圖搜索地點(diǎn)和規(guī)劃路線3提前1—2小時(shí)對(duì)即將到來(lái)的風(fēng)險(xiǎn)進(jìn)行預(yù)警2百度地圖通過(guò)分析大量數(shù)據(jù)，預(yù)測(cè)相關(guān)地點(diǎn)的人流量避免如上海外灘踩踏事件一類悲劇再度發(fā)生1.大數(shù)據(jù)讓政府治理更精準(zhǔn)透明設(shè)計(jì)人員編入流感關(guān)鍵詞，如溫度計(jì)、流感癥狀、肌肉疼痛、胸悶等只要用戶輸入這些關(guān)鍵詞，系統(tǒng)就會(huì)展開(kāi)跟蹤分析，創(chuàng)建地區(qū)流感圖表和流感地圖預(yù)測(cè)出世界上不同國(guó)家和地區(qū)的流感傳播情況2009年，甲型H1N1流感暴發(fā)的幾周前，“谷歌流感趨勢(shì)”成功預(yù)測(cè)了流感在美國(guó)境內(nèi)的傳播，其分析結(jié)果甚至具體到特定的地區(qū)和州，并非常及時(shí)，令公共衛(wèi)生官員備感震驚。而傳統(tǒng)上，美國(guó)疾病控制中心要在流感暴發(fā)一兩周之后才可以做到這些。谷歌流感趨勢(shì)谷歌工程師認(rèn)為，搜索流感信息的人數(shù)與實(shí)際患病人數(shù)之間存在密切關(guān)聯(lián)。谷歌一周疫情報(bào)告1.大數(shù)據(jù)讓政府治理更精準(zhǔn)透明大數(shù)據(jù)“第三只眼”使政府治理更加透明化，打造陽(yáng)光政府反腐倡廉反應(yīng)各地區(qū)的腐敗輕重程度、廉潔指數(shù)、市民抱怨度、市民對(duì)政府的滿意度等網(wǎng)民搜索反腐關(guān)鍵詞2.大數(shù)據(jù)讓經(jīng)濟(jì)治理更有效降低銀行壞賬率銀行通過(guò)貸款對(duì)象的大數(shù)據(jù)特征可以推測(cè)出對(duì)方違約的可能性，從而減少可能的損失。推導(dǎo)宏觀大趨勢(shì)判斷經(jīng)濟(jì)形勢(shì)可以通過(guò)把海量的微觀主體的行為進(jìn)行加總分析，從而推導(dǎo)出宏觀大趨勢(shì)的好壞。提高生產(chǎn)效率大數(shù)據(jù)與物聯(lián)網(wǎng)技術(shù)相結(jié)合，可以推動(dòng)企業(yè)做出最優(yōu)決策，幫助企業(yè)提高生產(chǎn)效率。打擊假冒偽劣打擊假冒偽劣、建設(shè)“信用中國(guó)”也不再需要消耗大量人力物力，大數(shù)據(jù)將使危害市場(chǎng)秩序的行為無(wú)處遁形。經(jīng)濟(jì)治理領(lǐng)域是大數(shù)據(jù)創(chuàng)新應(yīng)用的沃土大數(shù)據(jù)是提高經(jīng)濟(jì)治理質(zhì)量的有效手段2.大數(shù)據(jù)讓經(jīng)濟(jì)治理更有效支付寶“芝麻信用”——“芝麻信用分”，授權(quán)開(kāi)通后，每個(gè)支付寶用戶都可以看到自己的芝麻信用分。分?jǐn)?shù)越高代表信用程度越好，違約可能性越低。天貓?zhí)詫毺詫氹娪八M(fèi)電費(fèi)工商學(xué)歷學(xué)籍公安內(nèi)部數(shù)據(jù)外部數(shù)據(jù)……支付寶網(wǎng)購(gòu)相關(guān)行為數(shù)據(jù)政府已經(jīng)開(kāi)放的外部數(shù)據(jù)…芝麻信用分高芝麻信用分低租車、住酒店無(wú)押金簽證無(wú)需財(cái)產(chǎn)證明…找不到工作租不到房子貸不到款…2.大數(shù)據(jù)讓經(jīng)濟(jì)治理更有效12341.6萬(wàn)平方米的廠房?jī)?nèi)安裝了1萬(wàn)個(gè)傳感器，分布在各條生產(chǎn)線上傳感器監(jiān)控、記錄生產(chǎn)過(guò)程中的溫度、氣壓、濕度、生產(chǎn)配料、能耗等數(shù)據(jù)工廠的管理人員通過(guò)隨身攜帶的iPad獲取這些數(shù)據(jù)第一時(shí)間發(fā)現(xiàn)問(wèn)題，對(duì)生產(chǎn)進(jìn)行監(jiān)督和調(diào)整，提高生產(chǎn)效率，減少成本損失2012年7月，通用電器公司投資1.7億美元在紐約州斯克內(nèi)克塔迪市開(kāi)設(shè)了一家電池工廠。3.大數(shù)據(jù)讓公共服務(wù)更智慧智慧服務(wù)智慧出行智慧家居智慧教育智慧社區(qū)智慧醫(yī)療智慧物流智慧旅游在公共服務(wù)領(lǐng)域，基于大數(shù)據(jù)的智能服務(wù)系統(tǒng)，將會(huì)極大提升人們的生活體驗(yàn)。人們享受的一切公共服務(wù)將在數(shù)字空間中以新的模式重新構(gòu)建?！?.大數(shù)據(jù)讓公共服務(wù)更智慧高德導(dǎo)航高德公司基于位置服務(wù)大數(shù)據(jù)的能力，與烏鎮(zhèn)、古北水鎮(zhèn)兩家旅游公司合作，上線了全國(guó)首個(gè)“智慧景區(qū)”服務(wù)，解決游客在景區(qū)容易遇到的迷路、擁堵、排隊(duì)等問(wèn)題。地圖渲染高德在地圖上增加游覽車、游船的線路地址，增加了重要景點(diǎn)的渲染圖分類篩選商店、衛(wèi)生間餐廳、燈景區(qū)重要地點(diǎn)信息一目了然導(dǎo)游語(yǔ)音當(dāng)游客走到某個(gè)對(duì)應(yīng)景點(diǎn)附近，導(dǎo)游語(yǔ)音會(huì)自動(dòng)播放智慧景區(qū)引入熱力圖，游客可以看到該處游客人數(shù)的多少，合理安排游覽時(shí)間3.大數(shù)據(jù)讓公共服務(wù)更智慧基于大數(shù)據(jù)技術(shù)，有朝一日，機(jī)器的診療準(zhǔn)確率甚至可能超過(guò)人類歷史上最有名的名醫(yī)。超級(jí)計(jì)算機(jī)Watson在醫(yī)療、醫(yī)藥行業(yè)可以幫助做復(fù)雜疾病的診斷和數(shù)據(jù)分析利用認(rèn)知計(jì)算技術(shù)縮短治療方案制定周期醫(yī)療機(jī)構(gòu)以利用Watson規(guī)范醫(yī)療費(fèi)用幫助分析疾病風(fēng)險(xiǎn)，保證理賠過(guò)程的合規(guī)性、合理性，防止濫用和欺詐4.大數(shù)據(jù)讓商業(yè)創(chuàng)新更迅猛未來(lái)，無(wú)論是在中國(guó)，還是在世界其他國(guó)家，數(shù)據(jù)密集型產(chǎn)業(yè)將成為發(fā)展最快的產(chǎn)業(yè)。擁有數(shù)據(jù)最多的公司將迅速崛起為這個(gè)時(shí)代的領(lǐng)軍公司。商業(yè)領(lǐng)域變革4.大數(shù)據(jù)讓商業(yè)創(chuàng)新更迅猛北美最大的付費(fèi)訂閱視頻網(wǎng)站——Netflix2