《大數(shù)據(jù)時(shí)代》簡(jiǎn)介

樂(lè)山師范學(xué)院文學(xué)與新聞學(xué)院2012級(jí)新聞班徐瑜梅李培謙黃冰冰張亞慶

胡雪梅周凱頔蔣敏焦倩茹2015年5月8日前瞻性地指出，大數(shù)據(jù)帶來(lái)的信息風(fēng)暴正在變革我們的生活、工作和思維，大數(shù)據(jù)開啟了一次重大的時(shí)代轉(zhuǎn)型，并用三個(gè)部分講述了大數(shù)據(jù)時(shí)代的思維變革、商業(yè)變革和管理變革。維克托.邁爾.舍恩伯格引言1、大數(shù)據(jù)變革公共衛(wèi)生2、大數(shù)據(jù)變革商業(yè)3、大數(shù)據(jù)變革思維4、大數(shù)據(jù)開啟時(shí)代轉(zhuǎn)型5、預(yù)測(cè)是大數(shù)據(jù)的核心6、大數(shù)據(jù)是大挑戰(zhàn)1、大數(shù)據(jù)變革公共衛(wèi)生2009年的甲型h1n1流感，在短短幾周之內(nèi)迅速傳播?；ヂ?lián)網(wǎng)巨頭谷歌公司的工程師們?cè)O(shè)立一個(gè)系統(tǒng)關(guān)注特定檢索詞條的頻繁使用與流感在時(shí)間和空間上的傳播之間的聯(lián)系。軟件發(fā)現(xiàn)了45條檢索詞條的組合，一旦將它們用于一個(gè)數(shù)學(xué)模型，他們的預(yù)測(cè)與官方數(shù)據(jù)的相關(guān)性高達(dá)97%。和疾控中心一樣，他們由此判斷出流感是從哪里傳播出來(lái)的，而且他們的判斷非常及時(shí)。這是當(dāng)今社會(huì)所獨(dú)有的一種新型能力：以一種前所未有的方式，通過(guò)對(duì)海量數(shù)據(jù)進(jìn)行分析，獲得有巨大價(jià)值的產(chǎn)品和服務(wù)，或深刻的洞見(jiàn)?；谶@樣的技術(shù)理念和數(shù)據(jù)儲(chǔ)備，下一次流感來(lái)襲的時(shí)候，世界將會(huì)擁有一種更好的預(yù)測(cè)工具，以預(yù)防流感的傳播。

2、大數(shù)據(jù)變革商業(yè)

購(gòu)買飛機(jī)票就是一個(gè)很好的例子。哈佛大學(xué)首屆計(jì)算機(jī)科學(xué)專業(yè)的畢業(yè)生奧倫·埃齊奧尼在一次飛機(jī)票價(jià)不等的打擊下開發(fā)一個(gè)系統(tǒng)，這個(gè)系統(tǒng)用來(lái)推測(cè)當(dāng)前網(wǎng)頁(yè)上的機(jī)票價(jià)格是否合理。這個(gè)系統(tǒng)需要分析所有特定航線機(jī)票的銷售價(jià)格并確定票價(jià)與提前購(gòu)買天數(shù)的關(guān)系。這個(gè)預(yù)測(cè)系統(tǒng)，它幫助虛擬的乘客節(jié)省了很多錢。之后這個(gè)項(xiàng)目變?yōu)轱L(fēng)險(xiǎn)投資基金支持的科技創(chuàng)業(yè)公司，名為farecast。如今，farecast已經(jīng)擁有驚人的約2000億條飛行數(shù)據(jù)記錄。3、大數(shù)據(jù)變革思維

半個(gè)世紀(jì)以來(lái)，隨著計(jì)算機(jī)技術(shù)全面融入社會(huì)生活，信息爆炸已經(jīng)積累到了一個(gè)開始引發(fā)變革的程度。它不僅使世界充斥著比以往更多的信息，而且其增長(zhǎng)速度也在加快。

人們不再認(rèn)為數(shù)據(jù)是靜止和陳舊的。信息總量的變化還導(dǎo)致了信息形態(tài)的變化——量變引發(fā)了質(zhì)變。最先經(jīng)歷信息爆炸的學(xué)科，如天文學(xué)和基因?qū)W，創(chuàng)造出了“大數(shù)據(jù)”這個(gè)概念。如今，這個(gè)概念幾乎應(yīng)用到了所有人類致力于發(fā)展的領(lǐng)域中。4、大數(shù)據(jù)開啟時(shí)代轉(zhuǎn)型2003年，人類第一次破譯人體基因密碼的時(shí)候，辛苦工作了十年才完成了三十億對(duì)堿基對(duì)的排序。大約十年之后，世界范圍內(nèi)的基因儀每15分鐘就可以完成同樣的工作。在金融領(lǐng)域，美國(guó)股市每天的成交量高達(dá)70億股。而其中三分之二的交易都是由建立在算法公式上的計(jì)算機(jī)程序完成的。這些程序運(yùn)用海量數(shù)據(jù)來(lái)預(yù)測(cè)利益和降低風(fēng)險(xiǎn)。5、預(yù)測(cè)是大數(shù)據(jù)的核心

大數(shù)據(jù)的核心就是預(yù)測(cè)。它通常被視為人工智能的一部分，或者更確切地說(shuō)，被視為一種機(jī)器學(xué)習(xí)。大數(shù)據(jù)不是要教機(jī)器像人一樣思考。相反，它是把數(shù)學(xué)算法運(yùn)用到海量的數(shù)據(jù)上來(lái)預(yù)測(cè)事情發(fā)生的可能性。

就像互聯(lián)網(wǎng)通過(guò)給計(jì)算機(jī)添加通信功能而改變了世界，大數(shù)據(jù)也將改變我們生活中最重要的方面，因?yàn)樗鼮槲覀兊纳顒?chuàng)造了前所未有的可量化的維度。大數(shù)據(jù)已經(jīng)成為了新發(fā)明和新服務(wù)的源泉，而更多的改變正蓄勢(shì)待發(fā)。6、大數(shù)據(jù)是大挑戰(zhàn)

數(shù)據(jù)化意味著我們把一切都透明化，甚至包括很多我們以前認(rèn)為和“信息”根本搭不上邊的事情。大數(shù)據(jù)時(shí)代開啟了一場(chǎng)尋寶游戲，而人們對(duì)于數(shù)據(jù)的看法以及對(duì)于由因果關(guān)系向相關(guān)關(guān)系轉(zhuǎn)化時(shí)釋放出的潛在價(jià)值的態(tài)度，正是主宰這場(chǎng)游戲的關(guān)鍵。內(nèi)容簡(jiǎn)介大數(shù)據(jù)時(shí)代的思維變革

第一部分第二部分大數(shù)據(jù)時(shí)代的商業(yè)變革

大數(shù)據(jù)時(shí)代的管理變革

第三部分反思201主要觀點(diǎn)更多——不是隨機(jī)樣本，而是全體數(shù)據(jù)更雜——不是精確性，而是混雜性更好——不是因果關(guān)系，而是相關(guān)關(guān)系

數(shù)百年來(lái)我們都是以抽樣調(diào)查的方式作為統(tǒng)計(jì)的基礎(chǔ)，而在大數(shù)據(jù)時(shí)代，這種狀況會(huì)發(fā)生重大改變。由于這些年存儲(chǔ)技術(shù)的發(fā)展以及互聯(lián)網(wǎng)在全世界的普及，既有了存儲(chǔ)巨大數(shù)據(jù)量的技術(shù)基礎(chǔ)，也有了數(shù)據(jù)來(lái)源，再加上云計(jì)算的快速分析技術(shù)，大數(shù)據(jù)時(shí)代是以全體數(shù)據(jù)作為樣本進(jìn)行分析，而非從前那樣在隨機(jī)抽取一定樣本數(shù)量的基礎(chǔ)之上進(jìn)行分析。當(dāng)數(shù)據(jù)處理技術(shù)得到了較大的發(fā)展之后，數(shù)據(jù)分析就采取了全數(shù)據(jù)模式，樣本=總體，比如淘寶進(jìn)行用戶行為分析時(shí)會(huì)就一個(gè)用戶在淘寶里的所有行為進(jìn)行技術(shù)分析，而谷歌對(duì)流感的預(yù)測(cè)則是對(duì)所有相關(guān)詞匯搜索行為進(jìn)行技術(shù)分析。更多

數(shù)據(jù)的來(lái)源很廣闊，數(shù)據(jù)的數(shù)量很龐大，在此基礎(chǔ)之上帶來(lái)的必然是各種數(shù)據(jù)的混雜，但混雜性并不會(huì)影響到大數(shù)據(jù)的分析結(jié)果的可用性，因?yàn)閿?shù)據(jù)量的龐大遠(yuǎn)遠(yuǎn)抵消了混雜的錯(cuò)誤數(shù)據(jù)對(duì)于分析結(jié)果的影響。數(shù)據(jù)量的顯著增大必然會(huì)讓我們付出一些代價(jià)——一些不準(zhǔn)確的數(shù)據(jù)會(huì)混入數(shù)據(jù)庫(kù)，結(jié)果也可能不準(zhǔn)確。對(duì)“小數(shù)據(jù)”而言，最重要的要求就是減少錯(cuò)誤；在大數(shù)據(jù)的采集里，在技術(shù)尚未達(dá)到完美無(wú)缺之前，混亂是無(wú)可避的。雖然我們得到的信息不再那么準(zhǔn)確，但是收集到的數(shù)量龐大的信息讓我們放棄嚴(yán)格精確的選擇變的更為劃算。更雜

不是因果關(guān)系，而是相關(guān)關(guān)系。知道“是什么”就夠了，沒(méi)必要知道“為什么”。更好

尤其對(duì)于社會(huì)經(jīng)濟(jì)的參與者來(lái)說(shuō)，及時(shí)的知道相關(guān)關(guān)系并且拿出合適的策略比搞明白“為什么”更重要。無(wú)疑大數(shù)據(jù)將使許多企業(yè)的效率得到質(zhì)的提升。

淘寶數(shù)據(jù)有一個(gè)視頻內(nèi)容是各個(gè)省份的人購(gòu)物情況的分析統(tǒng)計(jì)，比如在見(jiàn)不到大海的新疆，購(gòu)買比基尼卻是最多的，那么淘寶并不需要知道新疆人為什么喜歡買比基尼，是因?yàn)闅夂蜻€是生活習(xí)慣并不重要，重要的是淘寶要多為新疆用戶推薦比基尼，可以獲得更高的轉(zhuǎn)化率。（推薦視頻《淘寶數(shù)據(jù)盛典——你所不知道的城市秘密》大數(shù)據(jù)時(shí)代的商業(yè)變革02內(nèi)容數(shù)據(jù)化、數(shù)據(jù)價(jià)值實(shí)現(xiàn)、數(shù)據(jù)公司類型三部分

大數(shù)據(jù)蘊(yùn)藏著巨大的商業(yè)價(jià)值。根據(jù)提供價(jià)值的不同來(lái)源，大數(shù)據(jù)價(jià)值鏈包括三大構(gòu)成部分。包括第一種是基于數(shù)據(jù)本身的公司。這些公司擁有大量數(shù)據(jù)或者至少可以收集到大量數(shù)據(jù)，卻不一定有從數(shù)據(jù)中提取價(jià)值或者用數(shù)據(jù)催生創(chuàng)新思想的技能。第二種是基于技能的公司。它們通常是咨詢公司、技術(shù)供應(yīng)商或者分析公司。它們掌握了專業(yè)技能但并不一定擁有數(shù)據(jù)或者提出數(shù)據(jù)創(chuàng)性用途的才能。沃爾瑪和Pop-Tarts這兩個(gè)零售商就是借助天睿公司的分析來(lái)獲得營(yíng)銷點(diǎn)子，天睿就是一家大數(shù)據(jù)分析公司。皮特.華登，Jetpac的聯(lián)合創(chuàng)始人，就是通過(guò)想法獲得價(jià)值的一個(gè)例子，他通過(guò)用戶分享到網(wǎng)上的旅行照片來(lái)為人們推薦下一次旅行目的地。03大數(shù)據(jù)引起了一場(chǎng)管理規(guī)范的變革互聯(lián)網(wǎng)時(shí)代，我們的隱私受到了威脅，大數(shù)據(jù)時(shí)代一定是有過(guò)之而無(wú)不及。大數(shù)據(jù)還會(huì)帶來(lái)更多的威脅，因?yàn)榇髷?shù)據(jù)的核心就是用規(guī)模劇增來(lái)改變現(xiàn)狀。很多數(shù)據(jù)在收集的時(shí)候并無(wú)意用作其他用途，而最終卻產(chǎn)生了很多創(chuàng)新性的用途，也是一個(gè)未知的挑戰(zhàn)。在大數(shù)據(jù)時(shí)代，不管是告知與許可、模糊化還是匿名化，這三大隱私保護(hù)策略都失效了。同時(shí)，我們將面對(duì)另一個(gè)挑戰(zhàn)，即運(yùn)用大數(shù)據(jù)預(yù)測(cè)來(lái)判斷和懲罰人類的潛在行為，這是對(duì)公平公正以及自由意志的一種褻瀆

同時(shí)還輕視了決策過(guò)程中深思熟慮的重要性。人們不是因?yàn)樗龆艿綉土P，而是因?yàn)閷⒆?，即使他們事?shí)上并沒(méi)有犯罪。大數(shù)據(jù)時(shí)代很容易讓我們陷入數(shù)據(jù)獨(dú)裁的困境中。大數(shù)據(jù)時(shí)代，對(duì)原有的規(guī)范的修修補(bǔ)補(bǔ)已經(jīng)滿足不了需要，也不足以抑制大數(shù)據(jù)帶來(lái)的風(fēng)險(xiǎn)。我們需要全新的制度規(guī)范，而不是修改原有規(guī)范的適用范圍。大數(shù)據(jù)時(shí)代的管理變革背人動(dòng)因VS預(yù)測(cè)分析，大數(shù)據(jù)時(shí)代，關(guān)于公正的概念需要重新定義以維護(hù)個(gè)人動(dòng)因的想法：人們選擇自我行為的自由意志。簡(jiǎn)單地說(shuō)，就是個(gè)人可以并應(yīng)該為他們的行為而非傾向負(fù)責(zé)。3擊碎黑盒子，大數(shù)據(jù)算法師的崛起，外部算法師扮演公正的審計(jì)員的角色，內(nèi)部算法師在機(jī)構(gòu)內(nèi)部工作，監(jiān)督其大數(shù)據(jù)活動(dòng)，不僅要考慮公司的利益，也要顧及受到公司大數(shù)據(jù)分析影響的其他人的利益；管理變革4反數(shù)據(jù)壟斷大亨，為了促進(jìn)大數(shù)據(jù)平臺(tái)上的良性競(jìng)爭(zhēng)，政府必須運(yùn)用反壟斷條例1保護(hù)個(gè)人隱私，從個(gè)人許可到讓數(shù)據(jù)使用者承擔(dān)責(zé)任；管理變革管理變革內(nèi)容8風(fēng)險(xiǎn)：讓數(shù)據(jù)主宰一切的隱憂事物都有兩面性，大數(shù)據(jù)也不例外。大數(shù)據(jù)時(shí)代我們幾乎沒(méi)有真正的隱私可言，因此這也就給監(jiān)管層提出了更嚴(yán)格的要求。就像槍一樣，可以用來(lái)保衛(wèi)家園，也可以用來(lái)濫殺無(wú)辜，如果將大數(shù)據(jù)用于歪道，那威力也會(huì)比從前提升不少8掌握:責(zé)任與自由并舉的信息管理大數(shù)據(jù)是必然趨勢(shì)，并且在全世界的鋪開以及應(yīng)用會(huì)遠(yuǎn)快于我們多數(shù)人的反應(yīng)速度，不像數(shù)百年前的印刷術(shù)，給了人類近三百年的適應(yīng)期，大數(shù)據(jù)，可能也就幾年時(shí)間。數(shù)據(jù)使用者擔(dān)責(zé)，以行為為依據(jù)而非預(yù)測(cè)，防止大數(shù)據(jù)變成黑匣子，防止數(shù)據(jù)壟斷者的出現(xiàn)，這些可能都是以后應(yīng)被注意的甚至是寫進(jìn)法律里的。案例：大數(shù)據(jù)也是一把雙刃劍，在帶來(lái)巨大便利的同時(shí)，其背后也隱藏著一些隱患，我們的隱私也可能會(huì)被二次利用。聯(lián)想到近期好萊塢爆出的艷照事件，有外國(guó)黑客疑利用蘋果公司的iCloud云盤系統(tǒng)的漏洞