1.1.1 進入大數(shù)據(jù)時代-天文學爆炸的起源

《大數(shù)據(jù)導論》信息爆炸的起源一、導入

“草船借箭”和大數(shù)據(jù)——對天象的觀察是基于一種對風、云、溫度、濕度、光照和所處節(jié)氣的綜合分析，這些數(shù)據(jù)來源于多元化的“非結(jié)構”類型，并且數(shù)據(jù)量較大，只不過這些數(shù)據(jù)輸入到的不是電腦，而是人腦，并最終通過計算分析得出結(jié)論。一、導入——準確預測地震/a/194589439_816263地震終于可以被精確預測啦——靠的是大數(shù)據(jù)！方式：通過使用衛(wèi)星數(shù)據(jù)預測大型地震。效果：最早能提前30天預測到全球主要地震多發(fā)國家即將發(fā)生的震級6級以上的大地震，精準度已經(jīng)達到90%。技術：基于Python語言編寫而成的開源軟件，并在Apache服務器上運行加載海量的衛(wèi)星數(shù)據(jù)，每天從正在發(fā)生或即將發(fā)生地震的地區(qū)收集大量數(shù)據(jù)?；诟呶５卣鸢l(fā)生前的各種環(huán)境狀況的歷史資料集合，同時分析衛(wèi)星圖像和傳感器數(shù)據(jù)，從而推算發(fā)生地震的風險。一、導入——準確預測地震/x/page/f0771o6cpna.htm一、導入——準確預測地震二、進入大數(shù)據(jù)時代信息社會所帶來的好處是顯而易見的：每個人口袋里都揣有一部手機，每臺辦公桌上都放著一臺電腦，每間辦公室內(nèi)都連接到局域網(wǎng)甚至互聯(lián)網(wǎng)。半個世紀以來，信息爆炸已經(jīng)積累到了一個開始引發(fā)變革的程度。它不僅使世界充斥著比以往更多的信息，而且其增長速度也在加快。信息總量的變化導致了信息形態(tài)的變化——量變引起了質(zhì)變。天文學——信息爆炸的起源三、天文學——信息爆炸的起源2000年斯隆數(shù)字巡天項目啟動的時候，位于新墨西哥州的望遠鏡在短短幾周內(nèi)收集到的數(shù)據(jù)，就比世界天文學歷史上總共收集的數(shù)據(jù)還要多。到了2010年，信息檔案已經(jīng)高達1.4×242字節(jié)。而2016年在智利投入使用的大型視場全景巡天望遠鏡能在五天之內(nèi)就獲得同樣多的信息。美國斯隆數(shù)字巡天望遠鏡天文學領域發(fā)生的變化在社會各個領域都在發(fā)生。2003年，人類第一次破譯人體基因密碼的時候，辛苦工作了十年才完成了三十億對堿基對的排序。十年之后，世界范圍內(nèi)的基因儀每15分鐘就可以完成同樣的工作。在金融領域，美國股市每天的成交量高達70億股，而其中三分之二的交易都是由建立在數(shù)學模型和算法之上的計算機程序自動完成的，這些程序運用海量數(shù)據(jù)來預測利益和降低風險。三、天文學——信息爆炸的起源IT公司更是要被數(shù)據(jù)淹沒了。谷歌公司每天要處理超過24拍字節(jié)（PB）的數(shù)據(jù)，這意味著其每天的數(shù)據(jù)處理量是美國國家圖書館所有紙質(zhì)出版物所含數(shù)據(jù)量的上千倍。臉書（Facebook）這個創(chuàng)立不過十來年的公司，每天更新的照片量超過1000萬張，每天人們在網(wǎng)站上點擊“喜歡”按鈕或者寫評論大約有三十億次，這就為臉書公司挖掘用戶喜好提供了大量的數(shù)據(jù)。與此同時，谷歌（Google）的子公司YouTube每月接待多達8億的訪客，平均每一秒鐘就會有一段長度在一小時以上的視頻上傳。推特（Twitter）上的信息量幾乎每年翻一番，每天都會發(fā)布超過4億條微博。三、天文學——信息爆炸的起源僅在2007年，人類存儲的數(shù)據(jù)就超過了300艾字節(jié)。下面這個比喻應該可以幫助人們更容易地理解這意味著什么：一部完整的數(shù)字電影可以壓縮成一個GB的文件，而一個艾字節(jié)相當于10億GB，一個澤字節(jié)（ZB）則相當于1024艾字節(jié)。在2007年的數(shù)據(jù)中，只有7％是存儲在報紙、書籍、圖片等媒介上的模擬數(shù)據(jù)，其余全部是數(shù)字數(shù)據(jù)。三、天文學——信息爆炸的起源到2013年，世界上存儲的數(shù)據(jù)達到約1.2澤字節(jié)，其中非數(shù)字數(shù)據(jù)只占不到2％。這樣大的數(shù)據(jù)量意味著什么？如果把這些數(shù)據(jù)全部記在書中，這些書可以覆蓋整個美國52次。如果將之存儲在只讀光盤上，這些光盤可以堆成五堆，每一堆都可以伸到月球。三、天文學——信息爆炸的起源公元前3世紀，埃及的托勒密二世竭力收集了當時所有的書寫作品，所以偉大的亞歷山大圖書館可以代表世界上所有的知識量。亞歷山大圖書館藏書豐富，有據(jù)可考的超過50000卷。

但是，當數(shù)字數(shù)據(jù)洪流席卷世界之后，每個地球人都可以獲得大量的數(shù)據(jù)信息，相當于當時亞歷山大圖書館存儲的數(shù)據(jù)總量的320倍之多。舉世聞名的古代文化中心——亞歷山大圖書館，毀于3世紀末的戰(zhàn)火三、天文學——信息爆炸的起源拉斯科洞穴壁畫三、天文學——信息爆炸的起源這就是一種由量變導致的質(zhì)變：一部電影與一幅靜態(tài)的畫有本質(zhì)上的區(qū)別！大數(shù)據(jù)也一樣，量變導致質(zhì)變。物理學和生物學也告訴我們，當我們改變規(guī)模時，事物的狀態(tài)有時也會發(fā)生改變。三、天文學——信息爆炸的起源以納米技術為例三、天文學——信息爆炸的起源大數(shù)據(jù)的科學價值和社會價值正是體現(xiàn)在這里。一方面，對大數(shù)據(jù)的掌握程度可以轉(zhuǎn)化為經(jīng)濟價值的來源。另一方面，大數(shù)據(jù)已經(jīng)撼動了世界的方方面面，從商業(yè)科技到醫(yī)療、政府、教育、經(jīng)濟