大數(shù)據(jù)演講課件

新天大數(shù)據(jù)平臺(tái)

2024/2/30大數(shù)據(jù)演講?2015成都和創(chuàng)新天軟件服務(wù)有限公司大數(shù)據(jù)將是下一個(gè)自然資源“我們首次在全球的經(jīng)濟(jì)是基于一種關(guān)鍵的資源-信息,它不但可以再生,它是自我生產(chǎn),永遠(yuǎn)不會(huì)用盡,它唯一問題是人們會(huì)在里面溺死”–

大趨勢(shì)作家JohnNaisbitt任何資源的獲取，都需要經(jīng)過開采、提煉和傳遞2024/2/31大數(shù)據(jù)演講?2015成都和創(chuàng)新天軟件服務(wù)有限公司大數(shù)據(jù)是什么？大數(shù)據(jù)行業(yè)現(xiàn)狀？你想從大數(shù)據(jù)中得到什么？怎么從大數(shù)據(jù)中獲得價(jià)值？關(guān)于大數(shù)據(jù)的思考2024/2/32大數(shù)據(jù)演講?2015成都和創(chuàng)新天軟件服務(wù)有限公司1分鐘時(shí)間新浪可以發(fā)送2萬條微博蘋果可以下載4.7萬次應(yīng)用淘寶可以賣出6萬件商品人人網(wǎng)可以發(fā)生30萬次訪問百度可以產(chǎn)生90萬次搜索查詢2024/2/33大數(shù)據(jù)演講?2015成都和創(chuàng)新天軟件服務(wù)有限公司數(shù)據(jù)增長趨勢(shì)2024/2/34大數(shù)據(jù)演講?2015成都和創(chuàng)新天軟件服務(wù)有限公司大數(shù)據(jù)市場(chǎng)規(guī)模預(yù)測(cè)增長速度超過30%市場(chǎng)規(guī)模突破100億32.5%的公司處于測(cè)試階段29.5%的公司實(shí)踐大數(shù)據(jù)24.5%的公司開發(fā)準(zhǔn)備就緒不了解的只占13.5%36.5%進(jìn)行離線處理23.2%進(jìn)行實(shí)時(shí)處理40.3%兩種都做2024/2/35大數(shù)據(jù)演講?2015成都和創(chuàng)新天軟件服務(wù)有限公司大數(shù)據(jù)—企業(yè)騰飛的“腎上腺素”MBGBTBPBERP/CRM付款薪金存貨聯(lián)系人訂單跟蹤銷售管道廣告移動(dòng)協(xié)作電子商務(wù)WEB2.0Web日志數(shù)字市場(chǎng)搜索市場(chǎng)網(wǎng)上推薦BIG

DATA日志文件空間&

GPS坐標(biāo)數(shù)據(jù)數(shù)據(jù)集市電子政務(wù)氣候文本/圖像社交網(wǎng)絡(luò)音頻/視頻傳感器/RFID/

設(shè)備網(wǎng)頁點(diǎn)擊流Wikis/博客CheapStorage<$100/TB(100xcheaperin10yrs)價(jià)格低廉的存儲(chǔ)CheapComputing10MIPS/$in1980to10MMIPS/$in2005價(jià)格低廉的計(jì)算DeviceExplosion>5.5BillionSubscribersWW(70+%ofpopulation)設(shè)備爆炸SocialNetworks>2BillionConnectedPeople社交網(wǎng)絡(luò)UbiquitousConnectionWebTrafficupfrom130Exabyte(10E18)in2010to1.6ZettaByte(10E21)in2015無處不在的連接SensorNetworks>10BillionConnectedSensors傳感器網(wǎng)絡(luò)大數(shù)據(jù)來源大數(shù)據(jù)獲取的主要趨勢(shì)2024/2/36大數(shù)據(jù)演講?2015成都和創(chuàng)新天軟件服務(wù)有限公司現(xiàn)在企業(yè)面臨的問題不是數(shù)據(jù)太少了，是數(shù)據(jù)太多了？2024/2/37大數(shù)據(jù)演講?2015成都和創(chuàng)新天軟件服務(wù)有限公司你想從大數(shù)據(jù)中得到什么？社交網(wǎng)絡(luò)和互聯(lián)網(wǎng)分析監(jiān)控品牌和產(chǎn)品評(píng)價(jià)歷史數(shù)據(jù)通過對(duì)歷史數(shù)據(jù)的挖掘分析建立新的商業(yè)模型高級(jí)分析功能如何更好預(yù)測(cè)未來結(jié)果2024/2/38大數(shù)據(jù)演講?2015成都和創(chuàng)新天軟件服務(wù)有限公司傳統(tǒng)大數(shù)據(jù)解決方案（Apache）HDFSMapReduceHivePigMahoutHbaseZookperSqoopAmbari2024/2/39大數(shù)據(jù)演講?2015成都和創(chuàng)新天軟件服務(wù)有限公司傳統(tǒng)大數(shù)據(jù)架構(gòu)與和創(chuàng)新天大數(shù)據(jù)架構(gòu)比較傳統(tǒng)大數(shù)據(jù)架構(gòu)分析和創(chuàng)新天大數(shù)據(jù)架構(gòu)分析集群維護(hù)難度大、復(fù)雜的集群設(shè)置提供Cloudera

Manager，能快速部署集群并實(shí)時(shí)監(jiān)控狀態(tài)，降低維護(hù)成本開源Hadoop生態(tài)系統(tǒng)軟件存在各種Bug提供cloudera發(fā)行版（基于穩(wěn)定Apache

Hadoop開發(fā)），開源且bug少缺乏商業(yè)支持提供完整的商業(yè)支持復(fù)雜的版本與生態(tài)系統(tǒng)版本較簡(jiǎn)單，便于管理2024/2/310大數(shù)據(jù)演講?2015成都和創(chuàng)新天軟件服務(wù)有限公司和創(chuàng)新天的大數(shù)據(jù)解決方案獲取組織分析決策HDFSHbaseHiveETLYongHong

BIMapReduceHUE實(shí)時(shí)決策復(fù)雜場(chǎng)景處理Spark2024/2/311大數(shù)據(jù)演講?2015成都和創(chuàng)新天軟件服務(wù)有限公司企業(yè)維護(hù)人員轉(zhuǎn)型？HadoopHiveMapReduce還是。。。2024/2/312大數(shù)據(jù)演講?2015成都和創(chuàng)新天軟件服務(wù)有限公司企業(yè)人員轉(zhuǎn)型分析DBAHadoop快速轉(zhuǎn)型Hive/Impala2024/2/313大數(shù)據(jù)演講?2015成都和創(chuàng)新天軟件服務(wù)有限公司圖形化操作界面2024/2/314大數(shù)據(jù)演講?2015成都和創(chuàng)新天軟件服務(wù)有限公司集群狀態(tài)實(shí)時(shí)監(jiān)控2024/2/315大數(shù)據(jù)演講?2015成都和創(chuàng)新天軟件服務(wù)有限公司新的數(shù)據(jù)分析方法是怎樣的？管理層看固定報(bào)表少數(shù)人了解數(shù)據(jù)只有IT人員才會(huì)操作的BI系統(tǒng)數(shù)據(jù)量大時(shí)需要提前計(jì)算匯總好結(jié)果傳統(tǒng)BI：埋沒數(shù)據(jù)價(jià)值敏捷BI：釋放數(shù)據(jù)價(jià)值VS一線人員靈活分析數(shù)據(jù)數(shù)據(jù)指導(dǎo)每個(gè)人的業(yè)務(wù)運(yùn)營人人會(huì)用的可視化分析工具海量數(shù)據(jù)實(shí)時(shí)計(jì)算固定的不只是報(bào)表，還有思維中斷的不只是工作，還有思考提升的不只是性能，還有視野2024/2/316大數(shù)據(jù)演講?2015成都和創(chuàng)新天軟件服務(wù)有限公司傳統(tǒng)商業(yè)智能架構(gòu)BI界面OLTP其它數(shù)據(jù)OLTP好幾個(gè)月甚至跨年的上線周期N種產(chǎn)品，成本昂貴與計(jì)劃經(jīng)濟(jì)相似的商業(yè)智能迄今為止，打造了傳統(tǒng)的企業(yè)數(shù)據(jù)倉庫的機(jī)構(gòu)，有83%的用戶沒有用數(shù)據(jù)倉庫做數(shù)據(jù)分析，而是繼續(xù)使用Excel等其他工具做數(shù)據(jù)分析。

OLAP工具,報(bào)表工具,儀表盤工具,分析工具數(shù)據(jù)集市數(shù)據(jù)倉庫數(shù)據(jù)抽取、轉(zhuǎn)換、裝載（ETL）Forester數(shù)據(jù)2024/2/317大數(shù)據(jù)演講?2015成都和創(chuàng)新天軟件服務(wù)有限公司敏捷商業(yè)智能架構(gòu)細(xì)節(jié)數(shù)據(jù)，輕量建模：1/4的上線周期一個(gè)產(chǎn)品，成本低廉：1/4的成本與市場(chǎng)經(jīng)濟(jì)類似的商業(yè)智能：探索式BI利用探索式BI工具，48%的BI用戶能從大數(shù)據(jù)中找到他們想要的答案；如果不是探索式BI工具，那么只有23%的BI用戶能做到這一點(diǎn)。用戶BI界面OLAP工具,報(bào)表工具,儀表盤工具,分析工具ETL和內(nèi)存數(shù)據(jù)集市（壓縮、MPP）ODSEDWOLTPTDWI數(shù)據(jù)一個(gè)產(chǎn)品！2024/2/318大數(shù)據(jù)演講?2015成都和創(chuàng)新天軟件服務(wù)有限公司效果演示2024/2/3