版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)
文檔簡介
大數(shù)據(jù)行業(yè)用戶案例HPEVerticaReal-timeAnalyticsPlatform專為大數(shù)據(jù)分析構(gòu)建的關(guān)系數(shù)據(jù)庫和非結(jié)構(gòu)化分析引擎,分析100%的數(shù)據(jù)大數(shù)據(jù)實時分析平臺高擴展高擴展列式計算實時聚合高級分析概念模型語義理解X86大規(guī)模并行處理架構(gòu)(MPP)自動優(yōu)化高速并行裝載實時分析查詢SQLODBC/JDBC/ADO.NETSQLODBC/JDBC/ADO.NET50x–1000x性能提升TBs~10PBs在線擴展節(jié)約90%的存儲空間開放、簡單易用結(jié)構(gòu)化非結(jié)構(gòu)化ConnectorsRESTful
簡單、高效、可擴展、開放的關(guān)系數(shù)據(jù)庫和非結(jié)構(gòu)化分析引擎大數(shù)據(jù)分析平臺架構(gòu))ODBCJDBCADO.NET安裝管理監(jiān)控優(yōu)化備份恢復
標準SQL解析,列式計算優(yōu)化器內(nèi)存存儲自定義存儲管理控制臺列式計算執(zhí)行引擎列式存儲抽象層HDFSCLI本地文件系統(tǒng)物理存儲層負載均衡和失敗轉(zhuǎn)移接口層負載管理實時聚合MPP架構(gòu)數(shù)據(jù)庫引擎New原生高級分析算法自定義分析處理算法SDK:C++、Java、R非結(jié)構(gòu)化引擎RESTfulNewVertica專注于大數(shù)據(jù)分析,尤其是實時分析數(shù)據(jù)量高低OLTP系統(tǒng)作業(yè)類型單行數(shù)據(jù)實時性高低批量混合型場景傳統(tǒng)數(shù)據(jù)倉庫大數(shù)據(jù)分析大數(shù)據(jù)交易以網(wǎng)絡(luò)為中心的電信業(yè)務模式Telco1G…AMPS|nodata2G…GSM|nodata2.5+G…GPRS&EDGE|56kb/s3G…UMTS|237kb/s3.5+G…HDPA/HSPA|14mb/s4G…LTE|100mb/s電信架構(gòu)演變Vertica電信行業(yè)典型方案BSS經(jīng)營分析〔BASS〕詳單〔CDR〕分析流量經(jīng)營分析精準營銷分析歷史庫與報表合作伙伴與電子渠道分析用戶分類與收益分析……OSS信令分析網(wǎng)絡(luò)錯誤與性能優(yōu)化網(wǎng)絡(luò)分析網(wǎng)絡(luò)綜合分析綜合監(jiān)控分析網(wǎng)絡(luò)容量管理客戶體驗管理漫游分析……MSSERP數(shù)據(jù)倉庫財務報表系統(tǒng)集中數(shù)據(jù)分析……創(chuàng)新業(yè)務增值業(yè)務分析平臺大數(shù)據(jù)分析平臺互聯(lián)網(wǎng)分析用戶行為分析用戶位置分析點擊流分析……超快分析速度、無限的擴展能力;SQL標準和開放性實時分析和聚合、無限的擴展能力;SQL標準和開放性超快分析速度;SQL標準和開放性開放性和與Hadoop/R的整合能力;超快分析速度、無限的擴展能力;非結(jié)構(gòu)化分析數(shù)據(jù)量大分析處理能力要求高數(shù)據(jù)量巨大實時性要求高分析性能要求高數(shù)據(jù)量巨大分析處理能力要求高分析算法要求豐富業(yè)務域挑戰(zhàn)的優(yōu)勢HP最具競爭力!很強競爭力!較強競爭力!典型場景:信令監(jiān)測、共享和分析業(yè)務信令采集和實時信令共享,對上層業(yè)務數(shù)據(jù)從多維度關(guān)聯(lián)分析和挖掘,支撐數(shù)據(jù)業(yè)務精確營銷和新數(shù)據(jù)產(chǎn)品效勞。面臨的挑戰(zhàn)數(shù)據(jù)量100sTB~PB:從網(wǎng)絡(luò)和DPI設(shè)備上采集的海量日志和日益豐富的應用數(shù)據(jù),傳統(tǒng)數(shù)據(jù)倉庫難以滿足存儲和處理的要求分鐘級準實時性:以社交新媒體和游戲為重點的應用,要求快速抓取社會熱點,傳統(tǒng)分析工具無法滿足準時分析挖掘的要求Vertica解決方案帶來的好處無限的擴展能力快速、持續(xù)的數(shù)據(jù)裝載,實時分析和聚合SQL標準和開放性準實時分析,大數(shù)據(jù)變現(xiàn)典型案例:山西移動信令檢測分析60節(jié)點HPBL460cG7刀片〔VCFlex10〕D2200sb存儲存儲〔12*1TB7200RPMSATA〕TMR數(shù)據(jù)入庫超過200MB/s包括GB,IUPS,GN,DPI等原始表入庫周期為分鐘級別匯總表入庫周期為15分鐘級別保存2個月,總量超過500TB多種粒度的匯總5分鐘、小時、天Vertica準實時分析,前所未有典型場景:網(wǎng)絡(luò)性能分析和優(yōu)化業(yè)務采集網(wǎng)絡(luò)設(shè)備日志和路測優(yōu)化無線網(wǎng)絡(luò)運行狀態(tài)和效勞質(zhì)量,提升用戶體驗。面臨的挑戰(zhàn)數(shù)據(jù)量100sTB:從大量的網(wǎng)絡(luò)設(shè)備采集的海量日志,傳統(tǒng)數(shù)據(jù)倉庫難以滿足存儲和處理的要求分鐘級準實時性:快速發(fā)現(xiàn)網(wǎng)絡(luò)質(zhì)量問題,盡可能防止用戶投訴Vertica解決方案帶來的好處無限的擴展能力快速、持續(xù)的數(shù)據(jù)裝載,實時分析和聚合歷史和相似場景分析預測潛在問題,有效防止設(shè)備過多配置的浪費準實時分析,提升網(wǎng)絡(luò)效勞質(zhì)量典型案例:四川電信無線網(wǎng)絡(luò)優(yōu)化CDTCM、FM、PMIMSI-終端映射表Rx/Tx/FFER/SINR,位置CDT服務器OMMServer電信終端分析系統(tǒng)FTP普通終端采集數(shù)據(jù)工參電信資源管理系統(tǒng)數(shù)據(jù)采集NDS服務器數(shù)據(jù)預處理:話單分析容量分析,關(guān)聯(lián)分析,預測數(shù)據(jù)分析電信網(wǎng)優(yōu)云處理云:解析匯總存儲云:話單數(shù)據(jù),匯總指標數(shù)據(jù)應用呈現(xiàn)FTP處理云:Hadoop集群完成數(shù)據(jù)解析匯總存儲云:HPVertica集群完成大數(shù)據(jù)存儲6個節(jié)點集群,數(shù)據(jù)量超過30T主表單表超過20TB,分鐘級準實時入庫典型場景:經(jīng)營分析業(yè)務利用業(yè)務支撐、網(wǎng)絡(luò)、效勞和財務等系統(tǒng)產(chǎn)生的大量根底數(shù)據(jù)實現(xiàn)經(jīng)營情況的分析和監(jiān)控,供經(jīng)營決策依據(jù),以實現(xiàn)精細化營銷。面臨的挑戰(zhàn)數(shù)據(jù)量100sTB~PB:傳統(tǒng)數(shù)據(jù)倉庫難以滿足存儲和快速處理的要求Vertica解決方案帶來的好處超快分析速度無限的擴展能力SQL標準和開放性大數(shù)據(jù)高性能分析支撐精細化營銷和差異競爭能力典型案例:河南移動經(jīng)營分析32節(jié)點,數(shù)據(jù)量360TB數(shù)據(jù)自助效勞:業(yè)務用戶自助分析營銷大數(shù)據(jù)分析:各種營銷模式和促銷手段的大數(shù)據(jù)分析客戶屬性數(shù)據(jù)的關(guān)聯(lián)分析,包括客戶畫像查詢、標簽客戶群刷新、標簽分析的數(shù)據(jù)刷新典型方案:社交媒體情感分析支撐的營銷和效勞系統(tǒng)100%數(shù)據(jù)深度分析全面把握瞬變的趨勢典型案例:CDR/DDR分析+網(wǎng)絡(luò)性能監(jiān)控分析2013年營業(yè)收入1280億
4GLTE用戶2.8億1.8億高速寬帶用戶裸數(shù)據(jù)容量3.2PB眾多電信分析業(yè)務的集中代表典型案例:KDDI網(wǎng)絡(luò)流量分析平臺日本第二大電信運營商4100萬用戶,15萬個基站通過分析所有網(wǎng)絡(luò)流量來了解用戶行為精準營銷差異化經(jīng)營網(wǎng)絡(luò)質(zhì)量分析快速定位解決問題,提升客戶滿意度、提升競爭力Vertica平臺:66節(jié)點,2.5PB數(shù)據(jù)量最好的性價比與高可擴展性,大量PB級別的真實案例其它競爭對手都有缺陷Netezza:邊加載邊查詢性能差,壓縮比低本錢高Exadata:PB級別查詢性能差,本錢高昂國內(nèi)電信行業(yè)案例上海電信3G網(wǎng)絡(luò)流量分析,>30TB中國電信集團互聯(lián)網(wǎng)增值業(yè)務,>50TB四川電信網(wǎng)絡(luò)優(yōu)化,>30TB山西移動信令實時分析,>500TB山東移動網(wǎng)絡(luò)綜分,>20TB河南移動經(jīng)營分析,>300TB深圳移動全網(wǎng)監(jiān)控智能分析平臺移動西北諸省甘肅移動大數(shù)據(jù)平臺青海移動經(jīng)分系統(tǒng)陜西移動經(jīng)分系統(tǒng)典型案例其他行業(yè)典型案例Vertica全球超過2500客戶,并且不斷增長金融行業(yè)消費市場在線網(wǎng)站和游戲醫(yī)療零售通信行業(yè)很多數(shù)據(jù)量超過1PB的案例能源行業(yè)應用場景行業(yè)優(yōu)先工作重點減少能源開采成本通過分析區(qū)域數(shù)據(jù)減少區(qū)域服務成本智能電量、智能電表解決方案主要應用場景M2M/智能傳感數(shù)據(jù)分析預測分析個性化價格方案客戶行為分析客戶價值管理忠誠度管理實時使用分析具體行業(yè)公共事業(yè)能源開采智能電表智能電網(wǎng)智能數(shù)據(jù)倉庫公司經(jīng)營面臨的挑戰(zhàn)公司支撐波羅的海和北歐周邊國家的能源供給,包括電力、熱能、石油、天然氣和頁巖氣等。整個行業(yè)已在2021年1月經(jīng)被解除管制,公司不再是壟斷經(jīng)營。因此公司需要更好的了解他們的客戶,并提供優(yōu)質(zhì)和增值的效勞。當前客戶的集中化數(shù)據(jù)倉庫已經(jīng)運行多年,基于Oracle平臺。每天晚上的數(shù)據(jù)加載和批處理時間過長,已經(jīng)無法在規(guī)定時間窗口內(nèi)完成?,F(xiàn)有平臺的升級本錢過高,Oracle只提供一體機方案未來3年公司將廣泛實施智能電表、智能計價,會產(chǎn)生大規(guī)模的傳感和計價數(shù)據(jù)。因此需要一個可擴展的、充分滿足未來3年增長需求的數(shù)據(jù)倉庫平臺解決方案。智能數(shù)據(jù)倉庫HPVertica解決方案支持超過30種業(yè)務流程與分析模型,包括各種深度分析,幫助愛沙尼亞能源創(chuàng)造多種新的業(yè)務場景:銷售與市場支持:通過消費者使用率分析來指導各種定價標準和市場策略,吸引新客戶、保存現(xiàn)有客戶用戶消耗:用戶可以通過快速的查詢到按時間維度的詳細資源消耗,包括電力、天然氣、熱力等。損失定位:快速定位能源損耗,是計價設(shè)備問題還是偷盜行為。5年前的能源損失率是12%,而在使用新系統(tǒng)后這個數(shù)值降為7%,大大提高了利潤率和收入。分析和運營報表:快速的生成運營報表,實時加載實時查詢,無時間窗口限制,產(chǎn)生更多的各種不同維度的分析報表,供業(yè)務部門使用。5個月全部完成了從Oracle到Vertica的應用和數(shù)據(jù)的遷移生產(chǎn)數(shù)據(jù)量10TB,1000+張表。包括4個Vertica環(huán)境:開發(fā)、開發(fā)測試、測試和生產(chǎn)典型案例:機器生成數(shù)據(jù)實時分析智能樓宇實時測控、高能效標準要求電、氣、水供給,空調(diào)制冷、空氣處理、…基于海量的傳感器數(shù)據(jù)的實時分析:實時數(shù)據(jù)采集和連續(xù)裝載實時調(diào)整優(yōu)化能源控制策略實時監(jiān)控設(shè)備狀態(tài),主動維護設(shè)備Vertica實時分析能力和時間序列分析算法,極大限度地優(yōu)化了資源配置,大幅降低了故障率,提升客服滿意度云端部署(AmazonEC2),可隨時按需擴展智能高能效樓宇醫(yī)療保健典型應用場景藥物開發(fā)
藥物發(fā)現(xiàn)基因數(shù)據(jù)科學研究
循證醫(yī)學
預測副作用分析藥物風險評估臨床治療基于效果的診斷和治療個性化治療
藥物影響行為患者護理分析預防慢性疾病業(yè)務運維收入保障
內(nèi)部風險評估
索賠處理方案合規(guī)工作流管理收入保障價格優(yōu)化/醫(yī)療保健本錢建模索賠欺詐品牌管理Web分析營銷活動優(yōu)化
醫(yī)療創(chuàng)新既挽救生命又省錢5400萬條生命,35億人月的醫(yī)療保健數(shù)據(jù)不可預知的客戶需求,極長的批處理隊列借助Vertica,可將響應時間縮短到數(shù)分鐘/秒,批處理等待時間為0現(xiàn)在用于醫(yī)療費用建模、慢性疾病預防、索賠欺詐發(fā)現(xiàn)、非品牌藥的使用等“開始時使用一個研究工程做試驗,查詢結(jié)果返回得如此之快,我們還以為查詢失敗了呢!如今我們已將整個分析堆棧遷移到Vertica!很快樂成為Vertica的客戶。〞藍十字藍盾協(xié)會高級副總裁兼首席信息官DougPorter藍十字藍盾協(xié)會您了解嗎?數(shù)據(jù)科學家經(jīng)常將Vertica與SAS或R等工具一起用于深入的預測性建模Cerner挑戰(zhàn)CernerMillennium平臺需要更快分析更多的電子健康記錄和大量的系統(tǒng)性能度量指標提高醫(yī)生效率,提升醫(yī)療效勞效果和質(zhì)量,改善診療流程解決方案Vertica準實時分析效果提升60倍分析性能,幫助Cerner更全面洞察診療全過程,大幅改善醫(yī)生效率每天快速分析2百萬告警,幫助Cerner提前了解面臨的問題,并防患于未然HPVertica助力優(yōu)化醫(yī)療信息解決方案廣告營銷典型案例AppNexus實時在線廣告服務平臺,>100TB/24節(jié)點AppLovin移動應用營銷活動監(jiān)控,100TBInsightExpress跨媒體營銷活動效果分析,30TB/8節(jié)點Neverblue廣告用戶體驗分析AdformWeb流量和網(wǎng)站分析支撐營銷活動優(yōu)化,30TBAdMarketplace基于用戶分析的搜索效果營銷廣告營銷典型案例AppNexus在線實時廣告效勞平臺背景廣告主和在線內(nèi)容提供商之間的在線實時廣告交易效勞平臺每天全球數(shù)百個企業(yè)購置和銷售數(shù)十億個在線廣告3000億記錄/day,35TB/day挑戰(zhàn)高并發(fā)、低延遲擴展能力、高可用解決方案HPHAVEn:Vertica+Hadoop優(yōu)勢實時數(shù)據(jù)裝載和查詢,高可用性分析模型快速演進零售業(yè)典型應用場景銷售和庫存全視角跟蹤提升區(qū)域倉庫間貨物調(diào)度效率提供恰當?shù)馁Y源配置以優(yōu)化店員效率關(guān)聯(lián)和購物籃分析,更好地理解顧客購置行為和忠誠度實時分析對線上或?qū)嶓w零售都至關(guān)重要實時洞悉零售情況取代基于Oracle、無法擴展的POS數(shù)據(jù)倉庫使用Vertica時性能提高100倍,可以24x7加載數(shù)據(jù),最大限度地減少行政開銷每一個商店經(jīng)理都可以使用MicroStrategy訪問移動設(shè)備上的數(shù)據(jù)零售業(yè)瞬息萬變,所以我們需要使用一個高性能的分析平臺,來滿足我們對快速處理信息的需求。〞-Guess,Inc.公司首席信息官MikeRelichGUESS,Inc.圖片是從Guess年度報告復制的:我們無權(quán)使用空中客車的銷售預測分析系統(tǒng)系統(tǒng):Diio應用提供最精確的航空公司銷售預測系統(tǒng)數(shù)據(jù):包括所有航空公司的企業(yè)數(shù)據(jù)和市場智能數(shù)據(jù),這些數(shù)據(jù)用作合理化預測空客公司的預算流程業(yè)務模型:提供清晰的業(yè)務預算分析,快速計算容量和費用的影響快速的預測,將以前需要幾周的分析流程縮短到一天內(nèi)完成預測包括基于月度的飛行、銷售點和預定級別等各種維度的統(tǒng)計快速匯總,按人群分類、地區(qū)和系統(tǒng),進行根底費用分割、YQ、稅和酬金的計算按方案的分析和無限制的預算分析至上而下的收入預測分析系統(tǒng):4節(jié)點的集群,Diio實施應用,IBM外包運維〔中國〕澳洲航空的常旅客管理分析系統(tǒng)原系統(tǒng)無法滿足實時分析的要求系統(tǒng)上線以來常旅客數(shù)增加了60%而80%的收入增加來源于常旅客基于Vertica的新系統(tǒng):公司制定以數(shù)據(jù)驅(qū)動業(yè)務的策略,需要新的平臺來進行市場和客戶分析快速實時的分析結(jié)果和業(yè)務報告典型案例:Symantec托管平安效勞Symantec托管平安效勞:為超過600個客戶提供網(wǎng)絡(luò)威脅檢測效勞,每個月:分析超過2750億條日志,7x24小時不間斷識別超過4萬個潛在平安問題事件,驗證超過4千個嚴重平安事件平臺上有超過1PB數(shù)據(jù),目前只能存放90天的數(shù)據(jù)Symantec面臨的挑戰(zhàn):分析查詢和數(shù)據(jù)準實時加載性能低目前由2個割裂的專有系統(tǒng)構(gòu)成:聚合分析庫,歷史歸檔庫。歷史歸檔庫為了到達12倍壓縮率,缺乏高可用性和容災能力對基于SQL標準的BI工具支撐困難并行處理和擴展能力滿足不了要求HP解決方案:采用Vertica,單一數(shù)據(jù)庫實現(xiàn)聚合分析和歷史歸檔功能典型案例:Symantec托管平安效勞HPVertica帶來的好處:準實時的數(shù)據(jù)裝載和分析查詢內(nèi)置高可用行,到達14倍壓縮效果,能存放更多的數(shù)據(jù)基于SQL標準和ODBC、JDBC、ADO.NET標準連接方式,支持主流的BI工具VerticaMPP架構(gòu)的線性擴展能力經(jīng)過大規(guī)模驗證,可以從幾個~近千個節(jié)點在線擴展,性能和本錢完全可控制新部署容災環(huán)境,只增加硬件,不再需要軟件投入Vertica自帶的高級分析算法,更容易挖掘潛在平安事件:時間序列分析方法:更方便關(guān)聯(lián)分析來自多個網(wǎng)絡(luò)設(shè)備不同時隙的事件模式匹配:理解網(wǎng)絡(luò)欺詐和攻擊行為模式,并用于預防聚類:根據(jù)用戶行為模式對用戶分群,識別高風險用戶“Verticahelpsusonthechallengeoftimeconsumingandcomplexityonbigdata,makingdataanalysisoncustomeractionsthroughweblogspossible.Expectmoreco-operationwithHPandVertica.〞
挑戰(zhàn)HP16000switch,10000routers,30萬用戶工作在600個site,全球性的遠程接入支持,產(chǎn)生海量網(wǎng)絡(luò)流量包分析人員如何從海量信息中快速發(fā)掘惡意軟件的蹤跡,找處各種惡意或者為經(jīng)批準的網(wǎng)絡(luò)活動,以便第一時間能夠隔離或消除其行為結(jié)果解決方案結(jié)合使用LancopeStealthWatch,一個網(wǎng)絡(luò)流量異常檢測引擎+
HPverticaDatabase,一個能夠在海量數(shù)據(jù)壓力下實現(xiàn)高性能實時分析的數(shù)據(jù)庫引擎結(jié)合HP已有的侵入保護系統(tǒng)TippingPoint和HP
Arcsight(SIEM)對網(wǎng)絡(luò)安全提供深層次保護>>>收益近實時在5-10分鐘內(nèi)對流量分析,觀察流量匯總和細節(jié)完全的自動化整合提升HP安全團隊應對攻擊的響應效率HP通過海量歷史數(shù)據(jù)分析,能夠進一步增強對企業(yè)IT運行正常狀況的理解,提升對“未知”異常的監(jiān)測能力HP大數(shù)據(jù)分析還幫助網(wǎng)絡(luò)專家識別企業(yè)內(nèi)部應用與網(wǎng)絡(luò)關(guān)系,了解應用使用的情況,從而更好規(guī)劃企業(yè)IT資源金融行業(yè)案例HPVertica金融行業(yè)案例列表〔局部〕客戶名稱客戶簡介系統(tǒng)建設(shè)/應用場景BOA(BankofAmerica)美洲銀行全球最大銀行之一系統(tǒng)1:信用卡數(shù)據(jù)倉庫(替換原有的DB2平臺),支持信用卡業(yè)務統(tǒng)計分析及實時信用評分,數(shù)據(jù)量超過到1.5PB(88節(jié)點)系統(tǒng)2:投資事業(yè)部分析平臺(替換原有的TD平臺),支持全球資本市場及風險分析,數(shù)據(jù)量超過1PBRBC(RoyalBankofCanada)加拿大皇家銀行加拿大最大的銀行風險分析系統(tǒng)(替換原有的TD平臺),支持RBC全行的后臺風險分析CreditSuisse瑞士信貸銀行瑞士第二大的銀行投資風險分析平臺(替換原Exadata平臺),支持跟全面的監(jiān)管數(shù)據(jù)報送及交易數(shù)據(jù)實時加載和風險評估,靈活查詢性能提升200%,數(shù)據(jù)周期由2年延長到10年。BNYMellon紐約梅隆銀行全球十大投資銀行之一銀行事件(交易,事務)實時分析,支撐超過150+業(yè)務應用,一期數(shù)據(jù)量150TBOpenBank俄羅斯開放銀行俄羅斯最大的私營銀行實時數(shù)據(jù)倉庫,支持全面的BI、實時KPI指標監(jiān)控及風險策略執(zhí)行情況ICICIBank印度工業(yè)信貸投資銀行印度最大私營銀行企業(yè)級大數(shù)據(jù)分析平臺,融合結(jié)構(gòu)化和非機構(gòu)化數(shù)據(jù),一期數(shù)據(jù)量300TB新韓銀行韓國最大商業(yè)銀行數(shù)據(jù)分析平臺,現(xiàn)有Teradata數(shù)據(jù)倉庫的補充,一期數(shù)據(jù)量400TBGarantiBank土耳其擔保銀行土耳其第三大銀行風險管理/運營及安全分析/客戶分析招商銀行中國領(lǐng)先的商業(yè)銀行大數(shù)據(jù)分析平臺,20萬以下小微貸款,20TB,4節(jié)點BOA選擇Vertica建設(shè)信用卡實時數(shù)據(jù)倉庫背景及挑戰(zhàn)性能瓶頸:原有數(shù)據(jù)倉庫Bacardi(BoACardInfrastructure)無法支持實時信用評估,并且欺詐偵測及風險預測模型支持3個月的數(shù)據(jù)本錢因素:基于Mainframe上的DB2的平臺架構(gòu),運維本錢很高,并且擴展性受到限制解決方案用HPVertica替換原有DB288節(jié)點Vertica集群,1.5PB原始數(shù)據(jù)收益及效果增量數(shù)據(jù)實時加載,在1-5分鐘內(nèi)可以用于分析,用于分析的數(shù)據(jù)量從3個月擴展到5年,批量加載9TB/小時分析性能提升180~240倍,欺詐偵測由2-3天縮短到15分鐘數(shù)百個分析師同時使用,峰值并發(fā)近千個,秒級響應僅系統(tǒng)維護費用,每年就節(jié)省數(shù)百萬美元數(shù)據(jù)壓縮比為1/6,節(jié)省了1PB的存儲Vertica案例:ICICI企業(yè)級大數(shù)據(jù)分析平臺融合結(jié)構(gòu)化與互聯(lián)網(wǎng)數(shù)據(jù),擴展傳統(tǒng)數(shù)據(jù)倉庫的廣度與深度背景與需求:ICICI是印度最大的民營銀行原有基于Sybase的平臺無法滿足新業(yè)務的需求需要建立一個新的企業(yè)級大數(shù)據(jù)分析平臺支持實時分析支持互聯(lián)網(wǎng)、社交媒體數(shù)據(jù)良好的可擴展性和快速分析能力Vertica新平臺同時支持結(jié)構(gòu)化與半結(jié)構(gòu)化數(shù)據(jù)〔社交媒體〕近實時的營銷信息推送,比方個人貸款、消費等當客戶訪問營銷網(wǎng)點時的相應促銷活動實時銷售數(shù)據(jù)監(jiān)測基于地理位置的聯(lián)合分析,比方哪個ATM空閑等一期400TB,21節(jié)點新韓銀行:選擇Vertica建設(shè)數(shù)據(jù)分析平臺傳統(tǒng)數(shù)據(jù)倉庫的補充與替代背景與需求:1998年開始使用Teradata作為數(shù)據(jù)倉庫,數(shù)據(jù)容量持續(xù)增長〔120TB->240TB〕,擴容及運維本錢巨大考慮其他解決方案以緩解目前的壓力,并拓展新型的分析型應用快速增長的新金融業(yè)務,更強的風險控制解決方案選擇Vertica建設(shè)數(shù)據(jù)分析平臺48節(jié)點,120TBHPDL380Gen87個月完成系統(tǒng)遷移〔2021.1~2021.7〕45000+模型轉(zhuǎn)換5000+腳本遷移Vertica集群前端展現(xiàn)分支IT
總部存款外匯客戶貸款核心系統(tǒng)IBglobalbankafund其他源系統(tǒng)ODS信息分析DW目前DW(Teradata)EUCmart新集市新集市集市3集市2集市1單一數(shù)據(jù)流新韓銀行:選擇Vertica建設(shè)數(shù)據(jù)分析平臺通過性能提升,大幅增強目標客戶的營銷能力及時為每個網(wǎng)點提供目標客戶信息生成目標客戶信息的時間縮短3個小時〔3個小時5分鐘〕充分保障向目標客戶開展直銷活動的時間增加自助式BI系統(tǒng)的可用時間提前5小時提供自助式BI效勞〔12:007:00〕數(shù)據(jù)能夠更快的提供給各個業(yè)務部門,節(jié)省更多時間來進行后續(xù)的作業(yè)處理〔分析,匯總等〕提升營銷信息的查詢性能查詢時間提升11.7倍,〔過去平均4份44秒現(xiàn)在平均22.6秒〕當處理大約500個營銷信息是,處理時間從2366分鐘減少到188分鐘。(共減少36個小時)所需時間對比性能提升比例138%159%整體匯總加載性能對比—ETL批處理整體匯總加載1170%原數(shù)據(jù)庫
原數(shù)據(jù)庫
所需時間對比性能提升比例性能對比—營銷信息查詢新韓銀行:選擇Vertica建設(shè)數(shù)據(jù)分析平臺降低系統(tǒng)的整體擁有本錢〔TCO〕,優(yōu)化系統(tǒng)架構(gòu)深圳招聯(lián):風險與營銷大數(shù)據(jù)分析平臺通過大數(shù)據(jù)分析開掘新的業(yè)務時機背景與需求:招聯(lián)是招商銀行與中國聯(lián)通共同出資組建的子公司,專注于小微貸款〔20萬以下的〕風險與營銷業(yè)務。數(shù)據(jù)驅(qū)動:通過金融數(shù)據(jù)與電信數(shù)據(jù)的融合分析,對客戶的信用及風險進行實時分析
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責。
- 6. 下載文件中如有侵權(quán)或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 2025合同法學教學大綱
- 2025有限公司員工試用期合同
- 2025商業(yè)地產(chǎn)銷售代理合同
- 二零二五年度地質(zhì)災害應急土方運輸服務合同3篇
- 2025年度養(yǎng)殖場養(yǎng)殖廢棄物資源化利用合同3篇
- 2025年度科技創(chuàng)新園區(qū)拆遷房產(chǎn)分割與產(chǎn)業(yè)扶持協(xié)議3篇
- 2025年度林業(yè)產(chǎn)業(yè)發(fā)展競業(yè)禁止模板木方交易協(xié)議3篇
- 二零二五年度農(nóng)村集體建設(shè)用地個人地基買賣合同2篇
- 二零二五年度高速公路建設(shè)項目承包協(xié)議3篇
- 2025年度水上旅游安全事故處理與救援服務協(xié)議3篇
- 靜脈輸液治療小組工作總結(jié)
- 總磷課件教學課件
- 2025年護理部工作計劃
- DB35T 2153-2023 醫(yī)療機構(gòu)檢查檢驗結(jié)果互認共享數(shù)據(jù)傳輸及應用要求
- 二年級語文上冊 課文2 口語交際 做手工教案 新人教版
- JJF 2143-2024 微波消解儀溫度參數(shù)校準規(guī)范
- 2024秋期國家開放大學??啤陡叩葦?shù)學基礎(chǔ)》一平臺在線形考(形考任務一至四)試題及答案
- 九年級上冊部編版歷史-1-4單元(1-12課)復習
- 消防改造期間消防應急預案
- 酒精依賴綜合征的護理
- DL-T 380-2010接地降阻材料技術(shù)條件
評論
0/150
提交評論