基于指標(biāo)平臺(tái)的智能分析及零售金融行業(yè)實(shí)踐

基于指標(biāo)平臺(tái)的智能分析及零售/金融行業(yè)實(shí)踐杜永青數(shù)勢(shì)科技大數(shù)據(jù)產(chǎn)品負(fù)責(zé)人DataFunSummit#20232趨勢(shì)與挑戰(zhàn)：企業(yè)數(shù)據(jù)民主化&價(jià)值化指標(biāo)平臺(tái)：企業(yè)數(shù)據(jù)智能應(yīng)用新范式領(lǐng)先實(shí)踐：零售及金融行業(yè)指標(biāo)平臺(tái)實(shí)踐案例未來展望：基于大模型的智能分析未來32020+2000s–2020sTencen騰訊數(shù)據(jù)紅利時(shí)代流量紅利時(shí)代人口紅利時(shí)代數(shù)據(jù)紅利時(shí)代已經(jīng)到來2020+2000s–2020sTencen騰訊數(shù)據(jù)紅利時(shí)代流量紅利時(shí)代人口紅利時(shí)代1970s–2000s8億+勞動(dòng)人口、2億高等教育人才移動(dòng)互聯(lián)網(wǎng)浪潮下的10億網(wǎng)民4數(shù)據(jù)分析工具數(shù)據(jù)應(yīng)用核心價(jià)值數(shù)據(jù)消費(fèi)者業(yè)務(wù)決策者財(cái)務(wù)等數(shù)據(jù)“依賴者”+BI分析師+業(yè)務(wù)分析師+業(yè)務(wù)全員+上下游合作伙伴過往當(dāng)前未來WhatWhat數(shù)據(jù)分析工具數(shù)據(jù)應(yīng)用核心價(jià)值數(shù)據(jù)消費(fèi)者業(yè)務(wù)決策者財(cái)務(wù)等數(shù)據(jù)“依賴者”+BI分析師+業(yè)務(wù)分析師+業(yè)務(wù)全員+上下游合作伙伴過往當(dāng)前未來WhatWhat&WhyWhat&Why&How數(shù)倉+BI指標(biāo)平臺(tái)+Copilot指標(biāo)化經(jīng)營的益處以指標(biāo)為基礎(chǔ)構(gòu)建業(yè)務(wù)統(tǒng)一度量和數(shù)字孿生56數(shù)據(jù)方面業(yè)務(wù)方面得不到IT及時(shí)支持的業(yè)務(wù)人員及分析師數(shù)據(jù)方面業(yè)務(wù)方面得不到IT及時(shí)支持的業(yè)務(wù)人員及分析師分身乏術(shù)的數(shù)據(jù)工程師7趨勢(shì)與挑戰(zhàn)：企業(yè)數(shù)據(jù)民主化&價(jià)值化指標(biāo)平臺(tái)：企業(yè)數(shù)據(jù)智能應(yīng)用新范式領(lǐng)先實(shí)踐：零售及金融行業(yè)指標(biāo)平臺(tái)實(shí)踐案例未來展望：基于大模型的智能分析未來8指標(biāo)體系指標(biāo)應(yīng)用建立指標(biāo)平臺(tái)統(tǒng)一服務(wù)各業(yè)務(wù)應(yīng)用端三位一體的數(shù)據(jù)智能應(yīng)用新范式指標(biāo)平臺(tái)指標(biāo)平臺(tái)-指標(biāo)體系-指標(biāo)應(yīng)用：數(shù)據(jù)智能應(yīng)用新范式指標(biāo)體系指標(biāo)應(yīng)用建立指標(biāo)平臺(tái)統(tǒng)一服務(wù)各業(yè)務(wù)應(yīng)用端三位一體的數(shù)據(jù)智能應(yīng)用新范式指標(biāo)平臺(tái)9…產(chǎn)品定位核心優(yōu)勢(shì)…產(chǎn)品定位核心優(yōu)勢(shì)數(shù)據(jù)應(yīng)用表n數(shù)據(jù)應(yīng)用表1事實(shí)維度寬表數(shù)據(jù)集1數(shù)據(jù)集2具 數(shù)據(jù)上傳維度維度寬表維度表事實(shí)明細(xì)表數(shù)據(jù)應(yīng)用表2帶有維度的輕度匯總表數(shù)據(jù)數(shù)據(jù)應(yīng)用表3事實(shí)明細(xì)表帶有維度的輕度匯總表屏維度表數(shù)據(jù)集3現(xiàn)狀2、資源成本高，數(shù)據(jù)搬運(yùn)次數(shù)多，計(jì)算存儲(chǔ)冗余，應(yīng)用端有3、指標(biāo)口徑管理成本高，口徑封裝在層層管道中，數(shù)據(jù)團(tuán)隊(duì)管控3、數(shù)據(jù)管理和應(yīng)用分離數(shù)據(jù)應(yīng)用表n數(shù)據(jù)應(yīng)用表1事實(shí)維度寬表數(shù)據(jù)集1數(shù)據(jù)集2具 數(shù)據(jù)上傳維度維度寬表維度表事實(shí)明細(xì)表數(shù)據(jù)應(yīng)用表2帶有維度的輕度匯總表數(shù)據(jù)數(shù)據(jù)應(yīng)用表3事實(shí)明細(xì)表帶有維度的輕度匯總表屏維度表數(shù)據(jù)集3現(xiàn)狀2、資源成本高，數(shù)據(jù)搬運(yùn)次數(shù)多，計(jì)算存儲(chǔ)冗余，應(yīng)用端有3、指標(biāo)口徑管理成本高，口徑封裝在層層管道中，數(shù)據(jù)團(tuán)隊(duì)管控3、數(shù)據(jù)管理和應(yīng)用分離，應(yīng)用端有自己的和管理效率低下 原始數(shù)據(jù)表1 原始數(shù)據(jù)表3 原始數(shù)據(jù)表n原始數(shù)據(jù)表2湖 原始數(shù)據(jù)表1維度表 原始數(shù)據(jù)表n維度表事實(shí)明細(xì)表原始數(shù)據(jù)表3事實(shí)明細(xì)表原始數(shù)據(jù)表2 原始數(shù)據(jù)表1維度表 原始數(shù)據(jù)表n維度表事實(shí)明細(xì)表原始數(shù)據(jù)表3事實(shí)明細(xì)表原始數(shù)據(jù)表2規(guī)范化加工原子指標(biāo)、維度等積木式組裝派生和衍生指標(biāo)數(shù)據(jù)湖數(shù)據(jù)倉庫DWD指標(biāo)平臺(tái)基于指標(biāo)的下一代BI分析?指標(biāo)平臺(tái)中標(biāo)準(zhǔn)化指標(biāo)直接選取使用，派生和衍生指標(biāo)無需寫SQL也可以自助配置?去除數(shù)據(jù)集和字段，直接用封裝好口徑信息的指標(biāo)配報(bào)表，過濾條件等信息都會(huì)反寫到指標(biāo)口徑信息上，保證口徑清晰一致基于標(biāo)準(zhǔn)化指標(biāo)拖拉拽配置指標(biāo)呈現(xiàn)支付金額230,000PV（w）1,500支付單量2,240退款金額4,500毛利33,000＃支付金額＃支付單量＃退款金額＃瀏覽量T渠道T省份支付金額（求和）23日期（年月日）渠道（線上）結(jié)果基于指標(biāo)的下一代BI分析?指標(biāo)平臺(tái)中標(biāo)準(zhǔn)化指標(biāo)直接選取使用，派生和衍生指標(biāo)無需寫SQL也可以自助配置?去除數(shù)據(jù)集和字段，直接用封裝好口徑信息的指標(biāo)配報(bào)表，過濾條件等信息都會(huì)反寫到指標(biāo)口徑信息上，保證口徑清晰一致基于標(biāo)準(zhǔn)化指標(biāo)拖拉拽配置指標(biāo)呈現(xiàn)支付金額230,000PV（w）1,500支付單量2,240退款金額4,500毛利33,000＃支付金額＃支付單量＃退款金額＃瀏覽量T渠道T省份支付金額（求和）23日期（年月日）渠道（線上）結(jié)果?新需求一般都需要構(gòu)建新數(shù)據(jù)集，不管是從數(shù)倉開發(fā)新表同步，BI工具中拼裝數(shù)據(jù)集，都離不開技術(shù)人員支持，避免不了需求排隊(duì)等待?數(shù)據(jù)集中字段缺少完整口徑信息，業(yè)務(wù)不敢用，且用字段疊加邏傳統(tǒng)的BI分析數(shù)據(jù)集101數(shù)據(jù)集102數(shù)據(jù)集001 數(shù)據(jù)應(yīng)用表n數(shù)據(jù)集00232支付金額230,000數(shù)據(jù)應(yīng)用表2PV（w）1,500支付單量2,240數(shù)據(jù)應(yīng)用表3退款金額4,500毛利33,000數(shù)據(jù)應(yīng)用表1業(yè)務(wù)更友好：新需求無需新增數(shù)據(jù)集，用指標(biāo)直接做報(bào)表，業(yè)務(wù)使用門檻更低對(duì)業(yè)務(wù)人員來說，有很高的學(xué)習(xí)成本對(duì)業(yè)務(wù)人員來說，有很高的學(xué)習(xí)成本指標(biāo)計(jì)算引擎技術(shù)特點(diǎn)JavaAPISQLMDXExcel業(yè)務(wù)系統(tǒng)BI產(chǎn)品大屏App化指標(biāo)計(jì)算引擎技術(shù)特點(diǎn)JavaAPISQLMDXExcel業(yè)務(wù)系統(tǒng)BI產(chǎn)品大屏App化指標(biāo)計(jì)算引擎（HME）RESTful執(zhí)行引擎（執(zhí)行引擎（Doris）物化視圖跨表關(guān)聯(lián)查詢緩存SQL引擎理理趨勢(shì)與挑戰(zhàn)：企業(yè)數(shù)據(jù)民主化&價(jià)值化指標(biāo)平臺(tái)：企業(yè)數(shù)據(jù)智能應(yīng)用新范式領(lǐng)先實(shí)踐：零售及金融行業(yè)指標(biāo)平臺(tái)實(shí)踐案例未來展望：基于大模型的智能分析未來統(tǒng)一的賦能業(yè)務(wù)應(yīng)用到各類經(jīng)營場(chǎng)景億賦能業(yè)務(wù)應(yīng)用到各類經(jīng)營場(chǎng)景億完成了300+核心商品指標(biāo)口徑統(tǒng)一形成了服務(wù)采銷的經(jīng)營分析閉環(huán)數(shù)勢(shì)搭建了該企業(yè)的指標(biāo)平臺(tái)，梳理統(tǒng)一300個(gè)商品域核心指標(biāo)，形成了服務(wù)采銷、營運(yùn)、財(cái)務(wù)等多團(tuán)隊(duì)的經(jīng)營分析看板，實(shí)現(xiàn)了快消品、生鮮品全鏈路的數(shù)據(jù)分析和決策支持能力，幫助企業(yè)提升營銷ROI、優(yōu)化成本結(jié)構(gòu)指標(biāo)口徑不一致：各部門指標(biāo)的數(shù)據(jù)來源不同、指標(biāo)口徑定義也不同，拉齊業(yè)務(wù)口徑溝通成本高、技術(shù)口徑難梳理，下游應(yīng)用五花八門，分析數(shù)據(jù)資產(chǎn)是個(gè)黑盒子：數(shù)倉模型與指標(biāo)無清晰映射，指標(biāo)定義全靠開發(fā)求需數(shù)據(jù)開發(fā)開發(fā)完成…③數(shù)據(jù)開發(fā)開發(fā)完成…③④…④??煙囪林立?指標(biāo)口徑不統(tǒng)一??指標(biāo)定義黑盒子?無法高效復(fù)用可落地診斷與設(shè)計(jì)戰(zhàn)役成體系鏈部門數(shù)勢(shì)科技和企業(yè)共建指標(biāo)平臺(tái)體系可落地診斷與設(shè)計(jì)戰(zhàn)役成體系鏈部門行行診斷開發(fā)與建設(shè)戰(zhàn)役 做開發(fā)開發(fā)與建設(shè)戰(zhàn)役 做開發(fā) 建平臺(tái) 建平臺(tái)組織與運(yùn)營戰(zhàn)役組織與運(yùn)營戰(zhàn)役助決策助決策2.診斷報(bào)告輸出3.行動(dòng)路徑設(shè)計(jì)初版4K指標(biāo)體系整體框架設(shè)計(jì)存量指標(biāo)調(diào)研與業(yè)務(wù)訪談，輸出具體指標(biāo)分類，明確需求范圍數(shù)據(jù)完善度校驗(yàn)，結(jié)合數(shù)據(jù)可得性調(diào)整優(yōu)先級(jí)排布4指標(biāo)數(shù)據(jù)開發(fā)規(guī)劃與落地實(shí)施5統(tǒng)一指標(biāo)平臺(tái)上線與培訓(xùn)6試點(diǎn)指標(biāo)分析場(chǎng)景搭建與推廣231.診斷內(nèi)容與方法論行診斷成體系做開發(fā)建平臺(tái)指標(biāo)應(yīng)用指標(biāo)體系A(chǔ)PI2.診斷報(bào)告輸出3.行動(dòng)路徑設(shè)計(jì)初版4K指標(biāo)體系整體框架設(shè)計(jì)存量指標(biāo)調(diào)研與業(yè)務(wù)訪談，輸出具體指標(biāo)分類，明確需求范圍數(shù)據(jù)完善度校驗(yàn)，結(jié)合數(shù)據(jù)可得性調(diào)整優(yōu)先級(jí)排布4指標(biāo)數(shù)據(jù)開發(fā)規(guī)劃與落地實(shí)施5統(tǒng)一指標(biāo)平臺(tái)上線與培訓(xùn)6試點(diǎn)指標(biāo)分析場(chǎng)景搭建與推廣231.診斷內(nèi)容與方法論行診斷成體系做開發(fā)建平臺(tái)指標(biāo)應(yīng)用指標(biāo)體系A(chǔ)PI管理指標(biāo)市場(chǎng)指標(biāo)開發(fā)指標(biāo)管理信息來源一級(jí)主題二級(jí)主題指標(biāo)定義業(yè)務(wù)主題產(chǎn)品主題經(jīng)營分析指標(biāo)體系員工績效主題財(cái)務(wù)主題內(nèi)部營運(yùn)主題行診斷成體系做開發(fā)建平臺(tái)信息來源一級(jí)主題二級(jí)主題指標(biāo)定義業(yè)務(wù)主題產(chǎn)品主題經(jīng)營分析指標(biāo)體系員工績效主題財(cái)務(wù)主題內(nèi)部營運(yùn)主題行診斷成體系做開發(fā)建平臺(tái)成體系：結(jié)合業(yè)務(wù)流程設(shè)計(jì)經(jīng)營分析指標(biāo)體系指標(biāo)舉例指標(biāo)舉例入凈傭金收入新產(chǎn)品數(shù)量 凈值類行診斷成體系做開發(fā)建平臺(tái) 凈值類行診斷成體系做開發(fā)建平臺(tái)成體系：以4K模型為指標(biāo)體系設(shè)計(jì)綱領(lǐng)，進(jìn)行架構(gòu)規(guī)劃圍繞企業(yè)最終目標(biāo)AUM最大化的關(guān)鍵因素設(shè)計(jì)頂層框架4K模型，再聚焦各模塊向下拆解。保證了企業(yè)級(jí)指標(biāo)體系的框架全局視角、結(jié)構(gòu)化模塊的可拓展性。規(guī)避了同一個(gè)模塊、跨模塊多套指標(biāo)問題。只數(shù)期限（年）票面利率（%）服務(wù)客戶數(shù)拜訪次數(shù)聯(lián)合拜訪次數(shù)承銷金額發(fā)行額發(fā)行量投行客戶數(shù)服務(wù)次數(shù)商機(jī)填報(bào)數(shù)量東北地區(qū)企業(yè)債發(fā)行量同比增長率今年東北地區(qū)企業(yè)債發(fā)行量發(fā)行起始日區(qū)域信息發(fā)行量債券類型華東地區(qū)西北地區(qū)華東地區(qū)...企業(yè)債中票短期融資券...行診斷成體系做開發(fā)建平臺(tái)機(jī)構(gòu)客戶名稱投行跟蹤團(tuán)隊(duì)產(chǎn)業(yè)鏈類型證券簡稱擔(dān)保人客戶狀態(tài)東北地區(qū)機(jī)構(gòu)客戶編號(hào)區(qū)域信息融資賽道發(fā)行起始日發(fā)行債券評(píng)級(jí)客戶類別是否有效客戶是否活躍客戶債券類型發(fā)行主體評(píng)級(jí)發(fā)行狀態(tài)商機(jī)狀態(tài)公司債投行業(yè)務(wù)主題-債券類指標(biāo)：維度/原子/派生指標(biāo)與計(jì)算指標(biāo)梳理只數(shù)期限（年）票面利率（%）服務(wù)客戶數(shù)拜訪次數(shù)聯(lián)合拜訪次數(shù)承銷金額發(fā)行額發(fā)行量投行客戶數(shù)服務(wù)次數(shù)商機(jī)填報(bào)數(shù)量東北地區(qū)企業(yè)債發(fā)行量同比增長率今年東北地區(qū)企業(yè)債發(fā)行量發(fā)行起始日區(qū)域信息發(fā)行量債券類型華東地區(qū)西北地區(qū)華東地區(qū)...企業(yè)債中票短期融資券...行診斷成體系做開發(fā)建平臺(tái)機(jī)構(gòu)客戶名稱投行跟蹤團(tuán)隊(duì)產(chǎn)業(yè)鏈類型證券簡稱擔(dān)保人客戶狀態(tài)東北地區(qū)機(jī)構(gòu)客戶編號(hào)區(qū)域信息融資賽道發(fā)行起始日發(fā)行債券評(píng)級(jí)客戶類別是否有效客戶是否活躍客戶債券類型發(fā)行主體評(píng)級(jí)發(fā)行狀態(tài)商機(jī)狀態(tài)公司債投行業(yè)務(wù)主題-債券類指標(biāo)：維度/原子/派生指標(biāo)與計(jì)算指標(biāo)梳理統(tǒng)一梳理并定義了投行業(yè)務(wù)主題-債券類的核心維度與原子指標(biāo)。統(tǒng)一維度提升了指標(biāo)取數(shù)的靈活性、保證了各維度的口徑統(tǒng)一。支持業(yè)務(wù)方以“樂高組合式”取數(shù)模式進(jìn)行指標(biāo)分析，加速指標(biāo)取數(shù)效率1數(shù)倉加工原子指標(biāo)：成交金額指標(biāo)平臺(tái)加工派生指標(biāo)：近7天成交金額派生指標(biāo)：開發(fā)關(guān)系A(chǔ)股成交金額衍生指標(biāo)：開發(fā)關(guān)系股票成交金額+基金交易量3行診斷成體系做開發(fā)建平臺(tái)24做開發(fā)：1數(shù)倉加工原子指標(biāo)：成交金額指標(biāo)平臺(tái)加工派生指標(biāo)：近7天成交金額派生指標(biāo)：開發(fā)關(guān)系A(chǔ)股成交金額衍生指標(biāo)：開發(fā)關(guān)系股票成交金額+基金交易量3行診斷成體系做開發(fā)建平臺(tái)24做開發(fā)：以員工績效分析類指標(biāo)為例說明開發(fā)流程ETL加工（在券商側(cè)數(shù)據(jù)倉庫內(nèi)）統(tǒng)一指標(biāo)平臺(tái)員工績效分析底層數(shù)據(jù)統(tǒng)一指標(biāo)平臺(tái)55原有指標(biāo)派生模式：原有的指標(biāo)派生與衍生過程仍優(yōu)化后指標(biāo)派生模式：直接在指標(biāo)平臺(tái)內(nèi)通過同時(shí)OLAP引擎加速了指標(biāo)查詢與取數(shù)效率行診斷成體系做開發(fā)建平臺(tái)做開發(fā)：極大提效派生衍生指標(biāo)開發(fā)，支持自助取數(shù)行診斷成體系做開發(fā)建平臺(tái)?傳統(tǒng)取數(shù)模式中，報(bào)表開發(fā)需要由懂SQL的數(shù)據(jù)分析師進(jìn)行人工開發(fā)，開發(fā)周期長，業(yè)務(wù)人員難以自行數(shù)據(jù)挖掘?數(shù)勢(shì)指標(biāo)平臺(tái)通過統(tǒng)一口徑指標(biāo)的自助取數(shù)功能，支持配置化自助提取指標(biāo)，系統(tǒng)自動(dòng)關(guān)聯(lián)跨表指標(biāo)，無需等待開發(fā)排期?取數(shù)提效成果：獲取指標(biāo)結(jié)果的時(shí)間，平均每人每周減少10小時(shí)；新增派生指標(biāo)時(shí)效從1周縮短到30分鐘實(shí)現(xiàn)價(jià)值業(yè)務(wù)運(yùn)營效率300%數(shù)字基建成熟度40%實(shí)現(xiàn)價(jià)值業(yè)務(wù)運(yùn)營效率300%數(shù)字基建成熟度40%獲取指標(biāo)數(shù)據(jù)，賦能“人人都是分析師”行診斷成體系做開發(fā)