基于大數(shù)據(jù)中臺(tái)新能源智能汽車應(yīng)用解決方案兩份資料

新能源智能汽車應(yīng)用解決方案--基于大數(shù)據(jù)中臺(tái)智能汽車車企數(shù)字化解決方案INDUSTRYUNDERSTANDING對(duì)智能汽車行業(yè)的認(rèn)識(shí)與理解01隨著新能源汽車與車聯(lián)網(wǎng)的發(fā)展，智能汽車時(shí)代正在到來(lái)，汽車不僅是個(gè)交通工具同時(shí)也是一個(gè)網(wǎng)絡(luò)入口與智能設(shè)備對(duì)智能汽車行業(yè)的總體認(rèn)識(shí)網(wǎng)絡(luò)入口娛樂(lè)空間業(yè)務(wù)載體智能設(shè)備交通工具電力驅(qū)動(dòng)無(wú)人駕駛車聯(lián)入網(wǎng)智能體驗(yàn)合規(guī)監(jiān)管自動(dòng)駕駛眾包地圖車載娛樂(lè)行為分析無(wú)人車…智能汽車是一組技術(shù)創(chuàng)新與應(yīng)用發(fā)展的成果，而隨著智能汽車的普及與推廣，眾多基于智能汽車的智能應(yīng)用與業(yè)務(wù)創(chuàng)新也層出不窮智能汽車相關(guān)技術(shù)與應(yīng)用智能汽車相關(guān)技術(shù)與應(yīng)用高效連接實(shí)時(shí)互動(dòng)精準(zhǔn)操控智能應(yīng)用智能化配置：隨著汽車智能化、網(wǎng)聯(lián)化、電動(dòng)化，車聯(lián)網(wǎng)逐步成為行業(yè)標(biāo)配，逐步完成基礎(chǔ)連接多樣化運(yùn)營(yíng)：利潤(rùn)點(diǎn)逐步向后市場(chǎng)轉(zhuǎn)移，尤其商用車，包括保養(yǎng)、維修、租賃、共享、行業(yè)應(yīng)用等國(guó)家監(jiān)管要求：新能源汽車國(guó)家監(jiān)測(cè)和管理平臺(tái)截止2020年5月21日共計(jì)接入車輛323萬(wàn)云計(jì)算5G邊緣計(jì)算無(wú)人駕駛車聯(lián)網(wǎng)V2X…大數(shù)據(jù)OTA高清地圖智能升級(jí)場(chǎng)景創(chuàng)新業(yè)務(wù)整合生態(tài)合作車輛移動(dòng)信號(hào)波動(dòng)網(wǎng)絡(luò)延遲地下車庫(kù)偏遠(yuǎn)山區(qū)隨著智能汽車的使用與推廣，如何確保在復(fù)雜環(huán)境下，確保給車主提供可靠、安全、高效的智能應(yīng)用與體驗(yàn)，是擺在車廠面前的一個(gè)巨大課題智能汽車應(yīng)用給車廠提出了更高的要求多樣地理環(huán)境多種駕駛場(chǎng)景應(yīng)用多樣復(fù)雜網(wǎng)絡(luò)環(huán)境惡劣廣闊區(qū)域覆蓋復(fù)雜環(huán)境車輛安全公共安全合法合規(guī)數(shù)據(jù)安全人員安全高度安全車廠需要確保在復(fù)雜環(huán)境下保證駕駛與車輛的安全并滿足智能汽車多樣、高標(biāo)準(zhǔn)的需求強(qiáng)需求與高標(biāo)準(zhǔn)大并發(fā)高精準(zhǔn)強(qiáng)互動(dòng)大數(shù)據(jù)智能化高時(shí)效為了有效應(yīng)對(duì)智能汽車應(yīng)用所帶來(lái)的全新挑戰(zhàn)，車廠需要構(gòu)建一整套以車聯(lián)為基礎(chǔ)、以數(shù)據(jù)智能為核心的技術(shù)與業(yè)務(wù)能力支撐體系在智能汽車時(shí)代新挑戰(zhàn)中車廠的核心需求構(gòu)建車聯(lián)、數(shù)據(jù)管理與智能應(yīng)用的核心能力弱網(wǎng)環(huán)境大量設(shè)備海量數(shù)據(jù)智能應(yīng)用合規(guī)要求大并發(fā)高精準(zhǔn)強(qiáng)互動(dòng)高時(shí)效大并發(fā)高可靠設(shè)備連接管理能力弱網(wǎng)環(huán)境下穩(wěn)定的數(shù)據(jù)傳輸能力低延遲音視頻互動(dòng)能力海量數(shù)據(jù)的存儲(chǔ)管理與應(yīng)用能力智能場(chǎng)景的學(xué)習(xí)與模型訓(xùn)練能力02TOTALSOLUTION總體解決方案依托CBA等最新數(shù)字化技術(shù)與成熟產(chǎn)品，為車企構(gòu)建一個(gè)車聯(lián)能力中臺(tái)支撐體系，賦能車企搭建端到端的車聯(lián)智網(wǎng)，形成智能車輛應(yīng)用閉環(huán)智能汽車應(yīng)用總體解決方案多終端一平臺(tái)大中臺(tái)設(shè)備管理、數(shù)據(jù)采集與指令下發(fā)能力大數(shù)據(jù)治理能力數(shù)據(jù)智能訓(xùn)練能力多方數(shù)據(jù)應(yīng)用安全中臺(tái)支撐體系各類車載設(shè)備多協(xié)議SDK接入實(shí)時(shí)數(shù)據(jù)采集遠(yuǎn)程操作控制智能車輛設(shè)備輔助駕駛場(chǎng)景車載視頻應(yīng)用車輛信息監(jiān)控?cái)?shù)據(jù)統(tǒng)計(jì)分析車聯(lián)應(yīng)用平臺(tái)車輛設(shè)備數(shù)據(jù)實(shí)時(shí)上傳操控指令、業(yè)務(wù)數(shù)據(jù)下發(fā)應(yīng)用、日志等數(shù)據(jù)匯聚數(shù)據(jù)服務(wù)、智能應(yīng)用支撐應(yīng)用互動(dòng)、數(shù)據(jù)反饋應(yīng)用服務(wù)、指令下發(fā)車聯(lián)感知層智能車聯(lián)大數(shù)據(jù)中臺(tái)車聯(lián)中臺(tái)邊端接入與計(jì)算節(jié)點(diǎn)大數(shù)據(jù)中臺(tái)AI能力中臺(tái)業(yè)務(wù)中臺(tái)窄帶車聯(lián)設(shè)備連接與管理寬帶車聯(lián)實(shí)時(shí)音視頻互動(dòng)利用IOT相關(guān)技術(shù)與產(chǎn)品搭建一個(gè)智能車聯(lián)大數(shù)據(jù)中臺(tái)，高效連接、管理車輛與各類設(shè)備，實(shí)時(shí)采集并處理車聯(lián)數(shù)據(jù)，支撐各類智能應(yīng)用解決方案藍(lán)圖打造智慧產(chǎn)城社區(qū)的關(guān)鍵環(huán)節(jié)可視化管理艙P(yáng)C端手機(jī)APP微信小程序車主經(jīng)銷商運(yùn)營(yíng)人員監(jiān)管人員廠商人員第三方前端服務(wù)層車載設(shè)備管理高效設(shè)備連接音視頻數(shù)據(jù)傳輸智能互動(dòng)&車控指令車聯(lián)數(shù)據(jù)支持海量數(shù)據(jù)管理大數(shù)據(jù)應(yīng)用支撐AI模型訓(xùn)練TSP前臺(tái)應(yīng)用層車輛管理用戶管理熱點(diǎn)分布指標(biāo)分析歷史數(shù)據(jù)查詢國(guó)家監(jiān)管平臺(tái)車輛實(shí)時(shí)監(jiān)控智能駕駛遠(yuǎn)程車控自動(dòng)泊車駕駛行為監(jiān)控車載娛樂(lè)…基礎(chǔ)架構(gòu)(公有云/私有云/混合云)數(shù)據(jù)安全流通解決方案架構(gòu)智能汽車邊緣接入與計(jì)算端物聯(lián)邊緣網(wǎng)關(guān)邊緣加速節(jié)點(diǎn)車聯(lián)中臺(tái)IOT平臺(tái)RTC平臺(tái)設(shè)備管理設(shè)備接入消息上下行OTA升級(jí)數(shù)據(jù)存儲(chǔ)語(yǔ)音通話實(shí)時(shí)視頻視頻互動(dòng)視頻轉(zhuǎn)碼水印……基礎(chǔ)平臺(tái)計(jì)算服務(wù)器、虛擬機(jī)、容器…網(wǎng)絡(luò)公有\(zhòng)私有\(zhòng)混合云存儲(chǔ)(時(shí)序)數(shù)據(jù)庫(kù)、對(duì)象存儲(chǔ)…安全AI平臺(tái)在線服務(wù)&GPU資源訓(xùn)練服務(wù)OCR…人臉識(shí)別圖像識(shí)別邊緣計(jì)算虛擬機(jī)采用云原生的設(shè)計(jì)理念與微服務(wù)的部署架構(gòu)，搭建分層、開(kāi)放，安全、可彈性擴(kuò)展的智能汽車能力與支撐大中臺(tái)大數(shù)據(jù)基礎(chǔ)底座Hadoop集群數(shù)據(jù)治理數(shù)據(jù)應(yīng)用分布式存儲(chǔ)離線計(jì)算實(shí)時(shí)計(jì)算數(shù)據(jù)采集作業(yè)管理集群管理元數(shù)據(jù)管理數(shù)據(jù)標(biāo)準(zhǔn)管理數(shù)據(jù)目錄管理數(shù)據(jù)集成管理數(shù)據(jù)開(kāi)發(fā)管理數(shù)據(jù)質(zhì)量管理數(shù)據(jù)服務(wù)管理交互式查詢報(bào)表服務(wù)數(shù)據(jù)分析故障預(yù)測(cè)數(shù)據(jù)可視化數(shù)據(jù)安全流通使用邊緣網(wǎng)關(guān)、邊緣虛擬機(jī)及CDN等技術(shù)，為車廠建立大規(guī)模邊端接入與業(yè)務(wù)處理能力，以滿足海量車輛、設(shè)備的高效接入以及高時(shí)效業(yè)務(wù)處理的需求構(gòu)建大規(guī)模邊端接入與計(jì)算能力邊緣網(wǎng)關(guān)邊緣計(jì)算加速節(jié)點(diǎn)數(shù)據(jù)上傳指令下發(fā)中間計(jì)算結(jié)果推送訪問(wèn)加速內(nèi)容獲取邊緣網(wǎng)關(guān)邊緣計(jì)算加速節(jié)點(diǎn)數(shù)據(jù)上傳指令下發(fā)中間計(jì)算結(jié)果推送訪問(wèn)加速內(nèi)容獲取……全球邊緣節(jié)點(diǎn)資源設(shè)備接入業(yè)務(wù)處理支撐中臺(tái)車聯(lián)中臺(tái)·IoT車聯(lián)中臺(tái)·RTC大數(shù)據(jù)中臺(tái)AI中臺(tái)數(shù)據(jù)上傳指令下發(fā)數(shù)據(jù)傳輸內(nèi)容緩存中間計(jì)算結(jié)果上傳業(yè)務(wù)計(jì)算任務(wù)下發(fā)大規(guī)模分布式算力全球設(shè)備接入能力高可靠加速連接架構(gòu)更大規(guī)模并發(fā)接入能力更穩(wěn)定可靠數(shù)據(jù)傳輸更高效業(yè)務(wù)內(nèi)容響應(yīng)更快速低延遲業(yè)務(wù)處理基于車聯(lián)網(wǎng)技術(shù)與相關(guān)平臺(tái)產(chǎn)品，建立車輛設(shè)備管理與接入的基礎(chǔ)車聯(lián)中臺(tái)，統(tǒng)一接入設(shè)備數(shù)據(jù)并將數(shù)據(jù)分發(fā)到不同系統(tǒng)進(jìn)行處理或消費(fèi)利用IoTStack構(gòu)建窄帶車聯(lián)中臺(tái)設(shè)備管理產(chǎn)品管理設(shè)備密鑰設(shè)備管理產(chǎn)品密鑰認(rèn)證注冊(cè)權(quán)限安全高并發(fā)接入鏈路加密連接管理轉(zhuǎn)發(fā)后數(shù)據(jù)電池監(jiān)控車輛運(yùn)行監(jiān)控車輛位置監(jiān)控實(shí)時(shí)監(jiān)控轉(zhuǎn)發(fā)后數(shù)據(jù)轉(zhuǎn)發(fā)后數(shù)據(jù)IoTStack車聯(lián)網(wǎng)（窄帶）通信平臺(tái)車輛運(yùn)行管理人員管理故障報(bào)警管理車輛管理系統(tǒng)管理權(quán)限管理報(bào)表管理管理設(shè)置消息收發(fā)數(shù)據(jù)上報(bào)設(shè)備調(diào)試遠(yuǎn)程控制消息日志其他功能OTARRPC數(shù)據(jù)解析消息監(jiān)控HTTPKafkaRDB規(guī)則引擎TSDBLB廣連接高并發(fā)雙向數(shù)據(jù)IoTbrokerTLS加密MQTT4G4G5G基于URTC建立抗弱網(wǎng)、低延遲的寬帶車聯(lián)中臺(tái)，實(shí)現(xiàn)音視頻類數(shù)據(jù)的高時(shí)效、雙向傳輸，支撐各種基于音視頻的互動(dòng)與智能應(yīng)用利用URTC構(gòu)建寬帶車聯(lián)中臺(tái)RTC·寬帶車聯(lián)平臺(tái)實(shí)時(shí)合流轉(zhuǎn)碼中心AI處理視頻水印全球覆蓋實(shí)時(shí)音視頻集群直播集群(live+CDN)點(diǎn)播集群（S3+CDN）云端錄制·MP4旁路直播·推拉流全平臺(tái)SDKAndroidiOSWindowsWeb設(shè)備管理分辨率調(diào)節(jié)美顏/水印內(nèi)容審核設(shè)備管理分辨率調(diào)節(jié)美顏/水印內(nèi)容審核音視頻實(shí)時(shí)互動(dòng)音視頻數(shù)據(jù)上傳音視頻數(shù)據(jù)下發(fā)音視頻實(shí)時(shí)互動(dòng)數(shù)據(jù)接收音頻下達(dá)音視頻數(shù)據(jù)上傳遠(yuǎn)程監(jiān)控中心監(jiān)管單位車聯(lián)APP車輛保護(hù)駕駛監(jiān)管互動(dòng)娛樂(lè)遠(yuǎn)程操控自動(dòng)泊車車載哨兵遠(yuǎn)程駕駛駕駛行為檢測(cè)遠(yuǎn)程語(yǔ)音告警路況信息采集車載視頻車載會(huì)議……基于US3、私有化存儲(chǔ)等產(chǎn)品，為車廠構(gòu)建覆蓋數(shù)據(jù)全生命周期的存儲(chǔ)系統(tǒng)，實(shí)現(xiàn)對(duì)各類數(shù)據(jù)統(tǒng)一、高效、安全的存儲(chǔ)，支撐業(yè)務(wù)同時(shí)滿足合規(guī)要求利用分布式存儲(chǔ)系統(tǒng)支撐海量業(yè)務(wù)數(shù)據(jù)高效存儲(chǔ)私有化存儲(chǔ)系統(tǒng)UIoTURTC……TSP海量存儲(chǔ)分布式架構(gòu)存儲(chǔ)空間不限文件類型不限節(jié)點(diǎn)橫向擴(kuò)展快速節(jié)點(diǎn)接入安全存儲(chǔ)數(shù)據(jù)加密多副本存儲(chǔ)訪問(wèn)控制加密傳輸數(shù)據(jù)備份高效存儲(chǔ)分層分級(jí)切片存儲(chǔ)壓縮存儲(chǔ)文件級(jí)妙傳支持加速管理應(yīng)用文件上傳文件下載文件查詢圖片處理文件刪除低頻存儲(chǔ)標(biāo)準(zhǔn)存儲(chǔ)歸檔存儲(chǔ)降冷歸檔非結(jié)構(gòu)化數(shù)據(jù)&半結(jié)構(gòu)化數(shù)據(jù)+文檔&音視頻&圖片&日志…+業(yè)務(wù)&歸檔&備份SDKAPI管理界面跨地域自動(dòng)備份基于高可用架構(gòu)設(shè)計(jì)，提供穩(wěn)定可靠的存儲(chǔ)能力，11個(gè)9的數(shù)據(jù)持久性提供數(shù)據(jù)加密、防盜鏈、白名單等功能并采用全鏈路SSL加密傳輸，確保數(shù)據(jù)安全，保證業(yè)務(wù)合規(guī)，滿足審計(jì)需要采用分級(jí)存儲(chǔ)模式，支持彈性存儲(chǔ)空間，助力降低總體數(shù)據(jù)存儲(chǔ)成本可結(jié)合CDN解決海量數(shù)據(jù)分發(fā)問(wèn)題，提供高效文件訪問(wèn)服務(wù)靈活便捷的業(yè)務(wù)接入，提供API/SDK、命令行工具和管理界面等多種訪問(wèn)方式適配基礎(chǔ)云服務(wù)，為各類服務(wù)提供穩(wěn)定可靠的后端存儲(chǔ)支持?jǐn)?shù)據(jù)歸集基于UDSP+UAI構(gòu)建智能大數(shù)據(jù)管理與應(yīng)用中臺(tái)，實(shí)現(xiàn)對(duì)智能車聯(lián)數(shù)據(jù)的統(tǒng)一管理、治理、分析與智能訓(xùn)練，兌現(xiàn)車聯(lián)數(shù)據(jù)價(jià)值，為各類應(yīng)用提供全面的數(shù)據(jù)服務(wù)利用UDSP+UAI構(gòu)建智能大數(shù)據(jù)中臺(tái)數(shù)據(jù)服務(wù)數(shù)據(jù)生產(chǎn)端音視頻數(shù)據(jù)軌跡數(shù)據(jù)傳感數(shù)據(jù)行駛數(shù)據(jù)用戶數(shù)據(jù)……數(shù)據(jù)消費(fèi)端車聯(lián)IOTURTC管理系統(tǒng)營(yíng)銷系統(tǒng)……TSP大數(shù)據(jù)管理與服務(wù)門(mén)戶 UDSP·智能大數(shù)據(jù)平臺(tái)數(shù)據(jù)匯集清洗加工數(shù)據(jù)資產(chǎn)模型計(jì)算質(zhì)量稽核共享應(yīng)用數(shù)據(jù)治理管理規(guī)范標(biāo)準(zhǔn)（元數(shù)據(jù)、標(biāo)準(zhǔn)、質(zhì)量、資產(chǎn)、目錄）持續(xù)反饋數(shù)據(jù)湖UAI·人工智能訓(xùn)練平臺(tái)模型構(gòu)建數(shù)據(jù)標(biāo)注數(shù)據(jù)訓(xùn)練算法調(diào)優(yōu)模型調(diào)用數(shù)據(jù)喂養(yǎng)模型應(yīng)用存儲(chǔ)計(jì)算管理安全車聯(lián)平臺(tái)對(duì)象存儲(chǔ)TSP……車輛管理駕駛監(jiān)測(cè)故障診斷故障預(yù)警用戶畫(huà)像……基于多方安全計(jì)算相關(guān)技術(shù)，為車廠構(gòu)建一個(gè)行業(yè)級(jí)安全多方大數(shù)據(jù)開(kāi)放平臺(tái)，助力全面整合行業(yè)上下游數(shù)據(jù)資源，挖掘數(shù)據(jù)價(jià)值，支撐場(chǎng)景應(yīng)用與創(chuàng)新利用多方安全計(jì)算打造安全的多方數(shù)據(jù)開(kāi)放平臺(tái)數(shù)據(jù)所有權(quán)和使用權(quán)分離可用不可見(jiàn)，可用不可拿數(shù)據(jù)需求方數(shù)據(jù)提供方增值服務(wù)方提供透明的、可監(jiān)管的服務(wù)例如算法提供、模型提供等第三方監(jiān)管方網(wǎng)絡(luò)安全部門(mén)、第三方評(píng)估機(jī)構(gòu)對(duì)數(shù)據(jù)流通平臺(tái)實(shí)施合規(guī)監(jiān)管平臺(tái)方·車廠自身運(yùn)用數(shù)據(jù)搭建算法模型合法合規(guī)使用提供方的數(shù)據(jù)保證所提供數(shù)據(jù)源的合法合規(guī)性向平臺(tái)開(kāi)放數(shù)據(jù)字典與樣例數(shù)據(jù)車輛設(shè)計(jì)交通治理個(gè)性車險(xiǎn)車主畫(huà)像車貸金融建立各類數(shù)據(jù)從車端采集到邊緣接入及預(yù)處理，再到集中存儲(chǔ)、治理、分析與智能訓(xùn)練，并最終提供數(shù)據(jù)應(yīng)用服務(wù)的完整流程總體數(shù)據(jù)流圖數(shù)據(jù)服務(wù)UIoT平臺(tái)邊緣機(jī)房視頻圖像URTC軌跡數(shù)據(jù)4/5g激光數(shù)據(jù)4/5g雷達(dá)數(shù)據(jù)4/5g位置數(shù)據(jù)4/5g對(duì)象存儲(chǔ)視頻圖像URTC視頻圖像URTC大數(shù)據(jù)管理平臺(tái)車聯(lián)數(shù)據(jù)內(nèi)網(wǎng)加速AI訓(xùn)練與服務(wù)平臺(tái)音視頻數(shù)據(jù)車聯(lián)數(shù)據(jù)數(shù)據(jù)喂養(yǎng)模型調(diào)用數(shù)據(jù)存儲(chǔ)數(shù)據(jù)治理數(shù)據(jù)開(kāi)發(fā)數(shù)據(jù)服務(wù)應(yīng)用平臺(tái)TSP…指令下發(fā)指令下發(fā)模型調(diào)用服務(wù)響應(yīng)數(shù)據(jù)服務(wù)業(yè)務(wù)數(shù)據(jù)模型調(diào)用服務(wù)響應(yīng)業(yè)務(wù)數(shù)據(jù)業(yè)務(wù)內(nèi)容業(yè)務(wù)&基礎(chǔ)數(shù)據(jù)車聯(lián)業(yè)務(wù)數(shù)據(jù)交互安全屋·多方數(shù)據(jù)共享與應(yīng)用兄弟單位數(shù)據(jù)上下游企業(yè)數(shù)據(jù)第三方企業(yè)數(shù)據(jù)監(jiān)管單位數(shù)據(jù)03APPLICATIONSCENARIOS行業(yè)應(yīng)用場(chǎng)景創(chuàng)新類應(yīng)用基礎(chǔ)類應(yīng)用行駛類應(yīng)用車載類應(yīng)用智能汽車行業(yè)數(shù)字化解決方案可為車廠提供基礎(chǔ)層與能力層的完整解決方案，能夠支撐豐富的行業(yè)應(yīng)用場(chǎng)景，助力車廠開(kāi)展在智能汽車領(lǐng)域的業(yè)務(wù)運(yùn)營(yíng)與創(chuàng)新行業(yè)應(yīng)用場(chǎng)景智能汽車應(yīng)用解決方案基礎(chǔ)架構(gòu)支撐公有云全球網(wǎng)絡(luò)數(shù)據(jù)中心IDC托管設(shè)備租賃私有云平臺(tái)邊端能力支撐邊緣網(wǎng)關(guān)邊緣虛擬機(jī)邊緣加速邊緣網(wǎng)關(guān)邊緣虛擬機(jī)邊緣加速中臺(tái)能力支撐車聯(lián)·IoT車聯(lián)·RTC智能大數(shù)據(jù)AI訓(xùn)練AI服務(wù)數(shù)據(jù)私有存儲(chǔ)路況采集眾包地圖多方數(shù)據(jù)應(yīng)用無(wú)人車…車輛管理行駛數(shù)據(jù)分析故障分析……自動(dòng)泊車遠(yuǎn)程駕駛駕駛行為監(jiān)測(cè)……車載哨兵模式車載視頻娛樂(lè)車載會(huì)議……熱點(diǎn)分布與指標(biāo)分析車輛分布大屏展示、宏觀指標(biāo)顯示顯示平臺(tái)管理的車輛總數(shù)顯示平臺(tái)行駛總里程實(shí)時(shí)更新在線車輛、離線車輛數(shù)量統(tǒng)計(jì)值實(shí)時(shí)展示車輛平均油耗、平均行駛里程基于GIS的車輛分布圖平均每日的車輛在線率物聯(lián)平臺(tái)010100110001100101001100011001010011000110車輛實(shí)時(shí)監(jiān)控車輛狀態(tài)動(dòng)態(tài)數(shù)據(jù)實(shí)時(shí)或離線監(jiān)控，并根據(jù)數(shù)據(jù)進(jìn)行駕駛行為分析小程序移動(dòng)端APPPC端WEB賬號(hào)登錄，實(shí)時(shí)顯示車輛信息，一鍵知曉位置尋車，清晰可見(jiàn)實(shí)時(shí)數(shù)據(jù)實(shí)時(shí)分析服務(wù)實(shí)時(shí)展示車聯(lián)數(shù)據(jù)實(shí)時(shí)上傳規(guī)則引擎實(shí)時(shí)給分析模塊處理前端頁(yè)面實(shí)時(shí)展示用戶及車輛管理平臺(tái)的核心管理功能，管理所有和車輛個(gè)體相關(guān)的內(nèi)容車輛靜態(tài)信息管理用戶信息管理車型管理添加、刪除、修改、查看車輛信息更改設(shè)備、車牌號(hào)、電池編碼等記錄主關(guān)聯(lián)APP或小程序可查看本車相關(guān)信息單一、批量添加、刪除、修改、導(dǎo)出相關(guān)數(shù)據(jù)車型的新增和修改型號(hào)、排放標(biāo)準(zhǔn)、扭矩、功率等添加車輛可以綁定車型，或自動(dòng)匹配車型注冊(cè)、登錄、修改密碼用戶基本信息管理用戶權(quán)限管理用戶和車的綁定關(guān)系管理，車和設(shè)備的綁定關(guān)系管理歷史數(shù)據(jù)查詢及分析離線分析并支持導(dǎo)出油耗、里程、上線時(shí)長(zhǎng)、充電時(shí)長(zhǎng)、平均車速、運(yùn)營(yíng)情況等使用情況計(jì)算分析總里程、平均里程計(jì)算分析總耗電量（油耗），平均耗電量（油耗）計(jì)算分析充電時(shí)長(zhǎng)計(jì)算分析平均車速在線情況計(jì)算車輛在線時(shí)長(zhǎng)分析不同區(qū)域不同車型不同時(shí)間的上線情況運(yùn)營(yíng)情況月度地區(qū)或所屬機(jī)構(gòu)車輛運(yùn)營(yíng)情況數(shù)據(jù)導(dǎo)出支持導(dǎo)出不同分析條件的列表結(jié)果自動(dòng)泊車通過(guò)智慧汽車實(shí)時(shí)音視頻解決方案，用戶可以在手機(jī)端，實(shí)時(shí)觀看車身周圍情況，通過(guò)手機(jī)端實(shí)時(shí)控制車輛。

廠商可以借助智慧汽車實(shí)時(shí)音視頻解決方案遠(yuǎn)程實(shí)時(shí)監(jiān)控汽車自動(dòng)泊車情況。

自帶攝像頭可以全天24小時(shí)對(duì)車身周圍進(jìn)行監(jiān)控，并且上傳至云端，供車主回看。遠(yuǎn)程指揮自動(dòng)駕駛場(chǎng)景需求5G網(wǎng)絡(luò)快速普及帶來(lái)了兩個(gè)很大的優(yōu)勢(shì)，一個(gè)是傳輸速度快，另一個(gè)就是網(wǎng)絡(luò)容量的加大；這將有效提升實(shí)時(shí)音視頻等多媒體應(yīng)用的發(fā)展速度。在無(wú)人駕駛、遠(yuǎn)程指揮等應(yīng)用場(chǎng)景對(duì)于網(wǎng)絡(luò)的要求都很高，但僅僅是網(wǎng)絡(luò)變的更好，并不代表音視頻產(chǎn)品的體驗(yàn)就變的更好。解決方案RTC依托核心音視頻編解碼、信道傳輸、網(wǎng)絡(luò)調(diào)度等技術(shù)，實(shí)時(shí)音視頻通信RTC可以為用戶提供高可用、高品質(zhì)、超低延時(shí)的音視頻通信服務(wù)。RTC音視頻通信的端到端延遲僅200ms，遠(yuǎn)程指揮場(chǎng)景下，RTC能夠在毫秒級(jí)監(jiān)測(cè)到并實(shí)時(shí)將周圍環(huán)境的高清畫(huà)面回傳給遠(yuǎn)程指揮人員。而駕駛員借助RTC360度無(wú)死角的畫(huà)面就能采取下一步措施，確保無(wú)人車的安全流暢行駛。駕駛形為監(jiān)測(cè)未系安全帶雙手脫離方向盤(pán)打電話使用手機(jī)抽煙長(zhǎng)時(shí)間視線偏移實(shí)時(shí)監(jiān)測(cè)+自動(dòng)識(shí)別主動(dòng)語(yǔ)音提醒+對(duì)接監(jiān)管平臺(tái)低延遲抗弱網(wǎng)

主要場(chǎng)景傳統(tǒng)的解決方案對(duì)網(wǎng)絡(luò)的依賴較高，在正常的網(wǎng)絡(luò)環(huán)境下，端到端的延遲超過(guò)2s以上，已經(jīng)無(wú)法滿足智慧汽車對(duì)駕駛形為監(jiān)測(cè)告警的應(yīng)用場(chǎng)景。關(guān)鍵方案RTC實(shí)時(shí)音視頻解決方案具備抗弱網(wǎng)，在網(wǎng)絡(luò)環(huán)境較差的情況下，自動(dòng)冗余包、丟包重傳，并且結(jié)合控制算法，可以滿足視頻抗40%丟包、音頻抗70%丟包。駕駛形為監(jiān)測(cè)打瞌睡車載視頻互動(dòng)車載會(huì)議車載音視頻娛樂(lè)車載哨兵車載哨兵模式如果檢測(cè)到是小威脅，哨兵模式將切換到“警報(bào)”狀態(tài)，并在觸摸屏上顯示一條消息，警告其攝像機(jī)正在錄制。如果檢測(cè)到更嚴(yán)重的威脅，例如有人打破窗口，哨兵模式會(huì)切換到“警報(bào)”狀態(tài)，激活汽車警報(bào)，增加中央顯示屏的亮度，并以最大音量播放汽車音響系統(tǒng)的音樂(lè)。“哨兵模式”是車輛在停車時(shí)通過(guò)360度車載攝像頭檢測(cè)威脅并發(fā)出警報(bào)。多方數(shù)據(jù)開(kāi)放應(yīng)用共享汽車車聯(lián)網(wǎng)應(yīng)用車主畫(huà)像完善車型優(yōu)化設(shè)計(jì)定制保險(xiǎn)服務(wù)精準(zhǔn)車貸服務(wù)交通治理……數(shù)據(jù)智能應(yīng)用利用多方數(shù)據(jù)安全計(jì)算相關(guān)技術(shù)幫助車廠實(shí)現(xiàn)內(nèi)部數(shù)據(jù)打通以及車廠與外部組織的數(shù)據(jù)共享，全面整合駕駛行為數(shù)據(jù)、車主個(gè)人數(shù)據(jù)、汽車軌跡數(shù)據(jù)、行車記錄儀數(shù)據(jù)與保險(xiǎn)公司等多方數(shù)據(jù)資源，支撐共享汽車、用戶畫(huà)像完善、車型設(shè)計(jì)優(yōu)化、定制保險(xiǎn)等創(chuàng)新應(yīng)用。04OVERALLARCHITECTURE應(yīng)用架構(gòu)設(shè)計(jì)基于RTC、IoT、邊緣計(jì)算、大數(shù)據(jù)以及AI等數(shù)字化技術(shù)與產(chǎn)品，為車廠搭建智能汽車應(yīng)用能力與支撐中臺(tái)總體架構(gòu)設(shè)計(jì)邊緣網(wǎng)關(guān)節(jié)點(diǎn)·IoTEdge邊緣計(jì)算節(jié)點(diǎn)·VM私有化存儲(chǔ)車聯(lián)網(wǎng)平臺(tái)·IoT實(shí)時(shí)影視頻·RTC大數(shù)據(jù)管理平臺(tái)·HadoopAI平臺(tái)·AI(AI-Inference&AITrain&AIAlgorithm)公有云網(wǎng)絡(luò)&計(jì)算&存儲(chǔ)&安全數(shù)字化服務(wù)（咨詢&方案&交付&運(yùn)維&重保）私有云私有云平臺(tái)&私有云一體機(jī)混合云IDC&設(shè)備托管&服務(wù)器租賃邊緣加速節(jié)點(diǎn)·CDN安全數(shù)據(jù)流通平臺(tái)·多方數(shù)據(jù)安全&隱私計(jì)算私有云平臺(tái)架構(gòu)德?tīng)柆斔接性破脚_(tái)資源虛擬化裸金屬納管統(tǒng)一資源管理與調(diào)度層基礎(chǔ)應(yīng)用層虛擬機(jī)GPU虛擬機(jī)裸金屬服務(wù)鏡像GuestOS彈性網(wǎng)卡云硬盤(pán)分布式存儲(chǔ)VPC彈性IPNAT網(wǎng)關(guān)負(fù)載均衡安全組VPN網(wǎng)關(guān)混合云接入PAAS能力層數(shù)據(jù)庫(kù)容器對(duì)象存儲(chǔ)大數(shù)據(jù)安全…消息隊(duì)列AI門(mén)戶DMSERP研發(fā)系統(tǒng)TSP大數(shù)據(jù)……系統(tǒng)底層資源應(yīng)用環(huán)境能力組件架構(gòu)保障運(yùn)維支撐本地機(jī)房1業(yè)務(wù)中心A本地機(jī)房2業(yè)務(wù)中心B異地機(jī)房1業(yè)務(wù)中心C新建機(jī)房X災(zāi)備中心N多地域支持&多數(shù)據(jù)中心管理&大規(guī)模集群部署&多架構(gòu)、多類型設(shè)備兼容&統(tǒng)一平臺(tái)管理&集中資源納管與池化&彈性架構(gòu)擴(kuò)展車聯(lián)網(wǎng)平臺(tái)架構(gòu)

物聯(lián)平臺(tái)視頻電力監(jiān)控人臉識(shí)別電氣火災(zāi)可燃?xì)怏w消防水壓閘機(jī)門(mén)禁停車管理應(yīng)用服務(wù)風(fēng)場(chǎng)應(yīng)用工單調(diào)度告警應(yīng)用協(xié)同應(yīng)用消防應(yīng)用安防應(yīng)用梯控應(yīng)用邊緣管理場(chǎng)景聯(lián)動(dòng)告警管理實(shí)時(shí)數(shù)據(jù)監(jiān)控?cái)?shù)據(jù)統(tǒng)計(jì)與報(bào)表統(tǒng)一數(shù)據(jù)接入和數(shù)據(jù)發(fā)布服務(wù)LAN/485/232/Zigbee/LoRa/WiFi/CAN邊緣設(shè)備消息路由函數(shù)計(jì)算消息緩存子設(shè)備驅(qū)動(dòng)子設(shè)備管理遠(yuǎn)程運(yùn)維云邊協(xié)同本地應(yīng)用本地Web設(shè)備管理權(quán)限安全設(shè)備調(diào)試IoTBroker（百萬(wàn)并發(fā)/億級(jí)連接）腳本解析監(jiān)控日志設(shè)備鑒權(quán)規(guī)則引擎數(shù)據(jù)存儲(chǔ)官方驅(qū)動(dòng)產(chǎn)品管理文件上傳RTC平臺(tái)架構(gòu)多城市覆蓋全球節(jié)點(diǎn)大帶寬保障云骨干專線多可用區(qū)能力層設(shè)備管理切網(wǎng)保持通話音頻通話云端錄制智能調(diào)節(jié)音效、耳返直播連麥視頻屬性設(shè)置多通話橫式網(wǎng)絡(luò)傳輸Qos3A處理屏幕共享接入層全平臺(tái)SDK（支持Web、Android、iOS、macOS、Windows、Electron多種客戶端的集成接入）RTC產(chǎn)品核心能力基礎(chǔ)層BGP智能調(diào)度算法傳輸層AES加密傳輸接入線路容災(zāi)開(kāi)放調(diào)度接口增值服務(wù)核心能力視頻通話多路混流抖動(dòng)緩沖音量大小回調(diào)視頻截圖網(wǎng)絡(luò)流媒體輸入自定義視頻數(shù)據(jù)旁路直播互動(dòng)白板私有化部署統(tǒng)一分布式存儲(chǔ)平臺(tái)架構(gòu)統(tǒng)一存儲(chǔ)管理門(mén)戶塊存儲(chǔ)接口RBD統(tǒng)一分布式存儲(chǔ)通用存儲(chǔ)集群存儲(chǔ)一體機(jī)集群歸檔集群塊存儲(chǔ)服務(wù)對(duì)象存儲(chǔ)服務(wù)文件存儲(chǔ)服務(wù)多副本/糾刪碼緩存加速數(shù)據(jù)重均衡多級(jí)故障域故障自恢復(fù)在線擴(kuò)/縮容WORM/多版本數(shù)據(jù)歸檔NFS共享CIFS共享訪問(wèn)控制審計(jì)日志目錄快照訪問(wèn)授權(quán)快照備份對(duì)象存儲(chǔ)接口S3丨NFS文件存儲(chǔ)接口NFS丨CIFS丨CEPHFS容器K8S-CSIKVM虛擬機(jī)大數(shù)據(jù)服務(wù)Web服務(wù)媒資服務(wù)物聯(lián)網(wǎng)服務(wù)文件共享數(shù)據(jù)歸檔分布式文件系統(tǒng)運(yùn)營(yíng)運(yùn)維集群管理資源管理監(jiān)控報(bào)警賬號(hào)管理審計(jì)日志升級(jí)擴(kuò)容平臺(tái)管理部署系統(tǒng)大數(shù)據(jù)平臺(tái)架構(gòu)SDPAgent代理層監(jiān)控告警權(quán)限認(rèn)證實(shí)時(shí)計(jì)算OLAP引擎離線計(jì)算NoteBook智能運(yùn)維交互式查詢數(shù)據(jù)科學(xué)工作臺(tái)作業(yè)管理元數(shù)據(jù)管理數(shù)據(jù)使用&作業(yè)管理計(jì)算引擎數(shù)據(jù)存儲(chǔ)數(shù)據(jù)集成平臺(tái)管理資源管理RangerZepplinHueMysql、AtlasMRHDFS&KUDU&存儲(chǔ)集群Elasticsearch、UESZookeeperFlink、SparkKylinHive、TezPresto、ImpalaYarnHBaseKafka、UKafkaSqoop、DataXFlume、Logstash、Kafka、UKafka、Beats大數(shù)據(jù)物理機(jī)、虛擬機(jī)、云主機(jī)等AlertManagerGrafanaInfluxDBNodeExporterPrometheusUSDPMonitorUDS、OozieAzkaban數(shù)據(jù)安全流通平臺(tái)架構(gòu)數(shù)據(jù)資產(chǎn)管理數(shù)據(jù)總線數(shù)據(jù)超市自助式報(bào)表數(shù)據(jù)可視化運(yùn)行監(jiān)控?cái)?shù)據(jù)挖掘融合計(jì)算層數(shù)據(jù)上傳與管理快速算法驗(yàn)證算法維護(hù)與管理主流開(kāi)發(fā)語(yǔ)言支持?jǐn)?shù)據(jù)質(zhì)量評(píng)估安全融合計(jì)算流程與規(guī)則管理結(jié)果使用規(guī)則交易規(guī)則審核規(guī)則項(xiàng)目管理安全保障云基礎(chǔ)安全防護(hù)數(shù)據(jù)管理權(quán)限安全分布式加密安全加密數(shù)據(jù)庫(kù)數(shù)據(jù)采集與管理數(shù)據(jù)清洗與拉通標(biāo)簽與畫(huà)像實(shí)時(shí)流計(jì)算離線批處理源數(shù)據(jù)層基礎(chǔ)層匯總層業(yè)務(wù)數(shù)據(jù)集群資源管理平臺(tái)運(yùn)維認(rèn)證授權(quán)審計(jì)數(shù)據(jù)集成作業(yè)開(kāi)發(fā)調(diào)度監(jiān)控?cái)?shù)據(jù)資產(chǎn)管理元數(shù)據(jù)管理數(shù)據(jù)質(zhì)量管理安全流通數(shù)據(jù)中臺(tái)邊緣節(jié)點(diǎn)行業(yè)應(yīng)用5G專網(wǎng)光纖專網(wǎng)虛擬專網(wǎng)數(shù)據(jù)應(yīng)用數(shù)據(jù)區(qū)資源管理數(shù)據(jù)處理節(jié)點(diǎn)1數(shù)據(jù)采集數(shù)據(jù)區(qū)資源管理數(shù)據(jù)處理節(jié)點(diǎn)2數(shù)據(jù)采集數(shù)據(jù)區(qū)資源管理數(shù)據(jù)處理節(jié)點(diǎn)3數(shù)據(jù)采集數(shù)據(jù)區(qū)資源管理數(shù)據(jù)處理節(jié)點(diǎn)n數(shù)據(jù)采集...THANKSa四川電信數(shù)據(jù)湖+數(shù)據(jù)中臺(tái)實(shí)施方案企業(yè)信息化部2021年2月數(shù)據(jù)驅(qū)動(dòng)數(shù)據(jù)湖數(shù)據(jù)資產(chǎn)數(shù)據(jù)治理23451回顧理解2數(shù)據(jù)驅(qū)動(dòng)構(gòu)建數(shù)據(jù)驅(qū)動(dòng)能力構(gòu)建數(shù)據(jù)驅(qū)動(dòng)場(chǎng)景構(gòu)建原子事件庫(kù)設(shè)計(jì)態(tài)能力策略庫(kù)調(diào)用生成事件ID及描述配置事件屬性和目錄樹(shù)位置原子事件規(guī)格發(fā)布原子事件測(cè)試原子事件上線事件調(diào)用說(shuō)明業(yè)務(wù)場(chǎng)景庫(kù)調(diào)用事件發(fā)布事件源配置：基于成熟事件源系統(tǒng)、基于數(shù)據(jù)資產(chǎn)的事件配置、基于解釋器的事件配置解析、計(jì)算、判斷規(guī)則：通過(guò)計(jì)算規(guī)則配置，解析事件源數(shù)據(jù)及計(jì)算結(jié)果是否滿足編排事件封裝規(guī)則：包含事件出入?yún)?、調(diào)用形式、周期、失效時(shí)間、其他限制條件等調(diào)用規(guī)則事件模板調(diào)用1.事件注冊(cè)-生成事件2.事件編排-數(shù)據(jù)源及加工配置3.事件發(fā)布-提供交互目錄樹(shù)事件生效并掛目錄樹(shù)支持業(yè)務(wù)場(chǎng)景庫(kù)和策略庫(kù)調(diào)用原子事件目錄樹(shù)更新事件目錄樹(shù)原子事件庫(kù)設(shè)計(jì)態(tài)根據(jù)業(yè)務(wù)需求的輸入及分析，整合包含業(yè)務(wù)系統(tǒng)和數(shù)據(jù)中臺(tái)的多事件源數(shù)據(jù)，在原子事件庫(kù)中完成原子事件的注冊(cè)、編排和發(fā)布全流程能力，強(qiáng)化事件管理、編排、開(kāi)放等多種能力，構(gòu)建數(shù)據(jù)驅(qū)動(dòng)的統(tǒng)一事件支撐管理能力庫(kù)，提供標(biāo)準(zhǔn)化的數(shù)智能力，助力數(shù)據(jù)中臺(tái)能力提升和價(jià)值演進(jìn)根據(jù)業(yè)務(wù)需求注冊(cè)事件原子事件ID原子事件描述原子事件目錄樹(shù)歸屬原子事件創(chuàng)建時(shí)間原子事件類型根據(jù)原子事件業(yè)務(wù)規(guī)格進(jìn)行事件編排原子事件所需數(shù)據(jù)業(yè)務(wù)系統(tǒng)數(shù)據(jù)資產(chǎn)數(shù)據(jù)中臺(tái)數(shù)據(jù)模型數(shù)據(jù)調(diào)度……數(shù)據(jù)獲取配置數(shù)據(jù)加工編排配置事件解析器基于SQL解析配置基于業(yè)務(wù)描述配置原子事件編排事件源解析規(guī)則事件源配置原子事件狀態(tài)…事件計(jì)算規(guī)則事件判斷規(guī)則事件封裝規(guī)則業(yè)務(wù)需求輸入原子事件運(yùn)行態(tài)事件編排邏輯觸發(fā)數(shù)據(jù)資產(chǎn)注冊(cè)源數(shù)據(jù)跨多系統(tǒng)數(shù)據(jù)源事件源系統(tǒng)事件源數(shù)據(jù)事件編排信息業(yè)務(wù)系統(tǒng)已有事件事件要素齊備系統(tǒng)事件觸發(fā)事件解析2 事件模型事件調(diào)度4

事件分析事件判斷而隨著135……數(shù)據(jù)目錄運(yùn)算數(shù)據(jù)模型生成調(diào)度規(guī)則注冊(cè)數(shù)據(jù)資產(chǎn)標(biāo)簽庫(kù)事件編排運(yùn)行查事件進(jìn)程查事件信息查事件接口事件所需數(shù)據(jù)匯聚事件ID事件類型事件對(duì)象事件參數(shù)1…基于原子事件的偵測(cè)事件所需數(shù)據(jù)用戶行為2 業(yè)務(wù)信息擴(kuò)展信息4

事件增強(qiáng)..135……APIkafka消息隊(duì)列…一站式事件數(shù)據(jù)匯聚：持續(xù)整合事件所需的數(shù)據(jù)；實(shí)時(shí)事件偵測(cè)：依托事件數(shù)據(jù)實(shí)時(shí)匯聚能力，高實(shí)效監(jiān)測(cè)事件觸發(fā)和執(zhí)行；編排事件執(zhí)行：依托數(shù)據(jù)中心現(xiàn)有能力，高效實(shí)現(xiàn)事件編排內(nèi)容，擴(kuò)大數(shù)據(jù)驅(qū)動(dòng)范圍和時(shí)效性；事件模板實(shí)例化事件推送/調(diào)用根據(jù)時(shí)間編排邏輯監(jiān)測(cè)事件并整合數(shù)據(jù)源大數(shù)據(jù)平臺(tái)支撐事件實(shí)例化：講設(shè)計(jì)態(tài)中的事件模板進(jìn)行實(shí)例化，封裝實(shí)例數(shù)據(jù)事件推送/調(diào)用：通過(guò)事件目錄樹(shù)實(shí)現(xiàn)事件調(diào)用響應(yīng)和主動(dòng)推送能力策略平臺(tái)調(diào)用推送停機(jī)客戶自主聯(lián)系智能客服實(shí)現(xiàn)業(yè)務(wù)實(shí)時(shí)高效的查詢和開(kāi)通事件驅(qū)動(dòng)-停復(fù)機(jī)場(chǎng)景支撐策略匹配事件偵測(cè)消息隊(duì)列事件推送根據(jù)時(shí)間編排邏輯監(jiān)測(cè)事件數(shù)據(jù)驅(qū)動(dòng)1、用戶停機(jī)，撥打10000號(hào)緊急復(fù)機(jī)10000號(hào)等客服平臺(tái)用戶緊急開(kāi)機(jī)清單（事件id、賬戶ID、信用額度、用戶信用等級(jí)、地市、用戶狀態(tài)）匹配事件事件解析事件分析事件判斷偵測(cè)事件數(shù)據(jù)中臺(tái)kafka事件模版實(shí)例化策略引擎動(dòng)作執(zhí)行策略1：用戶信用度是否為0計(jì)費(fèi)平臺(tái)啟停信用度接口復(fù)機(jī)接口是否策略2：查詢欠費(fèi)計(jì)費(fèi)平臺(tái)欠費(fèi)查詢接口返回欠費(fèi)詳情策略3:用戶信用額度>用戶欠費(fèi)<用戶信用等級(jí)*50元計(jì)費(fèi)平臺(tái)臨時(shí)授信接口復(fù)機(jī)接口策略4：復(fù)機(jī)是否成功CRM系統(tǒng)查詢用戶狀態(tài)接口返回是否復(fù)機(jī)成功策略平臺(tái)策略平臺(tái)事件中心將原子事件解析為業(yè)務(wù)事件，供協(xié)同中心進(jìn)行策略規(guī)則解析，生成工單任務(wù)信息，推動(dòng)給觸點(diǎn)系統(tǒng)觸點(diǎn)系統(tǒng)觸點(diǎn)系統(tǒng)接收工單任務(wù)信息后，進(jìn)行相應(yīng)的任務(wù)執(zhí)行，并將執(zhí)行結(jié)果反饋給策略平臺(tái)，供策略平臺(tái)進(jìn)行二次策略協(xié)同派單和執(zhí)行信息共享1事件流程驅(qū)動(dòng)2345電話、短信、微信渠道（IVR,NGCC,公眾號(hào)...）能力開(kāi)放和注智客戶停復(fù)機(jī)場(chǎng)景事件捕捉客戶停復(fù)機(jī)相關(guān)數(shù)據(jù)整合分析智能偵測(cè)停機(jī)客戶復(fù)機(jī)訴求數(shù)據(jù)驅(qū)動(dòng)服務(wù)能力數(shù)字化智能服務(wù)前臺(tái)場(chǎng)景判斷和策略匹配查詢業(yè)務(wù)系統(tǒng)執(zhí)行結(jié)果和封裝策略執(zhí)行并調(diào)用能力中心能力服務(wù)前臺(tái)實(shí)時(shí)查詢停復(fù)機(jī)策略接口數(shù)據(jù)驅(qū)動(dòng)停復(fù)機(jī)場(chǎng)景支撐能力打造以數(shù)據(jù)中臺(tái)為底座事件源采集3數(shù)據(jù)湖構(gòu)建數(shù)據(jù)湖構(gòu)建數(shù)據(jù)湖入湖能力構(gòu)建數(shù)據(jù)湖的分析開(kāi)發(fā)能力構(gòu)建數(shù)據(jù)服務(wù)體系構(gòu)建權(quán)限安全體系總述數(shù)據(jù)湖是一套針對(duì)混搭數(shù)據(jù)庫(kù)架構(gòu)，具備數(shù)據(jù)采集、數(shù)據(jù)計(jì)算、數(shù)據(jù)訪問(wèn)、數(shù)據(jù)管理的技術(shù)架構(gòu)；通過(guò)企業(yè)級(jí)數(shù)據(jù)資產(chǎn)，數(shù)據(jù)湖和數(shù)據(jù)中臺(tái)，為不同級(jí)別的使用對(duì)象提供數(shù)據(jù)分析、開(kāi)發(fā)的原子能力。數(shù)據(jù)匯聚數(shù)據(jù)湖：原生數(shù)據(jù)，采集、同步形成，或直接存儲(chǔ)在生產(chǎn)系統(tǒng)數(shù)據(jù)中臺(tái)：具備共享性的整合、加工數(shù)據(jù)數(shù)據(jù)探索數(shù)據(jù)資產(chǎn)統(tǒng)一納管；提供基于數(shù)據(jù)湖、數(shù)據(jù)中臺(tái)的數(shù)據(jù)探索數(shù)據(jù)生產(chǎn)提供多套計(jì)算引擎和場(chǎng)景開(kāi)發(fā)，滿足實(shí)時(shí)大規(guī)模數(shù)據(jù)預(yù)測(cè)、大寬表數(shù)據(jù)加工、大數(shù)據(jù)信息掃描等生產(chǎn)需求。數(shù)據(jù)服務(wù)提供統(tǒng)一的元數(shù)據(jù)管理，通過(guò)直接讀取本地化的元數(shù)據(jù)信息，即可實(shí)現(xiàn)同源異構(gòu)、異源異構(gòu)和異源同構(gòu)的數(shù)據(jù)訪問(wèn)。典型場(chǎng)景統(tǒng)一采集入湖營(yíng)服實(shí)時(shí)數(shù)據(jù)入湖人臉圖片數(shù)據(jù)入湖綜合告警典型場(chǎng)景：跨域業(yè)務(wù)的探索分析網(wǎng)絡(luò)動(dòng)態(tài)資源樹(shù)原子能力平臺(tái)典型場(chǎng)景：volte實(shí)時(shí)數(shù)據(jù)分析廳店實(shí)時(shí)數(shù)據(jù)分析多維實(shí)時(shí)指標(biāo)典型場(chǎng)景：一站式檢索IDE實(shí)時(shí)分析工具基于數(shù)據(jù)湖+數(shù)據(jù)中心的新一代數(shù)據(jù)中臺(tái)實(shí)施舉措序號(hào)關(guān)鍵能力建設(shè)內(nèi)容1構(gòu)建數(shù)據(jù)湖構(gòu)建適應(yīng)于不同類型數(shù)據(jù)的存儲(chǔ)能力，支持?jǐn)?shù)據(jù)入湖基于全域數(shù)據(jù)資產(chǎn)目錄，構(gòu)建生產(chǎn)系統(tǒng)數(shù)據(jù)快速采集的存儲(chǔ)配置策略、數(shù)據(jù)落地規(guī)則初步形成數(shù)據(jù)湖成果構(gòu)建數(shù)據(jù)湖的視圖，清晰數(shù)據(jù)湖構(gòu)成和數(shù)據(jù)分布（在數(shù)據(jù)資產(chǎn)管理中落地）2構(gòu)建數(shù)據(jù)入湖能力構(gòu)建生產(chǎn)區(qū)到原生區(qū)數(shù)據(jù)的按需同步能力支持按資產(chǎn)目錄驅(qū)動(dòng)的數(shù)據(jù)入湖流程管理構(gòu)建多種異構(gòu)數(shù)據(jù)源的接入能力構(gòu)建多樣化的入湖開(kāi)發(fā)模板，如：引導(dǎo)式、場(chǎng)景式等多種入湖能力3構(gòu)建全域數(shù)據(jù)的開(kāi)發(fā)能力構(gòu)建統(tǒng)一的IDE分析開(kāi)發(fā)工具，支持對(duì)多種異構(gòu)數(shù)據(jù)資源的支撐能力構(gòu)建支持即席分析探索能力，屏蔽底層物理存儲(chǔ)4構(gòu)建數(shù)據(jù)服務(wù)體系構(gòu)建統(tǒng)一的數(shù)據(jù)服務(wù)框架，按場(chǎng)景驅(qū)動(dòng)服務(wù)開(kāi)發(fā)構(gòu)建數(shù)據(jù)從注冊(cè)、開(kāi)發(fā)、上線、授權(quán)的全生命周期管理構(gòu)建基于實(shí)時(shí)計(jì)算框架的數(shù)據(jù)服務(wù)，賦能實(shí)時(shí)業(yè)務(wù)場(chǎng)景5構(gòu)建權(quán)限安全體系構(gòu)建邏輯租戶、團(tuán)隊(duì)、用戶模型體系構(gòu)建數(shù)據(jù)資源的租戶權(quán)限管理體系構(gòu)建集群資源分配、任務(wù)動(dòng)態(tài)策略管理能力結(jié)構(gòu)化非結(jié)構(gòu)化數(shù)據(jù)湖數(shù)據(jù)架構(gòu)入湖標(biāo)準(zhǔn)明確數(shù)據(jù)屬主數(shù)據(jù)標(biāo)準(zhǔn)細(xì)則入湖方式注冊(cè)元數(shù)據(jù)數(shù)據(jù)源規(guī)范認(rèn)證物理入湖虛擬入湖離線實(shí)時(shí)邏輯數(shù)據(jù)湖物理表虛擬表賬務(wù)域事件域參與人地域域管理域營(yíng)銷域計(jì)費(fèi)域賬務(wù)域管理域資源域客戶域網(wǎng)絡(luò)域PULL（拉）+PUSH（推）產(chǎn)品域資源域其他域財(cái)務(wù)域安全域其他域邏輯統(tǒng)一數(shù)據(jù)類型、業(yè)務(wù)分策略存儲(chǔ)統(tǒng)一元數(shù)據(jù)語(yǔ)義定義、拉通、管理類型多樣結(jié)構(gòu)化：IT業(yè)務(wù)交易、流程、管理非結(jié)構(gòu)化：網(wǎng)絡(luò)設(shè)備產(chǎn)生文本、流數(shù)據(jù)原始記錄湖內(nèi)數(shù)據(jù)不轉(zhuǎn)換、清洗，保留最原始特征，提供更多分析可能入湖標(biāo)準(zhǔn)明確數(shù)據(jù)屬主執(zhí)行數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)質(zhì)量評(píng)估元數(shù)據(jù)注冊(cè)從業(yè)務(wù)出發(fā)，以用促建、急用先行的建設(shè)策略，數(shù)據(jù)中心統(tǒng)一規(guī)劃，各領(lǐng)域配合執(zhí)行，明確入湖的數(shù)據(jù)責(zé)任方，遵循安全、負(fù)責(zé)、易用的原則構(gòu)建整個(gè)數(shù)據(jù)湖體系。數(shù)據(jù)源內(nèi)部數(shù)據(jù)外部數(shù)據(jù)BSSOSSMSS網(wǎng)絡(luò)專業(yè)···網(wǎng)絡(luò)社交···

數(shù)據(jù)湖目標(biāo)入湖標(biāo)準(zhǔn)要求數(shù)據(jù)湖存儲(chǔ)架構(gòu)-構(gòu)建低存儲(chǔ)成本的數(shù)據(jù)湖統(tǒng)一存儲(chǔ)統(tǒng)一計(jì)算MPP（AntDB）RDBMS（TelePG）流數(shù)據(jù)統(tǒng)一采集流處理交互式查詢微批處理批處理多維分析文本搜索數(shù)據(jù)湖流數(shù)據(jù)處理網(wǎng)絡(luò)爬蟲(chóng)流式采集批量采集CDC采集HDFSKafkaHBaseKylinES結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)時(shí)序查詢歸檔Tidb/時(shí)序數(shù)據(jù)庫(kù)多維分析復(fù)雜分析，時(shí)序數(shù)據(jù)分析全文檢索以HDFS為核心構(gòu)建大數(shù)據(jù)湖，以廉價(jià)成本（糾刪碼）將數(shù)據(jù)進(jìn)行持久化，數(shù)據(jù)采集進(jìn)來(lái)后由HDFS存儲(chǔ)原始數(shù)據(jù)，其他數(shù)據(jù)存儲(chǔ)按需采用HDFS、Redis、MPP（AntDB）等技術(shù)。二階段一階段基于數(shù)據(jù)湖的整體能力架構(gòu)開(kāi)發(fā)能力檢索同步采集賦權(quán)解析掃描計(jì)算消息安全管理能力賬號(hào)管理租戶管理鑒權(quán)服務(wù)調(diào)用服務(wù)開(kāi)放引擎服務(wù)調(diào)用服務(wù)訂閱服務(wù)治理服務(wù)鑒權(quán)對(duì)外服務(wù)引擎數(shù)據(jù)監(jiān)控服務(wù)監(jiān)控質(zhì)量監(jiān)控文件類大數(shù)據(jù)基礎(chǔ)平臺(tái)paas平臺(tái)分析類圖片類人臉庫(kù)指標(biāo)庫(kù)爬蟲(chóng)數(shù)據(jù)行業(yè)數(shù)據(jù)地市報(bào)表證件庫(kù)基礎(chǔ)能力sparkMRTezFlinkiceberghbaseAlluxioredis計(jì)算類存儲(chǔ)類數(shù)據(jù)服務(wù)引擎企業(yè)內(nèi)部應(yīng)用集團(tuán)dcoos外部應(yīng)用請(qǐng)求監(jiān)控服務(wù)開(kāi)放引擎提供界面化服務(wù)訂閱、服務(wù)發(fā)布、服務(wù)治理開(kāi)發(fā)能力提供基于組件化的采集、開(kāi)發(fā)、查詢、交換、分析能力基礎(chǔ)能力提供實(shí)時(shí)、離線、批流一體的底層計(jì)算存儲(chǔ)組件的服務(wù)封裝能力安全管理中心實(shí)現(xiàn)不同資源存儲(chǔ)租戶間數(shù)據(jù)訪問(wèn)的統(tǒng)一權(quán)限管理運(yùn)營(yíng)監(jiān)控提供不同環(huán)節(jié)處理的任務(wù)、過(guò)程、操作日志和狀態(tài)監(jiān)控?cái)?shù)據(jù)共享基于數(shù)據(jù)湖的混搭數(shù)據(jù)庫(kù)架構(gòu)設(shè)計(jì)，通過(guò)服務(wù)提供的形式，用于解決數(shù)據(jù)查詢、數(shù)據(jù)分析、數(shù)據(jù)共享、數(shù)據(jù)預(yù)測(cè)等業(yè)務(wù)需求。

數(shù)據(jù)湖整體能力支撐運(yùn)營(yíng)監(jiān)控基于數(shù)據(jù)湖的開(kāi)發(fā)管理組織規(guī)劃數(shù)據(jù)使用開(kāi)發(fā)參與對(duì)象開(kāi)發(fā)者開(kāi)發(fā)者開(kāi)發(fā)者開(kāi)發(fā)者數(shù)據(jù)分析者數(shù)據(jù)分析角色數(shù)據(jù)運(yùn)營(yíng)角色數(shù)據(jù)開(kāi)發(fā)角色數(shù)據(jù)分析角色：根據(jù)需求場(chǎng)景及個(gè)人業(yè)務(wù)理解，產(chǎn)生需求使用系統(tǒng)，提供數(shù)據(jù)目錄檢索、資產(chǎn)詳情查看、IDE數(shù)據(jù)分析探索生成分析結(jié)果數(shù)據(jù)開(kāi)發(fā)角色：對(duì)接需求分析師，拿到需求和制定開(kāi)發(fā)計(jì)劃對(duì)需要數(shù)據(jù)發(fā)起入湖流程入湖任務(wù)監(jiān)控，數(shù)據(jù)問(wèn)題處理反饋數(shù)據(jù)分析者開(kāi)發(fā)者數(shù)據(jù)分析者運(yùn)營(yíng)者運(yùn)營(yíng)者運(yùn)營(yíng)者運(yùn)營(yíng)者團(tuán)隊(duì)1團(tuán)隊(duì)2數(shù)據(jù)分析者平臺(tái)管理者平臺(tái)管理者數(shù)據(jù)運(yùn)營(yíng)角色：查看數(shù)據(jù)湖的整體資產(chǎn)情況查看數(shù)據(jù)入湖的任務(wù)執(zhí)行監(jiān)控查看數(shù)據(jù)湖抽樣數(shù)據(jù)的存儲(chǔ)情況查看各自團(tuán)隊(duì)數(shù)據(jù)安全權(quán)限分配和入湖處理平臺(tái)管理角色合理的角色分工清晰的流程處理平臺(tái)管理角色：負(fù)責(zé)分配用戶的系統(tǒng)資源負(fù)責(zé)創(chuàng)建平臺(tái)賬號(hào)負(fù)責(zé)分配平臺(tái)工具的使用權(quán)限負(fù)責(zé)保障平臺(tái)的穩(wěn)定運(yùn)行數(shù)據(jù)入湖能力-即時(shí)數(shù)據(jù)自助探索分析

數(shù)據(jù)湖區(qū)（私有租戶）1、查找需要模型3、獲取樣例數(shù)據(jù)4、數(shù)據(jù)開(kāi)發(fā)5、數(shù)據(jù)洞察&分析2、查看資產(chǎn)詳情對(duì)接安全管理平臺(tái)數(shù)據(jù)同步/異步傳輸機(jī)制數(shù)據(jù)抽樣標(biāo)準(zhǔn)元數(shù)據(jù)資產(chǎn)檢索元數(shù)據(jù)檢索（模型名、字段名、口徑描述）

開(kāi)發(fā)IDE模型目錄一鍵集成開(kāi)發(fā)IDE基于數(shù)據(jù)內(nèi)容的檢索（抽樣數(shù)據(jù)、ES存儲(chǔ)）高效分析查詢基于數(shù)據(jù)開(kāi)發(fā)結(jié)果對(duì)接可視化組件快速完成分析提供保存分析結(jié)果歷史，方便持續(xù)性的趨勢(shì)洞察關(guān)鍵能力資產(chǎn)目錄基于數(shù)據(jù)湖中全域的數(shù)據(jù)資產(chǎn)目錄，提供便捷數(shù)據(jù)分析入口，引導(dǎo)式發(fā)起即時(shí)數(shù)據(jù)分析的全場(chǎng)景，完成自助數(shù)據(jù)探索分析。資產(chǎn)詳情資產(chǎn)詳情可視IDE業(yè)務(wù)元數(shù)據(jù)（業(yè)務(wù)口徑、頻率、全量、來(lái)源系統(tǒng)、存儲(chǔ)周期等）技術(shù)元數(shù)據(jù)（數(shù)據(jù)源、字段、類型、長(zhǎng)度、分區(qū)等）管理元數(shù)據(jù)（五性）文件/表同步方式支持多樣數(shù)據(jù)庫(kù)類型數(shù)據(jù)分析人員運(yùn)營(yíng)要求要求安全平臺(tái)滿足實(shí)時(shí)抽取同步響應(yīng)及時(shí)要求各域數(shù)據(jù)運(yùn)營(yíng)人員抽樣數(shù)據(jù)安全性需要權(quán)限管控

要求平臺(tái)使用人員嚴(yán)格執(zhí)行入湖流程標(biāo)準(zhǔn)

抽樣數(shù)據(jù)直采效率更高，可探索嘗試

入湖模版推薦數(shù)據(jù)入湖能力-支撐按需快速入湖的自助流程現(xiàn)狀：目前存在兩套采集平臺(tái)，兩次采集的問(wèn)題，數(shù)據(jù)延遲，數(shù)據(jù)同步差異不可控，問(wèn)題定位復(fù)雜，采集數(shù)據(jù)門(mén)檻高。目標(biāo)：實(shí)現(xiàn)多種異構(gòu)數(shù)據(jù)源的直接采集，提供簡(jiǎn)單高效的入湖能力，提升原生區(qū)數(shù)據(jù)的可靠性，將這些異構(gòu)數(shù)據(jù)同步到數(shù)據(jù)湖中統(tǒng)一存儲(chǔ)，提供多樣化的入湖開(kāi)發(fā)模板，如：引導(dǎo)式、場(chǎng)景式等舉措：資產(chǎn)目錄驅(qū)動(dòng)：通過(guò)資產(chǎn)目錄檢索，定位到需要采集的生產(chǎn)區(qū)元數(shù)據(jù)，選擇資產(chǎn)自動(dòng)注冊(cè)服務(wù)能力，一鍵注冊(cè)到原生區(qū)，然后選擇需要的采集原子能力，完成配置后，數(shù)據(jù)一鍵入湖入湖模板：支撐流程驅(qū)動(dòng)的引導(dǎo)式開(kāi)發(fā)和場(chǎng)景化的業(yè)務(wù)模板異構(gòu)數(shù)據(jù)源支撐：RDBMS、MPP、文件、消息等。自定義入湖策略：模型的數(shù)據(jù)來(lái)源、頻度、增全量、定責(zé)以邏輯集中，物理分散為原則，以實(shí)現(xiàn)數(shù)據(jù)的統(tǒng)一采集、統(tǒng)一存儲(chǔ)、統(tǒng)一管理為目的，打造標(biāo)準(zhǔn)化的入湖能力，實(shí)現(xiàn)企業(yè)級(jí)數(shù)據(jù)湖。屏蔽數(shù)據(jù)源異構(gòu)技術(shù)差異，實(shí)現(xiàn)透明、可編排的采集開(kāi)發(fā)能力，快速實(shí)現(xiàn)業(yè)務(wù)按需入湖。典型應(yīng)用場(chǎng)景：快速按需完成產(chǎn)品設(shè)計(jì)場(chǎng)景數(shù)據(jù)入湖企業(yè)數(shù)據(jù)目錄P1：通過(guò)數(shù)據(jù)目錄定位需要的模型數(shù)據(jù)數(shù)據(jù)資產(chǎn)詳情P2：查看模型數(shù)據(jù)的詳情，包括：業(yè)務(wù)口徑、管理口徑、血緣依賴信息等，確認(rèn)數(shù)據(jù)使用場(chǎng)景P4：調(diào)整實(shí)際的入湖策略，如數(shù)據(jù)來(lái)源、頻度、全量或增量等，完成最終任務(wù)的發(fā)布上線策略調(diào)整并上線入湖數(shù)據(jù)確認(rèn)P5：通過(guò)IDE探索平臺(tái)確認(rèn)數(shù)據(jù)查看業(yè)務(wù)含義按需調(diào)整策略分析入湖數(shù)據(jù)P3：基于模型的元數(shù)據(jù)信息，自動(dòng)推薦適合該場(chǎng)景的數(shù)據(jù)入湖模版并加載構(gòu)建入湖場(chǎng)景低代碼快速開(kāi)發(fā)入湖組件指標(biāo)注冊(cè)指標(biāo)服務(wù)開(kāi)放FTP組件指標(biāo)標(biāo)準(zhǔn)腳本組件消息組件自定義組件大數(shù)據(jù)組件MPP組件統(tǒng)一IDE編排組件關(guān)系型組件數(shù)據(jù)開(kāi)發(fā)角色運(yùn)營(yíng)要求要求安全平臺(tái)滿足即時(shí)采集策略的流程配置及實(shí)效性要求具備直采條件的建議直接拉數(shù)據(jù)，源系統(tǒng)分配安全賬號(hào)數(shù)據(jù)湖開(kāi)發(fā)分析能力-可視化IDE工作臺(tái)搭建統(tǒng)一IDE開(kāi)發(fā)平臺(tái)，管理底層混搭的數(shù)據(jù)存儲(chǔ)架構(gòu)，屏蔽底層差異性，通過(guò)SQL編寫(xiě)、參數(shù)配置、流程調(diào)度，實(shí)現(xiàn)跨平臺(tái)、跨數(shù)據(jù)源的在線數(shù)據(jù)分析工具，通過(guò)可視化界面操作、資產(chǎn)全文檢索能力和內(nèi)置工具，實(shí)現(xiàn)快速找數(shù)據(jù)、即時(shí)分析數(shù)據(jù)。數(shù)據(jù)注冊(cè)管理提供統(tǒng)一的多種異構(gòu)數(shù)據(jù)源的元數(shù)據(jù)采集能力，支持主流的RDBMS、HIVE、ES數(shù)據(jù)源的管理；根據(jù)采集上來(lái)的數(shù)據(jù)源類型進(jìn)行數(shù)據(jù)訪問(wèn)封裝，形成統(tǒng)一IDE查詢能力；支持對(duì)指定數(shù)據(jù)源數(shù)據(jù)的分析探索能力。數(shù)據(jù)開(kāi)發(fā)處理消息管理：提供離線和實(shí)時(shí)可視化開(kāi)發(fā)平臺(tái)封裝開(kāi)發(fā)函數(shù)組件，屏蔽底層細(xì)節(jié)，降低開(kāi)發(fā)門(mén)檻，提高開(kāi)發(fā)效率；豐富的組件可以支持多種數(shù)據(jù)開(kāi)發(fā)分析的場(chǎng)景，通過(guò)編排可快速實(shí)現(xiàn)業(yè)務(wù)場(chǎng)景數(shù)據(jù)訪問(wèn)日志記錄開(kāi)發(fā)者詳細(xì)查詢、開(kāi)發(fā)操作軌跡日志；開(kāi)發(fā)者可以查詢歷史訪問(wèn)信息。智能SQL

IDE標(biāo)準(zhǔn)SQL語(yǔ)法Hdfs組件Hive組件Sql通用組件文件組件腳本組件命令組件控制組件函數(shù)組件質(zhì)量組件數(shù)據(jù)訪問(wèn)適配器豐富開(kāi)發(fā)組件庫(kù)hdfshivemysqlhbase數(shù)據(jù)開(kāi)發(fā)&數(shù)據(jù)分析角色①數(shù)據(jù)需求想法②檢索湖數(shù)據(jù)和探索分析③分析結(jié)果呈現(xiàn)或應(yīng)用數(shù)據(jù)湖的數(shù)據(jù)開(kāi)發(fā)能力-雙集群研發(fā)工作區(qū)建設(shè)在數(shù)據(jù)湖+數(shù)據(jù)中臺(tái)核心能力基礎(chǔ)上，基于數(shù)據(jù)統(tǒng)一存儲(chǔ)統(tǒng)一管理的原則，構(gòu)建多處理平臺(tái)工作區(qū)環(huán)境，支持?jǐn)?shù)據(jù)研發(fā)測(cè)試、探索開(kāi)發(fā)場(chǎng)景。1、提供數(shù)據(jù)中臺(tái)研發(fā)環(huán)境開(kāi)發(fā)學(xué)習(xí)能力作為數(shù)據(jù)中臺(tái)的工作區(qū)開(kāi)發(fā)環(huán)境，具備敏捷開(kāi)發(fā)功能，快速實(shí)現(xiàn)模型開(kāi)發(fā)、數(shù)據(jù)開(kāi)發(fā)、作業(yè)調(diào)度和一鍵發(fā)布能力，并增加JOB及HQL語(yǔ)意審核，上線發(fā)布前試運(yùn)行效率評(píng)估。

作為關(guān)鍵基礎(chǔ)業(yè)務(wù)數(shù)據(jù)備份，支撐極端場(chǎng)景下生產(chǎn)環(huán)境業(yè)務(wù)數(shù)據(jù)的恢復(fù)。作為大數(shù)據(jù)學(xué)習(xí)平臺(tái)，提供操作系統(tǒng)、大數(shù)據(jù)組件、數(shù)據(jù)實(shí)例的學(xué)習(xí)環(huán)境。2、提供跨區(qū)訪問(wèn)、跨區(qū)讀取探索開(kāi)發(fā)能力可提供跨區(qū)訪問(wèn)數(shù)據(jù)中臺(tái)產(chǎn)品區(qū)、數(shù)據(jù)湖原生區(qū)的開(kāi)發(fā)能力；可提供跨區(qū)實(shí)時(shí)讀取數(shù)據(jù)中臺(tái)產(chǎn)品區(qū)、數(shù)據(jù)湖原生區(qū)數(shù)據(jù)能力提供敏捷開(kāi)發(fā)能力，通過(guò)一鍵發(fā)布實(shí)現(xiàn)工作區(qū)研發(fā)成果發(fā)布到產(chǎn)品區(qū)。3、提供半結(jié)構(gòu)化數(shù)據(jù)探索開(kāi)發(fā)能力，實(shí)現(xiàn)抽樣分析工作區(qū)原生區(qū)歷史庫(kù)采集類數(shù)據(jù)同步庫(kù)/復(fù)制庫(kù)虛擬數(shù)據(jù)對(duì)象類數(shù)據(jù)語(yǔ)音庫(kù)/人臉庫(kù)流式數(shù)據(jù)產(chǎn)品區(qū)關(guān)聯(lián)數(shù)據(jù)標(biāo)簽指標(biāo)整合數(shù)據(jù)經(jīng)營(yíng)類關(guān)聯(lián)數(shù)據(jù)預(yù)測(cè)分析整合數(shù)據(jù)注智類生產(chǎn)區(qū)資產(chǎn)信息資產(chǎn)檢索跨區(qū)訪問(wèn)跨區(qū)讀取發(fā)起入湖需求探索開(kāi)發(fā)敏捷開(kāi)發(fā)數(shù)據(jù)采樣、測(cè)試資產(chǎn)注冊(cè)任務(wù)調(diào)度一鍵發(fā)布探索學(xué)習(xí)系統(tǒng)類學(xué)習(xí)數(shù)據(jù)類探索組件類學(xué)習(xí)智能類探索數(shù)據(jù)湖的數(shù)據(jù)服務(wù)能力-高效安全的服務(wù)開(kāi)放共享文件服務(wù)API服務(wù)消息服務(wù)

在數(shù)據(jù)湖+數(shù)據(jù)中臺(tái)核心能力基礎(chǔ)上，基于全域數(shù)據(jù)湖資產(chǎn)目錄，提供快速對(duì)湖內(nèi)數(shù)據(jù)進(jìn)行數(shù)據(jù)開(kāi)放能力，統(tǒng)一服務(wù)創(chuàng)建和發(fā)布流程，數(shù)據(jù)開(kāi)放安全可控。數(shù)據(jù)服務(wù)引擎統(tǒng)一配置統(tǒng)一管理統(tǒng)一監(jiān)管統(tǒng)一運(yùn)營(yíng)集團(tuán)上傳驅(qū)動(dòng)集團(tuán)實(shí)時(shí)業(yè)務(wù)驅(qū)動(dòng)生產(chǎn)運(yùn)營(yíng)業(yè)務(wù)驅(qū)動(dòng)資產(chǎn)目錄資源注冊(cè)資源發(fā)現(xiàn)原生區(qū)產(chǎn)品區(qū)場(chǎng)景驅(qū)動(dòng)數(shù)據(jù)服務(wù)管理提供統(tǒng)一的API創(chuàng)建、測(cè)試、發(fā)布、下線生命周期管理；支持Mysql、Hbase、Oracle、Redis、Http、文件多種數(shù)據(jù)源的數(shù)據(jù)開(kāi)放能力；提供統(tǒng)一服務(wù)不同的安全訪問(wèn)策略，如：字段個(gè)數(shù)、不同字段脫敏；提供API的調(diào)用管控，如：流量控制、調(diào)用次數(shù)等熔斷控制；提供應(yīng)用訪問(wèn)的APPKEY申請(qǐng)管理能力，保障服務(wù)安全接入數(shù)據(jù)服務(wù)運(yùn)營(yíng)提供整體API的整體概覽：上線總數(shù)、調(diào)用次數(shù)、成功次數(shù)、服務(wù)調(diào)用排行等；提供對(duì)API冷熱度分析評(píng)估，指導(dǎo)不常用服務(wù)下線處理，對(duì)調(diào)用次數(shù)較高服務(wù)進(jìn)行重點(diǎn)服務(wù)保障提供全面的服務(wù)調(diào)用日志審計(jì)，對(duì)每類應(yīng)用、每個(gè)接口的調(diào)用分組統(tǒng)計(jì)和分析調(diào)用趨勢(shì)，指導(dǎo)資源優(yōu)化數(shù)據(jù)服務(wù)開(kāi)放目標(biāo)：統(tǒng)一服務(wù)開(kāi)放平臺(tái)數(shù)據(jù)湖的數(shù)據(jù)服務(wù)能力：資產(chǎn)一站式檢索Parquet樣例數(shù)據(jù)非/半結(jié)構(gòu)化文本HDFS文件消息圖片/音視頻混搭數(shù)據(jù)存儲(chǔ)圖文本/音頻文本資產(chǎn)目錄數(shù)據(jù)服務(wù)引擎資源管理結(jié)構(gòu)化文本產(chǎn)品區(qū)生產(chǎn)區(qū)元數(shù)據(jù)原生區(qū)檢索查詢結(jié)果顯示結(jié)果返回搭建全文數(shù)據(jù)檢索引擎，將完整的信息，包括資產(chǎn)、位置、數(shù)據(jù)、索引全部轉(zhuǎn)化為計(jì)算機(jī)可以識(shí)別、處理的信息單元，存儲(chǔ)到提速引擎中，形成資產(chǎn)路由，以實(shí)現(xiàn)一站式的全文檢索。檢索引擎多維檢索數(shù)據(jù)元數(shù)據(jù)（表、字段、業(yè)務(wù)口徑）血緣緯度查詢基于業(yè)務(wù)過(guò)程緯度查詢（梳理業(yè)務(wù)過(guò)程，定義業(yè)務(wù)過(guò)程中保護(hù)的實(shí)體模型進(jìn)行建模）；高級(jí)檢索存儲(chǔ)引擎：基于抽樣數(shù)據(jù)（結(jié)構(gòu)、非結(jié)構(gòu)）進(jìn)行模型與數(shù)據(jù)的索引構(gòu)建，內(nèi)存存儲(chǔ)；快速檢索：屏蔽底層底層數(shù)據(jù)差異性，構(gòu)建統(tǒng)一搜索引擎，完成數(shù)據(jù)的檢索呈現(xiàn)；

資產(chǎn)快速檢索數(shù)據(jù)快速檢索索引緩存數(shù)據(jù)湖資源安全體系-靈活的團(tuán)隊(duì)管理模型目標(biāo)：支持多團(tuán)隊(duì)、多廠商使用，構(gòu)建團(tuán)隊(duì)、租戶、賬號(hào)的權(quán)限資源管控體系支持不同團(tuán)隊(duì)下計(jì)算存儲(chǔ)資源的配額管控，解決集群內(nèi)資源的高效使用舉措：團(tuán)隊(duì)賬號(hào)管理：梳理現(xiàn)有系統(tǒng)賬號(hào)、組織機(jī)構(gòu)、角色、權(quán)限管理，引入新的團(tuán)隊(duì)賬號(hào)體系管理，構(gòu)建多租戶模式的工作空間管理體系租戶資源管理：建立邏輯租戶的資源管理體系，管理團(tuán)隊(duì)租戶下集群賬戶、用戶、角色、權(quán)限，明確各角色職責(zé)和開(kāi)通流程統(tǒng)一租戶模型集群資源用戶用戶用戶用戶資源實(shí)例資源實(shí)例資源實(shí)例資源實(shí)例YARN計(jì)算資源隊(duì)列隊(duì)列隊(duì)列團(tuán)隊(duì)租戶團(tuán)隊(duì)租戶以開(kāi)發(fā)團(tuán)隊(duì)申請(qǐng)入住為例，需要申請(qǐng)租戶并綁定集群資源獲取數(shù)據(jù)和開(kāi)發(fā)。創(chuàng)建團(tuán)隊(duì)并綁定用戶，以團(tuán)隊(duì)為單位配置該團(tuán)隊(duì)集群資源配額（vcore、mem、存儲(chǔ)）。創(chuàng)建租戶，租戶綁定數(shù)據(jù)資源實(shí)例，可以針對(duì)應(yīng)用場(chǎng)景綁定需要的存儲(chǔ)計(jì)算資源。給團(tuán)隊(duì)用戶分配對(duì)應(yīng)租戶資源，一個(gè)用戶可以擁有多個(gè)租戶資源的權(quán)限申請(qǐng)。開(kāi)發(fā)用戶對(duì)模型的訪問(wèn)權(quán)限通過(guò)統(tǒng)一數(shù)據(jù)訪問(wèn)權(quán)限控制。實(shí)現(xiàn)集群統(tǒng)一的資源管理，以租戶為對(duì)象實(shí)現(xiàn)集群資源的按需分配，并且需要根據(jù)運(yùn)營(yíng)體系實(shí)現(xiàn)資源的授權(quán)管理。支持租戶的角色定義及用戶授權(quán)，滿足對(duì)租戶管理的訴求。實(shí)現(xiàn)集群資源的配額管控，更合理的使用集群資源。100vcore1024M2T團(tuán)隊(duì)1150vcore1024M1T團(tuán)隊(duì)2數(shù)據(jù)湖資源安全體系-跨平臺(tái)用戶權(quán)限統(tǒng)一管理租戶開(kāi)通賬號(hào)開(kāi)通資源分配數(shù)據(jù)授權(quán)資源信息管理大數(shù)據(jù)基礎(chǔ)平臺(tái)paas平臺(tái)分析類圖片類人臉庫(kù)指標(biāo)庫(kù)爬蟲(chóng)數(shù)據(jù)行業(yè)數(shù)據(jù)地市報(bào)表證件庫(kù)文件類用戶權(quán)限統(tǒng)一管理服務(wù)引擎（servicebroker）資源注冊(cè)租戶創(chuàng)建賬號(hào)綁定租戶資源分配數(shù)據(jù)授權(quán)租戶同步賬號(hào)開(kāi)通資源分配數(shù)據(jù)授權(quán)12345圖例資源租戶統(tǒng)一管理提供統(tǒng)一的資源管理模塊，將原生區(qū)和產(chǎn)品區(qū)資源管理和租戶管理納入統(tǒng)一的管理。將集群資源注冊(cè)，租戶開(kāi)通，資源分配，服務(wù)分配，數(shù)據(jù)授權(quán)等能力進(jìn)行統(tǒng)一的可視化管理。并采用服務(wù)調(diào)用的形式管理paas平臺(tái)和大數(shù)據(jù)基礎(chǔ)平臺(tái)的底層混搭的數(shù)據(jù)庫(kù)架構(gòu)。

租戶同步改變傳統(tǒng)的通過(guò)后臺(tái)分配租戶、數(shù)據(jù)訪問(wèn)權(quán)限等操作，采用可視化操作。通過(guò)實(shí)時(shí)和離線兩種方式保證產(chǎn)品和集群租戶一致，實(shí)時(shí)，通過(guò)服務(wù)注冊(cè)的方式，通知平臺(tái)完成租戶創(chuàng)建；離線，平臺(tái)定期同步租戶到本地產(chǎn)品租戶庫(kù)，產(chǎn)品自動(dòng)完成增補(bǔ)全租戶注冊(cè)。

服務(wù)引擎設(shè)計(jì)權(quán)限服務(wù)引擎，管理底層混搭數(shù)據(jù)的權(quán)限開(kāi)通、停用，提供統(tǒng)一權(quán)限申請(qǐng)流程，替換現(xiàn)在線上申請(qǐng)，線下賦權(quán)的流程。同時(shí)記錄操作日志，對(duì)違規(guī)操作進(jìn)行審計(jì)，提高了系統(tǒng)運(yùn)維的安全性。資源信息注冊(cè)數(shù)據(jù)架構(gòu)優(yōu)化基于數(shù)據(jù)湖的場(chǎng)景支撐---升級(jí)對(duì)象存儲(chǔ)引擎，持續(xù)強(qiáng)化賦能一線的數(shù)據(jù)能力數(shù)據(jù)中臺(tái)提供多種對(duì)象存儲(chǔ)能力，支撐結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的入湖，便捷的數(shù)據(jù)存儲(chǔ)服務(wù)及在線分析查詢能力，快速賦能生產(chǎn)運(yùn)營(yíng)，釋放中臺(tái)能力價(jià)值，提升客戶辦理感知。①營(yíng)業(yè)廳改套餐②人臉掃描認(rèn)證③實(shí)時(shí)存儲(chǔ)計(jì)算分析④認(rèn)證結(jié)果服務(wù)能力數(shù)據(jù)中臺(tái)緩存索引圖像處理服務(wù)文檔處理服務(wù)音頻處理服務(wù)日志處理服務(wù)大數(shù)據(jù)集群對(duì)象存儲(chǔ)（Ceph）HDFS/HBASE結(jié)構(gòu)化處理服務(wù)其他處理服務(wù)半結(jié)構(gòu)化結(jié)構(gòu)化大文件圖像文檔音/視頻統(tǒng)一數(shù)據(jù)服務(wù)圖像數(shù)據(jù)服務(wù)賦能業(yè)務(wù)受理，助力人臉識(shí)別業(yè)務(wù)場(chǎng)景。留存全省用戶圖像及人臉歷史庫(kù)提供低延遲的圖像數(shù)據(jù)服務(wù)賦能更多的智能業(yè)務(wù)受理場(chǎng)景基于數(shù)據(jù)湖的場(chǎng)景支撐---加強(qiáng)實(shí)時(shí)計(jì)算分析能力，提升VoLTE客戶服務(wù)感知實(shí)時(shí)流處理引擎HadoopHDFS大數(shù)據(jù)海量存儲(chǔ)網(wǎng)絡(luò)信息設(shè)備信息位置信息感知分析/告警隨著數(shù)據(jù)中臺(tái)各種計(jì)算引擎能力的構(gòu)建和升級(jí)，基于批量實(shí)時(shí)流計(jì)算引擎能力賦能業(yè)務(wù)處理的場(chǎng)景越來(lái)越重要，通過(guò)快速采集實(shí)時(shí)事件結(jié)合歷史數(shù)據(jù)分析，提前分析問(wèn)題原因及預(yù)知風(fēng)險(xiǎn)，協(xié)助客服解決通話質(zhì)量投訴問(wèn)題，避免客戶流失，提升用戶通話和服務(wù)感知。感知內(nèi)容:故障率高的網(wǎng)絡(luò)設(shè)備型號(hào)分布通話質(zhì)量差的位置區(qū)域分布投訴用戶的地區(qū)熱點(diǎn)分布投訴反饋的時(shí)間段、時(shí)長(zhǎng)分布投訴用戶的通話設(shè)備型號(hào)排行···FlinkSQLKafkaconnector用戶信息4數(shù)據(jù)資產(chǎn)存量資產(chǎn)管理生產(chǎn)區(qū)資產(chǎn)管理原生區(qū)資產(chǎn)管理資產(chǎn)目錄管理資產(chǎn)管理現(xiàn)狀和目標(biāo)2020年建立DAMS至今，已經(jīng)基本構(gòu)建完成核心功能，包括資產(chǎn)自動(dòng)掃描采集入庫(kù)通道、信息補(bǔ)全、數(shù)據(jù)稽核、信息檢索、資產(chǎn)視圖等，后續(xù)將持續(xù)優(yōu)化打造適用于數(shù)據(jù)湖+數(shù)據(jù)中臺(tái)的數(shù)據(jù)資產(chǎn)管理體系。數(shù)據(jù)入湖標(biāo)準(zhǔn)化打造企業(yè)資產(chǎn)目錄提升數(shù)據(jù)采集準(zhǔn)確性采集入湖自動(dòng)化制定資產(chǎn)和數(shù)據(jù)入湖標(biāo)準(zhǔn)，并納入上云管控流程，從源頭保證資產(chǎn)標(biāo)準(zhǔn)化；并統(tǒng)一數(shù)據(jù)湖和數(shù)據(jù)中臺(tái)的資產(chǎn)注冊(cè)規(guī)范。參考集團(tuán)《中國(guó)電信數(shù)據(jù)資產(chǎn)目錄管理辦法》，融合數(shù)據(jù)湖+中臺(tái)各區(qū)資產(chǎn)，重構(gòu)建設(shè)省級(jí)資產(chǎn)統(tǒng)一目錄。統(tǒng)一數(shù)據(jù)湖+數(shù)據(jù)中臺(tái)系統(tǒng)標(biāo)志，根據(jù)標(biāo)準(zhǔn)規(guī)范，實(shí)現(xiàn)協(xié)議自動(dòng)注冊(cè)、自動(dòng)采集入湖，和資產(chǎn)的前后臺(tái)到開(kāi)發(fā)貫穿管控，保證數(shù)據(jù)采集的唯一性、采集路徑的合理性。自動(dòng)掃描實(shí)現(xiàn)結(jié)構(gòu)化數(shù)據(jù)的注冊(cè)，通過(guò)接口協(xié)議自動(dòng)實(shí)現(xiàn)采集入湖；對(duì)非結(jié)構(gòu)化和對(duì)象型數(shù)據(jù)打造統(tǒng)一入湖能力。現(xiàn)狀目標(biāo)目前安全平臺(tái)自動(dòng)掃描工具接入系統(tǒng)43個(gè)，數(shù)據(jù)庫(kù)95個(gè)，還需推進(jìn)全面掃描工作；自動(dòng)掃描結(jié)果數(shù)據(jù)合規(guī)率較低，需要補(bǔ)齊和修正；缺少非結(jié)構(gòu)化和對(duì)象型資產(chǎn)統(tǒng)一注冊(cè)能力；缺少非結(jié)構(gòu)化和對(duì)象型采集入湖能力；數(shù)據(jù)源采集路徑多，交互效率低；

缺少統(tǒng)一融合的數(shù)據(jù)資產(chǎn)目錄。實(shí)施舉措序號(hào)關(guān)鍵能力建設(shè)內(nèi)容1構(gòu)建全域數(shù)據(jù)資產(chǎn)視圖基于資產(chǎn)盤(pán)點(diǎn)成果（含數(shù)據(jù)資產(chǎn)、數(shù)據(jù)資產(chǎn)標(biāo)注信息），結(jié)合中臺(tái)數(shù)據(jù)資產(chǎn)，融合形成全域數(shù)據(jù)資產(chǎn)視圖增量數(shù)據(jù)資產(chǎn)自動(dòng)掃描（細(xì)分職責(zé)、明確困難或問(wèn)題）2系統(tǒng)上云優(yōu)化資產(chǎn)入湖開(kāi)發(fā)者門(mén)戶、安全管理平臺(tái)、CMDB、DAMS各自建設(shè)入湖標(biāo)準(zhǔn)管控能力、分段負(fù)責(zé)管理層面：形成稽核-派單-反饋-考核的管理機(jī)制制定入湖標(biāo)準(zhǔn)文檔，包括：上云規(guī)范、數(shù)據(jù)資產(chǎn)稽核細(xì)則規(guī)范、考核機(jī)制；3數(shù)據(jù)湖資產(chǎn)管理數(shù)據(jù)湖目錄管理資產(chǎn)自動(dòng)注冊(cè)能力4全域數(shù)據(jù)資產(chǎn)服務(wù)能力構(gòu)建多維度的資產(chǎn)目錄視圖，支持不同業(yè)務(wù)視角的數(shù)據(jù)使用需求優(yōu)化數(shù)據(jù)資產(chǎn)檢索能力：基于場(chǎng)景、NLP、熱點(diǎn)、個(gè)人關(guān)注等構(gòu)建資產(chǎn)標(biāo)注能力，實(shí)現(xiàn)資產(chǎn)的多業(yè)務(wù)標(biāo)簽體系構(gòu)建資產(chǎn)平臺(tái)和OA集成能力，提升使用便捷性數(shù)據(jù)資產(chǎn)的管理成果01隨著盤(pán)點(diǎn)工作的開(kāi)展，持續(xù)對(duì)存量資產(chǎn)的梳理，系統(tǒng)總數(shù)508個(gè)，目前通過(guò)稽核并成功收錄的系統(tǒng)達(dá)304個(gè)完成全面盤(pán)數(shù)據(jù)資產(chǎn)梳理02搭建CMDB、安全平臺(tái)和DAMS的數(shù)據(jù)資產(chǎn)自動(dòng)化識(shí)別流程，目前接入系統(tǒng)43個(gè)，數(shù)據(jù)庫(kù)95個(gè)，表110643個(gè)，字段1460883個(gè)具備資產(chǎn)自動(dòng)化注冊(cè)能力03定位數(shù)據(jù)采集源，避免重復(fù)采集分析數(shù)據(jù)分布圖，開(kāi)展安全審計(jì)開(kāi)展數(shù)據(jù)評(píng)價(jià)，促進(jìn)數(shù)據(jù)價(jià)值提升初具數(shù)據(jù)資產(chǎn)應(yīng)用能力04提供接口全視圖、優(yōu)化數(shù)據(jù)稽核能力，實(shí)現(xiàn)數(shù)據(jù)質(zhì)量監(jiān)控，目前數(shù)據(jù)中臺(tái)重點(diǎn)支撐業(yè)務(wù)27個(gè)，涉及70個(gè)來(lái)源系統(tǒng)的563個(gè)模型，共配置稽核任務(wù)3061個(gè)深度部署重點(diǎn)數(shù)據(jù)治理埋點(diǎn)05提供資產(chǎn)全景視圖，建立接口采集標(biāo)準(zhǔn)，優(yōu)化采集開(kāi)發(fā)流程，實(shí)現(xiàn)數(shù)據(jù)按需采集的標(biāo)準(zhǔn)化需求管理，2020年采集類需求116條，接口協(xié)議1068條數(shù)據(jù)采集需求標(biāo)準(zhǔn)化管理持續(xù)優(yōu)化資產(chǎn)管理能力、構(gòu)建全域數(shù)據(jù)資產(chǎn)采集管理展示管理視角開(kāi)發(fā)視角業(yè)務(wù)目錄一級(jí)視圖二級(jí)視圖應(yīng)用目錄一級(jí)視圖資產(chǎn)自動(dòng)注冊(cè)界面錄入自動(dòng)補(bǔ)齊資產(chǎn)變動(dòng)通知變更流程變更申請(qǐng)發(fā)起工單稽核工具規(guī)則管理規(guī)則檢查問(wèn)題管理源系統(tǒng)1源系統(tǒng)2源系統(tǒng)N程序主動(dòng)掃描標(biāo)準(zhǔn)模板采集指定數(shù)據(jù)表讀取二級(jí)視圖存量204個(gè)系統(tǒng)未注冊(cè)到DAMS存量472個(gè)系統(tǒng)未在安全平臺(tái)掃描存量4500個(gè)DAMS資產(chǎn)與數(shù)據(jù)中臺(tái)數(shù)據(jù)未建立聯(lián)系DAMS對(duì)注冊(cè)后的資產(chǎn)進(jìn)行定期抽審，并將審核結(jié)果納入考核實(shí)現(xiàn)存量資產(chǎn)全面納管CMDB、安全平臺(tái)、DAMS協(xié)同統(tǒng)一系統(tǒng)信息、維度編碼；DAMS協(xié)助開(kāi)發(fā)者門(mén)戶梳理系統(tǒng)IP，完善系統(tǒng)信息管理DAMS督促NOC、天虎云商、無(wú)線等部門(mén)完善系統(tǒng)納管DAMS完善資產(chǎn)注冊(cè)標(biāo)準(zhǔn)，并持續(xù)更新完善資產(chǎn)發(fā)現(xiàn)注冊(cè)能力建立數(shù)據(jù)評(píng)價(jià)規(guī)則及評(píng)價(jià)結(jié)果應(yīng)用機(jī)制建立數(shù)據(jù)標(biāo)注體系便于資產(chǎn)的分類管理建立樣本數(shù)據(jù)庫(kù)服務(wù)于及時(shí)的在線分析融合數(shù)據(jù)中臺(tái)與DAMS資產(chǎn)目錄，構(gòu)建全域數(shù)據(jù)資產(chǎn)目錄打造數(shù)據(jù)資產(chǎn)服務(wù)能力樣本數(shù)據(jù)采集運(yùn)營(yíng)視角數(shù)據(jù)評(píng)價(jià)視圖資產(chǎn)打標(biāo)視圖具備優(yōu)化新建運(yùn)營(yíng)要求通過(guò)數(shù)據(jù)安全管理平臺(tái)的數(shù)據(jù)抽樣能力獲取抽樣數(shù)據(jù)由于數(shù)據(jù)庫(kù)版本適配、網(wǎng)絡(luò)不通等原因?qū)е碌脑聪到y(tǒng)無(wú)法被自動(dòng)化掃描的問(wèn)題，是由源系統(tǒng)負(fù)責(zé)解決技術(shù)問(wèn)題或進(jìn)行改造，還是沿用樣例數(shù)據(jù)導(dǎo)入借助上云契機(jī)，嚴(yán)格管控增量數(shù)據(jù)資產(chǎn)入湖標(biāo)準(zhǔn)落地與安全專業(yè)、IT運(yùn)維專業(yè)聯(lián)合工作，形成CMDB+安全管理平臺(tái)+DAMS的數(shù)據(jù)資產(chǎn)管理體系，并嵌入到系統(tǒng)上云審核環(huán)節(jié)，實(shí)現(xiàn)數(shù)據(jù)資產(chǎn)盤(pán)點(diǎn)自動(dòng)化，避免手工盤(pán)點(diǎn)前清后亂的風(fēng)險(xiǎn)。IT安全集中運(yùn)維掃描：負(fù)責(zé)對(duì)源系統(tǒng)的系統(tǒng)信息錄入，系統(tǒng)IP掃描。CMDB平臺(tái)：負(fù)責(zé)對(duì)源系統(tǒng)的系統(tǒng)主數(shù)據(jù)管理數(shù)據(jù)安全管理平臺(tái)：負(fù)責(zé)資產(chǎn)掃描、掃描任務(wù)管理，元數(shù)據(jù)管理。DAMS：對(duì)數(shù)據(jù)資產(chǎn)信息進(jìn)行二次稽核，數(shù)據(jù)再加工，繪制資產(chǎn)全景視圖等，并按照集團(tuán)規(guī)范要求將數(shù)據(jù)資產(chǎn)卡片自動(dòng)上傳到集團(tuán)運(yùn)營(yíng)管理系統(tǒng)。數(shù)據(jù)安全管理平臺(tái)DAMSCMDB平臺(tái)系統(tǒng)注冊(cè)源系統(tǒng)數(shù)據(jù)掃描資產(chǎn)注冊(cè)系統(tǒng)上云流程（統(tǒng)一PaaS平臺(tái)）資產(chǎn)合規(guī)性審核報(bào)告管理舉措：制定paas上云流程制定平臺(tái)接口規(guī)范、稽核指標(biāo)規(guī)范完善資產(chǎn)審核和數(shù)據(jù)掃描能力附后：《四川電信數(shù)據(jù)資產(chǎn)入湖標(biāo)準(zhǔn)》試運(yùn)行預(yù)備案申請(qǐng)資源正式備案設(shè)計(jì)評(píng)審開(kāi)發(fā)管控初驗(yàn)終驗(yàn)系統(tǒng)上線驗(yàn)收流程中審核《資產(chǎn)稽核報(bào)告》《企業(yè)IT系統(tǒng)上云管理規(guī)范》《盤(pán)點(diǎn)稽核指標(biāo)計(jì)算細(xì)則》簽字審核IT安全集中運(yùn)維平臺(tái)系統(tǒng)IP掃描運(yùn)營(yíng)要求建立不同類型的數(shù)據(jù)資產(chǎn)管理模式的長(zhǎng)效機(jī)制目標(biāo)：從源頭控制，形成全域數(shù)據(jù)資產(chǎn)自動(dòng)接入、完整覆蓋，提升數(shù)據(jù)資產(chǎn)服務(wù)能力。資產(chǎn)目錄南-北向接口需求3網(wǎng)絡(luò)側(cè)資產(chǎn)注冊(cè)服務(wù)Kafak需求2TOPIC配置資產(chǎn)注冊(cè)服務(wù)匯聚庫(kù)/生產(chǎn)系統(tǒng)1安全管理平臺(tái)資產(chǎn)自動(dòng)注冊(cè)服務(wù)接入流程注冊(cè)流程：①采集類需求：采集流程優(yōu)化，資產(chǎn)自動(dòng)注冊(cè)匯聚庫(kù)類數(shù)據(jù)，通過(guò)安全管理平臺(tái)掃描資產(chǎn)自動(dòng)注冊(cè)（原生區(qū)）需求管理人員接到增量數(shù)據(jù)采集需求，通過(guò)DAMS生產(chǎn)區(qū)資產(chǎn)目錄檢索，定位到系統(tǒng)表，調(diào)用資產(chǎn)自動(dòng)注冊(cè)能力，完成資產(chǎn)注冊(cè)在DAMS未定位源系統(tǒng)表時(shí)，通知源系統(tǒng)在安全管理平臺(tái)完善資產(chǎn)信息，完善后方能發(fā)起采集需求，反向推動(dòng)數(shù)據(jù)湖資產(chǎn)補(bǔ)全②③需求納入統(tǒng)一管理，提供南北向接口資產(chǎn)注冊(cè)服務(wù)，形成資產(chǎn)全面管理DAMS提供資產(chǎn)注冊(cè)服務(wù)給統(tǒng)一采集平臺(tái)，將統(tǒng)一采集平臺(tái)產(chǎn)生的文件類資產(chǎn)統(tǒng)一管理DAMS提供資產(chǎn)注冊(cè)服務(wù)給PaaS平臺(tái)，將流式數(shù)據(jù)kafka類資產(chǎn)統(tǒng)一管理網(wǎng)絡(luò)側(cè)數(shù)據(jù)無(wú)法通過(guò)安全管理平臺(tái)注冊(cè)，需要提供注冊(cè)服務(wù)構(gòu)建清晰易用的全域資產(chǎn)目錄，提升數(shù)據(jù)湖數(shù)據(jù)服務(wù)能力多維視圖提供多維視圖按業(yè)務(wù)，展現(xiàn)企業(yè)核心資產(chǎn)；按部門(mén)，展現(xiàn)數(shù)據(jù)管理歸屬；按需求，展現(xiàn)數(shù)據(jù)支撐業(yè)務(wù)；按場(chǎng)景，引導(dǎo)式場(chǎng)景數(shù)據(jù)推薦；資產(chǎn)關(guān)聯(lián)強(qiáng)化資產(chǎn)關(guān)聯(lián)建立不同區(qū)域資產(chǎn)血緣關(guān)系；建立不同類別資產(chǎn)血緣關(guān)系；建立不同區(qū)域資產(chǎn)的一致性結(jié)果；服務(wù)開(kāi)放能力集成資產(chǎn)訂閱、收藏、評(píng)價(jià)資產(chǎn)檢索在線分析數(shù)據(jù)服務(wù)現(xiàn)狀設(shè)計(jì)數(shù)據(jù)中心資產(chǎn)目錄現(xiàn)狀：不完整：數(shù)據(jù)湖的數(shù)據(jù)資產(chǎn)未融合開(kāi)放性不夠：主要為專業(yè)數(shù)據(jù)開(kāi)發(fā)人員使用，技術(shù)門(mén)檻較高，數(shù)據(jù)共享的支持性需要加強(qiáng)清理不及時(shí)：資產(chǎn)清理不及時(shí)，老舊數(shù)據(jù)資產(chǎn)、冷數(shù)據(jù)無(wú)標(biāo)識(shí)標(biāo)準(zhǔn)不完善，管控不強(qiáng)硬：不合理的數(shù)據(jù)依賴關(guān)系依然存在資產(chǎn)標(biāo)注完善資產(chǎn)五者關(guān)系，有助于問(wèn)題處理；明確部門(mén)管控關(guān)系，有助于責(zé)任劃分；數(shù)據(jù)打標(biāo)資產(chǎn)打標(biāo)資產(chǎn)運(yùn)營(yíng)構(gòu)建統(tǒng)一的服務(wù)目錄視圖，梳理并建立標(biāo)準(zhǔn)化的后臺(tái)原子服務(wù)目錄。5數(shù)據(jù)治理數(shù)據(jù)治理總述構(gòu)建貫穿數(shù)據(jù)生產(chǎn)服務(wù)鏈全生命周期數(shù)據(jù)治理體系，讓數(shù)據(jù)中臺(tái)更好用、更好監(jiān)控和更好管控，進(jìn)行持續(xù)的改進(jìn)。通過(guò)TOC、PDCA以及精益思想理論，圈定資產(chǎn)、質(zhì)量、使用和評(píng)價(jià)4個(gè)模塊作為重點(diǎn)治理對(duì)象，通過(guò)機(jī)制、規(guī)范、監(jiān)測(cè)和評(píng)估實(shí)現(xiàn)中臺(tái)的精益治理。數(shù)據(jù)資產(chǎn)針對(duì)資產(chǎn)是否全面完整、資產(chǎn)是否可用和資產(chǎn)是否多余進(jìn)行數(shù)據(jù)資產(chǎn)關(guān)聯(lián)對(duì)比、資產(chǎn)標(biāo)準(zhǔn)化和資產(chǎn)下線管理資產(chǎn)關(guān)聯(lián)管理通過(guò)CMDB、安全管理平臺(tái)以及DAMS三方對(duì)比確認(rèn)資產(chǎn)完整性資產(chǎn)標(biāo)準(zhǔn)化建立資產(chǎn)標(biāo)準(zhǔn)庫(kù)，識(shí)別資產(chǎn)是否標(biāo)準(zhǔn)，嚴(yán)控資產(chǎn)質(zhì)量資產(chǎn)清理發(fā)現(xiàn)低值、未用資產(chǎn)，通過(guò)血緣和下線清理策略評(píng)估，進(jìn)行系統(tǒng)下線和遷移后歷史資產(chǎn)的處理。數(shù)據(jù)質(zhì)量新建數(shù)據(jù)湖需要更明確的機(jī)制、流程以及管控工具來(lái)進(jìn)行監(jiān)控。數(shù)據(jù)運(yùn)營(yíng)針對(duì)客戶使用情況，真實(shí)直面的反饋數(shù)據(jù)、系統(tǒng)、能力的使用情況，創(chuàng)建交互通道，嵌入到數(shù)據(jù)運(yùn)營(yíng)的各個(gè)階段中進(jìn)行埋點(diǎn)管理咨詢、問(wèn)題搜集通道埋點(diǎn)能力數(shù)據(jù)評(píng)價(jià)建立評(píng)價(jià)模型和指標(biāo)，合理利用集群資源,注智開(kāi)發(fā)、運(yùn)營(yíng)、服務(wù)和管理管理強(qiáng)化生產(chǎn)區(qū)納湖，新建原生區(qū)，多集群存儲(chǔ)和多管理部門(mén)協(xié)作的五者邊界的劃分和流程確認(rèn)結(jié)合質(zhì)量考核辦法進(jìn)行管理能力優(yōu)化根據(jù)能力成熟度模型，逐步創(chuàng)建從人工入湖、半自動(dòng)入湖、自動(dòng)入湖能力，運(yùn)維上創(chuàng)建執(zhí)行稽核動(dòng)態(tài)上下線，實(shí)現(xiàn)湖內(nèi)資產(chǎn)數(shù)據(jù)一體化管控質(zhì)量稽核著重半結(jié)構(gòu)化和非機(jī)構(gòu)化數(shù)據(jù)治理，創(chuàng)建抽樣監(jiān)測(cè)、定制專項(xiàng)業(yè)務(wù)稽核以及生產(chǎn)系統(tǒng)提供稽核校驗(yàn)文件形式保障數(shù)據(jù)可用性為數(shù)據(jù)使用人員提供問(wèn)答式互動(dòng)通道，填寫(xiě)關(guān)于數(shù)據(jù)、平臺(tái)使用的意見(jiàn)反饋、知識(shí)經(jīng)驗(yàn)共享、交流學(xué)習(xí)等；數(shù)據(jù)生產(chǎn)到使用的各個(gè)階段，創(chuàng)建埋點(diǎn)，收集客戶使用行為，客戶使用意見(jiàn)、評(píng)論等;結(jié)合上云嵌入插件能力，觀測(cè)數(shù)據(jù)、接口、模型、字段使用情況質(zhì)量評(píng)價(jià)感知評(píng)價(jià)資產(chǎn)評(píng)價(jià)成本評(píng)價(jià)價(jià)值評(píng)價(jià)主要針對(duì)運(yùn)維過(guò)程中出問(wèn)題情況進(jìn)行評(píng)價(jià)針對(duì)客戶使用感知進(jìn)行評(píng)價(jià)隨著DAMS的提出，資產(chǎn)合規(guī)性等很重要，進(jìn)行資產(chǎn)評(píng)價(jià)針對(duì)存儲(chǔ)、使用資源等評(píng)估針對(duì)重要程度，使用頻率等進(jìn)行價(jià)值評(píng)價(jià)統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn)庫(kù)勞動(dòng)競(jìng)賽/積分模型開(kāi)展勞動(dòng)競(jìng)賽，建立共管支持能力，深化數(shù)據(jù)資產(chǎn)運(yùn)營(yíng)智慧運(yùn)維運(yùn)維對(duì)象數(shù)字化，提升可用性，降低運(yùn)維成本實(shí)施舉措序號(hào)關(guān)鍵能力建設(shè)內(nèi)容1數(shù)據(jù)資產(chǎn)治理1、完善標(biāo)準(zhǔn)庫(kù)：系統(tǒng)上云、資產(chǎn)入湖、數(shù)據(jù)使用2、資產(chǎn)關(guān)聯(lián)稽核管理：生產(chǎn)區(qū)、原生區(qū)、產(chǎn)品區(qū)資產(chǎn)一致性稽核能力、異常資產(chǎn)在數(shù)據(jù)資產(chǎn)視圖中的標(biāo)注和提示能力（細(xì)分職責(zé)）3、基于數(shù)據(jù)評(píng)價(jià)，支持?jǐn)?shù)據(jù)中臺(tái)數(shù)據(jù)自動(dòng)預(yù)警、定期下線或回退到原生區(qū)2數(shù)據(jù)質(zhì)量治理1、質(zhì)量體系完善：將現(xiàn)有中臺(tái)的稽核方式，以質(zhì)量評(píng)估模型+知識(shí)庫(kù)形式進(jìn)行有效組織和設(shè)計(jì)，以系統(tǒng)化方式實(shí)現(xiàn)從人工到自動(dòng)化的迭代演進(jìn)2、能力優(yōu)化：優(yōu)化稽核效率，制定調(diào)度任務(wù)評(píng)估模型動(dòng)態(tài)調(diào)整執(zhí)行策略（任務(wù)完成度、指標(biāo)使用頻率、血緣依賴度）3、管理強(qiáng)化：新建原生區(qū)，多集群存儲(chǔ)和多管理部門(mén)協(xié)作的五者邊界的劃分和流程確認(rèn)，結(jié)合質(zhì)量考核辦法進(jìn)行管理3數(shù)據(jù)運(yùn)營(yíng)1、交互式問(wèn)答平臺(tái)：為數(shù)據(jù)使用人員提供問(wèn)答式互動(dòng)通道，填寫(xiě)關(guān)于數(shù)據(jù)、平臺(tái)使用的意見(jiàn)反饋、知識(shí)經(jīng)驗(yàn)共享、交流學(xué)習(xí)等；2、嵌入式點(diǎn)評(píng)留言：用戶直接可以根據(jù)使用情況進(jìn)行評(píng)價(jià)和反饋。精確反饋功能模塊使用情況3、應(yīng)用埋點(diǎn)：將類插件方式埋點(diǎn)到指定應(yīng)用查看數(shù)據(jù)使用情況和價(jià)值4、資產(chǎn)標(biāo)注：對(duì)資產(chǎn)進(jìn)行業(yè)務(wù)標(biāo)注，提升檢索和管理能力5、勞動(dòng)競(jìng)賽：鼓勵(lì)全員參與，建立賽道，全員自主自愿參與業(yè)務(wù)數(shù)據(jù)打標(biāo)、數(shù)據(jù)治理賽道競(jìng)賽6、積分模型：設(shè)置積分獎(jiǎng)勵(lì)制度和獎(jiǎng)勵(lì)辦法4數(shù)據(jù)評(píng)價(jià)1、數(shù)據(jù)評(píng)價(jià)模型和指標(biāo)庫(kù)建立：從質(zhì)量評(píng)價(jià)、感知評(píng)價(jià)、資產(chǎn)評(píng)價(jià)、成本評(píng)價(jià)、價(jià)值評(píng)價(jià)5個(gè)方面進(jìn)行評(píng)價(jià)2、考核體系：建立數(shù)據(jù)質(zhì)量考核管理流程，處理溝通問(wèn)題，提高問(wèn)題處理效率，更好的保障數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)管理的重要性：標(biāo)準(zhǔn)分布在整個(gè)數(shù)據(jù)管理流程中調(diào)用入湖方式統(tǒng)一服務(wù)傳統(tǒng)報(bào)表數(shù)據(jù)驅(qū)動(dòng)數(shù)據(jù)應(yīng)用生態(tài)……管理決策營(yíng)銷服務(wù)智慧家庭金融征信智能連接客戶洞察既有采集方式原生區(qū)RDB消息對(duì)象存儲(chǔ)HDFS流式采集流式采集CDC采集采集服務(wù)批量采集鏡像直接連接FTP/SFTP圖片/音頻/文本半/非結(jié)構(gòu)數(shù)據(jù)Databases系統(tǒng)/平臺(tái)Files《存儲(chǔ)標(biāo)準(zhǔn)》《數(shù)據(jù)架構(gòu)定義》《系統(tǒng)上云標(biāo)準(zhǔn)》《數(shù)據(jù)安全管理規(guī)范》生產(chǎn)區(qū)資產(chǎn)管理《資產(chǎn)梳理流程》《資產(chǎn)治理流程》《五者定義》《資產(chǎn)質(zhì)量標(biāo)準(zhǔn)》《元數(shù)據(jù)管理辦法》《目錄分類》《數(shù)據(jù)接入標(biāo)準(zhǔn)》數(shù)據(jù)中臺(tái)工作區(qū)產(chǎn)品區(qū)安全區(qū)《數(shù)據(jù)項(xiàng)定義規(guī)范》《表定義規(guī)范》《開(kāi)發(fā)規(guī)范》《上線生產(chǎn)規(guī)范》《數(shù)據(jù)安全管理規(guī)范》《運(yùn)維管理流程》統(tǒng)一管理統(tǒng)一調(diào)度《數(shù)據(jù)共享標(biāo)準(zhǔn)》《插件標(biāo)準(zhǔn)管理》源系統(tǒng)上云申請(qǐng)結(jié)構(gòu)化數(shù)據(jù)資產(chǎn)標(biāo)準(zhǔn)化：優(yōu)化標(biāo)準(zhǔn)庫(kù)標(biāo)準(zhǔn)規(guī)范定義和分類《資產(chǎn)定義》《數(shù)據(jù)表/項(xiàng)定義》《五者五性定義》業(yè)務(wù)標(biāo)準(zhǔn)（業(yè)務(wù)層面）《目錄分類標(biāo)準(zhǔn)》《關(guān)鍵字使用標(biāo)準(zhǔn)》技術(shù)標(biāo)準(zhǔn)（技術(shù)層面）《數(shù)據(jù)項(xiàng)命名規(guī)范》《數(shù)據(jù)表命名規(guī)范》《開(kāi)發(fā)規(guī)范》管控標(biāo)準(zhǔn)（管理層面）《資產(chǎn)管理辦法》《插件管理辦法》《上線生產(chǎn)規(guī)范》稽核標(biāo)準(zhǔn)（質(zhì)量層面）《數(shù)據(jù)質(zhì)量管理規(guī)范》安全標(biāo)準(zhǔn)（安全層面）《數(shù)據(jù)安全管理規(guī)范》流程制度系統(tǒng)上云流程資產(chǎn)入湖流程標(biāo)準(zhǔn)庫(kù)數(shù)據(jù)使用流程數(shù)據(jù)治理流程1.完善規(guī)范制度流程系統(tǒng)上云流程資產(chǎn)入湖流程數(shù)據(jù)使用流程數(shù)據(jù)治理流程2、完善標(biāo)準(zhǔn)規(guī)范建立標(biāo)準(zhǔn)庫(kù)就資產(chǎn)、數(shù)據(jù)表/項(xiàng)以及五者五性定義標(biāo)準(zhǔn)內(nèi)容根據(jù)業(yè)務(wù)、技術(shù)、安全、管控和稽核等不同層面制定不同的管理和使用規(guī)范3、規(guī)范和實(shí)例映射關(guān)系根據(jù)每項(xiàng)規(guī)范內(nèi)容形成標(biāo)準(zhǔn)實(shí)例，稽核和治理系統(tǒng)上云、資產(chǎn)入湖、數(shù)據(jù)使用、數(shù)據(jù)治理四大流程建立標(biāo)準(zhǔn)庫(kù)，完善管理規(guī)范、流程制度和資產(chǎn)標(biāo)準(zhǔn)，保障數(shù)據(jù)資產(chǎn)持續(xù)運(yùn)營(yíng)，嚴(yán)控資產(chǎn)質(zhì)量。附件：標(biāo)準(zhǔn)細(xì)則數(shù)據(jù)質(zhì)量-建立質(zhì)量模型，演進(jìn)質(zhì)量管理從人工到自動(dòng)化發(fā)展新建質(zhì)量模型，將現(xiàn)有中臺(tái)的稽核方式和理念整合起來(lái)，以質(zhì)量模型+知識(shí)庫(kù)形式進(jìn)行有效組織和設(shè)計(jì)，以系統(tǒng)化方式實(shí)現(xiàn)從人工到自動(dòng)化的發(fā)展。1、建立對(duì)象層生產(chǎn)區(qū)納湖，新建原生區(qū)，帶來(lái)更復(fù)雜的半結(jié)構(gòu)和非結(jié)構(gòu)數(shù)據(jù)，每個(gè)對(duì)象的保障力度應(yīng)該是分類型、分應(yīng)用和分等級(jí)進(jìn)行保障的。2、建立核心層每個(gè)對(duì)象實(shí)例應(yīng)該采用核心層的不同保障方式和指標(biāo)適配，數(shù)據(jù)質(zhì)量的保障是有標(biāo)準(zhǔn)有模型進(jìn)行保障的。核心層主要包含采用什么樣的質(zhì)量動(dòng)作、采用什么質(zhì)量指標(biāo)以及輸出質(zhì)量服務(wù)能力3、建立治理層根據(jù)核心層提供的服務(wù)能力，提供治理策略，有哪些人針對(duì)哪些治理對(duì)象做哪些動(dòng)作以及治理情況4、質(zhì)量模型入知識(shí)庫(kù)通過(guò)質(zhì)量模型操作的動(dòng)作、處理經(jīng)驗(yàn)以及客戶反饋組成鏈路形成知識(shí)入知識(shí)庫(kù)，促進(jìn)數(shù)據(jù)質(zhì)量由人工向自動(dòng)化演進(jìn)對(duì)象層分類型結(jié)構(gòu)化半結(jié)構(gòu)非結(jié)構(gòu)分應(yīng)用集團(tuán)上傳數(shù)據(jù)門(mén)戶收入保障分等級(jí)1級(jí)2級(jí)3級(jí)核心層服務(wù)能力體檢抽樣監(jiān)測(cè)專業(yè)指標(biāo)稽核Check文件校驗(yàn)五性嵌入阻斷式白+黑嵌入非阻斷式質(zhì)量報(bào)告根因定位影響分析治理層策略配置資產(chǎn)治理數(shù)據(jù)治理產(chǎn)品治理補(bǔ)全資產(chǎn)優(yōu)化程序數(shù)據(jù)錯(cuò)位資源不足開(kāi)發(fā)知識(shí)庫(kù)自動(dòng)化半自動(dòng)質(zhì)量指標(biāo)質(zhì)量動(dòng)作運(yùn)維治理治理對(duì)象治理內(nèi)容業(yè)務(wù)運(yùn)維。。治理人質(zhì)量預(yù)測(cè)質(zhì)量關(guān)系文件本身屬性人工1自動(dòng)關(guān)聯(lián)自動(dòng)入湖重點(diǎn)數(shù)據(jù)治理-數(shù)據(jù)湖資產(chǎn)完整性稽核接口視圖信息源系統(tǒng)信息接入數(shù)據(jù)庫(kù)資產(chǎn)稽核不合規(guī)清單生產(chǎn)區(qū)系統(tǒng)接口外部數(shù)據(jù)庫(kù)文件表數(shù)據(jù)項(xiàng)資產(chǎn)目錄資產(chǎn)目錄安全平臺(tái)資產(chǎn)掃描kafka入湖源系統(tǒng)湖數(shù)據(jù)模型數(shù)據(jù)項(xiàng)原生區(qū)自動(dòng)關(guān)聯(lián)kafak入湖表數(shù)據(jù)項(xiàng)接口協(xié)議存量關(guān)聯(lián)治理確認(rèn)關(guān)聯(lián)121匹配篩選統(tǒng)一標(biāo)志關(guān)聯(lián)關(guān)聯(lián)資產(chǎn)構(gòu)建過(guò)程生產(chǎn)區(qū)資產(chǎn)自動(dòng)注冊(cè)，自動(dòng)采集入原生區(qū)，建立兩區(qū)資產(chǎn)的關(guān)聯(lián)關(guān)系；kafak等方式入湖，根據(jù)入湖規(guī)范申請(qǐng)，實(shí)現(xiàn)在生產(chǎn)區(qū)和原生區(qū)的資產(chǎn)自動(dòng)注冊(cè)和自動(dòng)關(guān)聯(lián)。存量數(shù)據(jù)關(guān)聯(lián)治理稽核原生區(qū)數(shù)據(jù)資產(chǎn)，對(duì)不合規(guī)，如沒(méi)有源系統(tǒng)標(biāo)志、源頭模型缺失、數(shù)據(jù)項(xiàng)缺失的，可以查看不合規(guī)資產(chǎn)清單；查看不合規(guī)資產(chǎn)清單及采集視圖信息；線上搜索匹配，線下和業(yè)務(wù)部門(mén)、源系統(tǒng)廠家確認(rèn)，最終線上實(shí)現(xiàn)數(shù)據(jù)資產(chǎn)的整改處理。資產(chǎn)治理運(yùn)營(yíng)稽核的差異結(jié)果推送資產(chǎn)責(zé)任方，并集成到數(shù)據(jù)目錄服務(wù)中，給分析使用人員提示和引導(dǎo)數(shù)據(jù)資產(chǎn)稽核具體舉措根據(jù)數(shù)據(jù)質(zhì)量管理規(guī)范，要實(shí)現(xiàn)數(shù)據(jù)湖+數(shù)據(jù)中臺(tái)各區(qū)數(shù)據(jù)資產(chǎn)全流程管控，首先要規(guī)范管理生產(chǎn)區(qū)和原生區(qū)數(shù)據(jù)關(guān)聯(lián)。通過(guò)提供新入湖數(shù)據(jù)通道管理處理能力，并對(duì)存量數(shù)據(jù)資產(chǎn)進(jìn)行關(guān)聯(lián)治理，實(shí)現(xiàn)數(shù)據(jù)湖生產(chǎn)區(qū)和原生區(qū)的數(shù)據(jù)資產(chǎn)關(guān)聯(lián)。運(yùn)營(yíng)要求要求安全平臺(tái)整改不合規(guī)的資產(chǎn)，重新發(fā)起流程

稽核流程自動(dòng)化、工單流程驅(qū)動(dòng)自動(dòng)采集入湖重點(diǎn)數(shù)據(jù)治理-數(shù)據(jù)中臺(tái)減負(fù)

資產(chǎn)下線計(jì)劃資產(chǎn)評(píng)價(jià)數(shù)據(jù)湖原生區(qū)歷史庫(kù)數(shù)據(jù)