聯(lián)通大數(shù)據(jù)數(shù)智能力建設與實踐

1、技術創(chuàng)新，變革未來聯(lián)通大數(shù)據(jù)數(shù)智能力建設與實踐引言聯(lián)通大數(shù)據(jù)能力簡介聯(lián)通大數(shù)據(jù)能力，引領業(yè)務新發(fā)展案例引言大數(shù)據(jù)時代，產(chǎn)業(yè)轉(zhuǎn)型需要什么能力？來源：Harvard Business Review“永續(xù)連接年代”，當能與客戶保持7*24小時互動的時候，你需要全新的商業(yè)模式。選擇連接策略連接策略描述關鍵能力適用條件適用人群響應需求用戶表達自己在特 定時間的需求對訂單做出快速有 效回應客戶有足夠知識不希望分享太多數(shù) 據(jù)并喜歡自己掌控 局面的客戶規(guī)劃產(chǎn)品公司為客戶提供定 制產(chǎn)品組合，供客 戶選擇做出精準個性化推 薦未經(jīng)規(guī)劃的產(chǎn)品組 合過大，甚至讓客 戶無從選擇不介意分享部分數(shù) 據(jù)，但想擁有最終 決定權的

2、客戶指導行為公司敦促客戶為實 現(xiàn)目標而采取行動了解客戶需求，能 夠收集和解析數(shù)據(jù)客戶因怠惰和偏見 而不能實現(xiàn)對自己 最有利的目標不介意分享個人數(shù) 據(jù)并接受推薦的客 戶自動執(zhí)行公司未經(jīng)提示便可 滿足需求監(jiān)控客戶并將接收 到的數(shù)據(jù)轉(zhuǎn)化為行 動客戶行為容易預測， 發(fā)錯成本很小不介意分享個人數(shù) 據(jù)并讓公司為自己 決策的客戶六大數(shù)據(jù)能力連接能力治理能力管理能力分析能力服務能力應用能力更多注重“關聯(lián)”屬性和場景融合元數(shù)據(jù)治理、主數(shù)據(jù)治理，提高數(shù)據(jù)質(zhì)量應對分布式、非集中式服 務器、協(xié)調(diào)管理的挑戰(zhàn)統(tǒng)計能力、建模能力、度量與語義滿足客戶個性化、定制化需求，提供數(shù)據(jù)服務運營解決客戶在業(yè)務場景的痛 點和難點數(shù)據(jù)能力

3、聯(lián)通大數(shù)據(jù)能力簡介聯(lián)通大數(shù)據(jù)公司數(shù)智升級集中運營平臺模型合作平臺應用合作平臺資本合作平臺產(chǎn)業(yè)生態(tài)建設者創(chuàng)新應用 牽引者數(shù)據(jù)資源聚合者值得信賴的數(shù)據(jù)智能服務運營商數(shù)據(jù)合作平臺統(tǒng)一出口：中國聯(lián)通大數(shù)據(jù)對外商業(yè)應用的集中運營主體和全網(wǎng)大數(shù)據(jù)對外的統(tǒng)一出口。合作平臺：大數(shù)據(jù)產(chǎn)業(yè)的全方位合作合資大平臺。智慧足跡數(shù)據(jù)科技有限公司人口、消費、產(chǎn)業(yè)云景文旅科技有限公司科技、文化、旅游聯(lián)通高新大數(shù)據(jù)人工智能科技（成都）有限公司政務、教育、園區(qū)聯(lián)通大數(shù)據(jù)從“大數(shù)據(jù)”到“大價值”物聯(lián)網(wǎng)通信網(wǎng)網(wǎng)聯(lián)云計算云安全云存儲云算數(shù)智大數(shù)據(jù)AI日增160+TB6000節(jié)點100PB日運行10萬+JobUBD 數(shù)智平臺N個行業(yè)應用

4、智能算法數(shù)據(jù)資源 數(shù)睿廣告數(shù)言輿情數(shù)贏洞察數(shù)盾風控政務金融文旅安全7000+2000+100+數(shù) 據(jù) 量數(shù) 據(jù) 價 值4億17億25億1萬億1800億聯(lián)通大數(shù)據(jù)安全保障聯(lián)通大數(shù)據(jù)安全體系數(shù)據(jù)水印數(shù)據(jù)備份數(shù)據(jù)采集數(shù)據(jù)傳輸 數(shù)據(jù)加密鏈路加密 數(shù)據(jù)完整性權限集中管理通信網(wǎng)絡安全安全技術體系數(shù)據(jù)存儲數(shù)據(jù)加工數(shù)據(jù)發(fā)布數(shù)據(jù)加密數(shù)據(jù)加密數(shù)據(jù)內(nèi)容審計訪問控制數(shù)據(jù)脫敏網(wǎng)絡流量審計數(shù)據(jù)訪問行為監(jiān)控數(shù)據(jù)備份數(shù)據(jù)水印數(shù)據(jù)可追溯強身份認證集中審計分析統(tǒng)一訪問控制區(qū)域邊界安全計算環(huán)境安全應用安全數(shù)據(jù)銷毀安全 策略安全 組織安全管理體系基礎安全管理策略數(shù)據(jù)安全管理策略 業(yè)務安全管理策略數(shù)據(jù)安全組織架構數(shù)據(jù)安全職責數(shù)據(jù)分類分

5、級數(shù)據(jù)安全銷毀數(shù)據(jù) 安全接口認證鑒權載體安全銷毀數(shù)據(jù)加密完整性保護賬號集中管理接口安全管理基礎 安全物理安全終端安全安全 運營 體系系統(tǒng) 安全 運營安全評估 系統(tǒng)加固漏洞管理風險監(jiān)測/預警數(shù)據(jù)數(shù)據(jù)權限管控人員行為監(jiān)測安全運營數(shù)據(jù)輿情和風險監(jiān)測業(yè)務 安全 運營數(shù)據(jù)申請審核 數(shù)據(jù)模型審核數(shù)據(jù)輸出審核事后抽查審計 第三方安全檢查與審計中央企業(yè)網(wǎng)絡安全優(yōu)秀解決方案獎國資委聯(lián)通大數(shù)據(jù)能力沉淀目標開放開放數(shù)據(jù)采集開放數(shù)據(jù)融合開放數(shù)據(jù)治理開放數(shù)據(jù)標準開放資源目錄開放數(shù)據(jù)模塊開放數(shù)據(jù)模型開放數(shù)據(jù)結(jié)論開放結(jié)論評估開放數(shù)據(jù)定價開放數(shù)據(jù)交易開放數(shù)據(jù)應用開放應用交易DS開放DTS開放DCT開放DS聯(lián)通大數(shù)據(jù)公司技術架

6、構體系 IaaS層提供基礎設施服務， PaaS層提供生產(chǎn)工具服務能力， SaaS層提供各類應用云化服務，DaaS層提供數(shù)據(jù)API調(diào)用和托管服 務，MaaS層提供數(shù)據(jù)模型對外服務： 1 構建兩個核心引擎=微服務開發(fā)框架+數(shù)據(jù)智慧管控 。打造三個核心平臺 = 核心數(shù)據(jù)生產(chǎn) 平臺 + 能力開放服務平臺+數(shù)據(jù)安全 監(jiān)控平臺。建設四個輔助平臺 = 集群智能運維平臺 + 數(shù)據(jù)治理與交換平臺+可視數(shù) 據(jù)科學平臺+數(shù)據(jù)可視化展示平臺。 4 輸出四項核心服務 = 數(shù)據(jù)能力服務+ 工具組件服務 +生產(chǎn)運維服務+云 化應用服務。新建改造繼承兩個核心引擎微服務開發(fā)框架（注冊、發(fā)現(xiàn)、監(jiān)控、協(xié)同、開放、觸達）數(shù)據(jù)智慧管控

7、（自組織、自動化、敏捷性）互聯(lián)網(wǎng)模 型訓練服 務承載容器中心生產(chǎn)開發(fā)服 務承載私有產(chǎn)品服務DCT承載服務承載機器學習深度學習增強學習時空標簽 體系數(shù)據(jù)模型能力服務特征圖譜人口大數(shù)據(jù)沃指數(shù)智慧選址標簽基礎產(chǎn)品公安大數(shù)據(jù)交通大數(shù)據(jù)能力開放平臺可視化數(shù)據(jù)建模平臺可視化數(shù)據(jù)展示平臺數(shù)據(jù)標準數(shù)據(jù) 治理數(shù)據(jù)資產(chǎn) 管理平臺數(shù)據(jù)交換云化ETL安全平臺數(shù)據(jù)加工批量數(shù)據(jù) 處理數(shù)據(jù)存儲核心生產(chǎn)平臺公共信息庫多租戶生產(chǎn)實時數(shù)據(jù)引擎 統(tǒng)一數(shù)據(jù)模型數(shù)據(jù)服務安全安全網(wǎng)絡資源安全安全GPU計算彈性計算與存儲基礎資源 分配與管理網(wǎng)絡（專線）網(wǎng)絡（SDN）X86服務器GPU服務器X86服務器（超算）存儲數(shù)據(jù)采集交換平臺數(shù)據(jù)中心數(shù)

8、據(jù)接入互聯(lián)網(wǎng)數(shù)據(jù)爬取外部數(shù)據(jù)接入跨平臺數(shù)據(jù)交互托管數(shù)據(jù)數(shù)盾風控數(shù)達營銷工具組件服務高并發(fā)精準 查詢引擎隨機搜索 引擎API網(wǎng)關微服務開發(fā)平臺安全網(wǎng)關多維組 合查詢引擎數(shù)據(jù)加密數(shù)贏洞察旅游大數(shù)據(jù)統(tǒng)一生產(chǎn)運維服務智能運維平臺（AIOps）資源管控平臺（CMDB）日志監(jiān)控平臺軟件注冊 中心統(tǒng)計分析聯(lián)通大數(shù)據(jù)公司數(shù)據(jù)治理能力“巡山”大規(guī)模集群治理實踐，積累和形成了 自主化和體系化的大數(shù)據(jù)多框架集群治理能力， 集群健康核心指標全面提升，處理數(shù)據(jù)量翻倍， 集群資源整體資源負荷下降20%，平均文件大 小提升170%，文件數(shù)下降60%，模型執(zhí)行效 率提升100%以上，算力節(jié)省400節(jié)點，每年節(jié)省投資1000萬

9、數(shù)據(jù)集市應用層（UBD_SERV）數(shù)據(jù)集市層（UBD_DM）基礎數(shù)據(jù)映射初級加工映射公共數(shù)據(jù)（UBD_DWM）融合數(shù)據(jù)產(chǎn)品下沉數(shù)據(jù)融合基礎數(shù)據(jù)映射碼表映射數(shù)據(jù)模型映射標簽庫表映射B域UBD_B_DWA UBD_B_DWD綜采UBD_Z_DWA UBD_Z_DWD信令UBD_X_DWA UBD_X_DWD互聯(lián)網(wǎng)UBD_O_DWAUBD_O_DW D各域數(shù)據(jù)接口層(UBD_ODS)B域、綜采、信令、互聯(lián)網(wǎng)“疏整促”數(shù)據(jù)治理實踐，形成了面向安全， 面向服務，分級分層數(shù)據(jù)管理體系，標準化模 型設計、腳本開發(fā)、數(shù)倉庫表管理、數(shù)據(jù)生命集群庫表數(shù)量由1.8萬張減少到7000張，存儲 節(jié)省10P聯(lián)通大數(shù)據(jù)數(shù)據(jù)

10、資產(chǎn)管理獲得2019年大數(shù)據(jù)產(chǎn)業(yè)峰會“星河獎”最佳實踐獎數(shù)據(jù)治理提供了將數(shù)據(jù)作為資產(chǎn)進行管理所需的 指導，是我們建設數(shù)據(jù)資產(chǎn)管理平臺的理論依據(jù)， 也是業(yè)務發(fā)展現(xiàn)實所需。周期、數(shù)據(jù)稽核、數(shù)據(jù)DDL操作等。治理效果， 根據(jù)前兩個實踐沉淀的能力和治理經(jīng)驗，自主研發(fā)“聯(lián)通大數(shù)據(jù)數(shù)據(jù)資產(chǎn)管理平臺”，成果對于集團內(nèi)部分享和輸出，對外具備平臺化 的交付能力，已獲2019中國聯(lián)通集團科技進步獎。+189%平均 文件 大小文件 數(shù)量-60%文件 夾數(shù) 量-15%量-45%空文低效RPC件數(shù)數(shù)據(jù)請求表數(shù)-56%-57%RPC平Job平均延遲均時長-90%-50%+100%-30%聯(lián)通大數(shù)據(jù)數(shù)智能力體系構建”大數(shù)據(jù)

11、+AI“數(shù)智能力體系：“3+2”數(shù)智能力：重點構建位置時序洞察、行為興趣分析、關系圖譜挖掘3大核心平臺級能力集， 以及數(shù)據(jù)采集解析、人工智能應用能力；UBD數(shù)智中臺WhoWhenWhereWhatwith Whom位置時序行為興趣關系圖譜數(shù) 據(jù) 采 集 解 析人 工 智 能 應 用聯(lián)通大數(shù)據(jù)數(shù)據(jù)標簽體系長期愛好/ 近期關注興趣關鍵字（動態(tài)不限量）微信公眾號、頭條文章-關鍵詞向量金融消費標簽銀行、保險、 理財、消費汽車行業(yè)標簽購車、用車、養(yǎng)車、租車行業(yè)應用標簽（N行業(yè)）基礎屬性標簽（170個）底層數(shù)據(jù)位置衍生標簽（20/人）常駐、差旅、 通勤、商圈基礎標簽（20）基本屬性、通信 行為、終端信息A

12、PP使用標簽（150+）2級、14大類、150+標簽，6W+ AppAPP短信標簽（150+）累積4.5W平臺號、1.5W App， 覆蓋2.4億用戶上網(wǎng)日志信令軌跡綜采話單賬戶信息動態(tài)興趣標簽（30+無限）B域O域行為信用標簽（20/人）號卡信用、終端信用、 信貸信用、關系信用用戶行為興趣智能搜索引擎（200屬性標簽+無限興趣關鍵詞組合）B+O營銷客群篩選興趣關聯(lián)群體區(qū)域群體畫像其他N個行業(yè)（教育、醫(yī)療、新 零售、家裝）外賣、快遞、打車、中介生活服務行業(yè)聯(lián)通大數(shù)據(jù)應用研發(fā)能力大數(shù)據(jù)公司在實際客戶項目交付的行業(yè)實踐中， 逐漸形成了“ 智慧數(shù)” 技術研發(fā)體系， 并持續(xù)沉淀了“ 數(shù)源”、“ 數(shù)智”

13、 和“ 中臺”能力。在2019 年數(shù)博會上，“ 智慧數(shù)” 獲得了“ 黑科技” 獎項。B. 通過融合研發(fā)， 集約沉淀自研能力 完全自研與融合研發(fā)相結(jié)合，集約化打造自研能力。核心組件、核心工具堅持完全自研，如微服務及可視化基礎技術框架， 系統(tǒng)管理、 功能管理、權限管理等基礎功能。業(yè)務應用、行業(yè)定制采用融合研發(fā)（ 小身板干大 事） ， 如大型客戶項目交付、行業(yè)產(chǎn)品研發(fā)。C. 立足典型行業(yè)， 能力可被敏捷集成技術研發(fā)閉環(huán)： 智慧數(shù)技術研發(fā)體系來源于 行業(yè)實踐， 也服務于行業(yè)實踐， 在行業(yè)產(chǎn)品研發(fā) 和客戶項目交付過程中不斷完善。實際客戶應用： 江西省農(nóng)商行大數(shù)據(jù)平臺 經(jīng)緯項目數(shù)據(jù)服務最高法數(shù)據(jù)服務中國教

14、育電視臺敏感人物識別. 業(yè)務產(chǎn)品實踐： 數(shù)據(jù)管控平臺 數(shù)據(jù)安全網(wǎng)關風控點查詢 藥監(jiān)大數(shù)據(jù)旅游新產(chǎn)品智游. A. 打造“ 三核一體多引擎” 的數(shù)智中臺基于行業(yè)交付實踐， 持續(xù)沉淀的數(shù)據(jù)與模型服務、 以及平臺研發(fā)能力。統(tǒng)一接入、集中管控、統(tǒng)一服務的中臺核心組件。 一體系： 一個智慧數(shù)技術研發(fā)體系。多引擎： 可視化的四庫一平臺， 微服務 的管數(shù)、管屏、管權限、管模型、管應用等多引擎。獨立自研融合開發(fā)統(tǒng)一 接入集中 管控統(tǒng)一 服務三核多引擎微服務管數(shù)微服務管屏微服務管應用四庫 一平臺微服務管模型微服務管權限一體聯(lián)通大數(shù)據(jù)能力，引領業(yè)務新發(fā)展案例基站位置糾偏100H30節(jié)點5萬億1H1臺X86全國201

15、9科技進步獎-中國聯(lián)通集團2019領先科技成果獎中國互聯(lián)網(wǎng)協(xié)會風控反欺詐信用評估人工智能應用關系圖譜挖掘位置時序洞察數(shù)據(jù)解析治理行為興趣分析經(jīng)濟能力 特征01用戶黏度 特征02活躍度特征03社交行為 特征04終端使用特征05身份特質(zhì)特征06基本月租套餐月租用戶等級近6月出賬收入近6月增值業(yè)務費國際漫游費用占比。是否合約用戶月返話費占比是否家庭/集團卡綁定互聯(lián)網(wǎng)賬號數(shù)綁定銀行定數(shù)量入網(wǎng)時長。月活躍天數(shù)語音使用度流量使用度短信使用度主被叫通話時長點對點短信收發(fā)數(shù) 量。年齡性別積分值證件類型是否實名認證停機時長。換機頻率終端類型終端品牌終端型號是否智能是否山寨?；ハ嗤ㄔ捜藬?shù)單方主叫人數(shù)單方被叫人數(shù)互

16、通短信人數(shù)單方發(fā)送短信人數(shù)單方接收短信人數(shù)。語音詳單實名信息上網(wǎng)流量短信詳單計費賬單數(shù)據(jù)清洗數(shù)據(jù)集成數(shù)據(jù)變換信令數(shù)據(jù)數(shù)據(jù)規(guī)約綜合信用分線上線下融合洞察推薦人工智能應用數(shù)據(jù)解析治理行為興趣分析41圈定目標用戶群3廣告策略推薦多渠道觸達2品牌/產(chǎn)品推薦26%位置時序洞察關系圖譜挖掘不同品牌/產(chǎn)品系列的門店上架配比推薦56%39%母嬰類個護類清潔類時尚類45%24181260Hourschannel線下商超選址&品效評估不同待選點交通情況對比門店銷售情況與地理分析不同時間段門店訂單量對比人工智能應用關系圖譜挖掘位置時序洞察數(shù)據(jù)解析治理行為興趣分析人群屬性與銷售情況相關性分析企業(yè)實際經(jīng)營群體&位置識別

17、2018.112018.122019.0142人37人30人0人125人121人131人158人2019.02人工智能應用關系圖譜挖掘位置時序洞察數(shù)據(jù)解析治理行為興趣分析國家大型工程進展監(jiān)測評估人工智能應用關系圖譜挖掘位置時序洞察數(shù)據(jù)解析治理行為興趣分析2016年3月2017年5月2018年1月2018年12月遙 感 圖 像 分 析施 工 人 群 估 測周12小時以上14小時以上16小時以上18小時以上20小時以上22小時以上一度聯(lián)系人二度聯(lián)系人三度聯(lián)系人1145114805940234273921379666543715130473210151113845837134484199148107

18、836134232415122824736261702636612082554227203304471781269381634333041814510776483825331409117815642322423847101941369671493823138112491911581289162120281231623919315511977336501327020015513310367333481420816711689735904351152321801371139169231461622016111795735413146興趣智能檢索系統(tǒng)人工智能應用關系圖譜挖掘位置時序洞察數(shù)據(jù)解析治理行

19、為興趣分析url:/s? biz=MzI1MTUwNDg2MQ=&mid=2247486965&idx=1&sn=6382bccc73dfb671625f63f091630179&,name: 全球資產(chǎn)配置管家, alias: SunnychanCFP,introduction: 關注桑尼，帶你一起學理財、懂投資、多賺錢、防掉坑。 桑尼先生，CFP中國注冊理財規(guī)劃師持證人，擁有基金、證券、保險 從業(yè)資格。 這是一個有態(tài)度的，理財知識分享平臺。 “我已加入“維權騎士”()的版權保護計劃,title: 保險 | 老人保險投保指南, publish_time: 2018-10-30,text: 有態(tài)

20、度的理財知識分享平臺n,n點擊n上方n“n藍字n”nn關注學習n正文共：3566 字 28xa0圖n預計閱讀時間：xa09xa0分鐘n 買保險前，首先要明確投保動機，了解自己想要達到何種目的，才能更好地去配置產(chǎn)品。一般而言，為老人投保的動機有以下幾類：n1.經(jīng)濟考 慮：n擔心父母隨著年齡增大，疾病多發(fā)，意外較多，希望通過保險減輕未來的經(jīng)濟負擔。n持有此動機的消費者，適合購買意外險、防癌險、 醫(yī)療險等保障型險種。n2.保費考慮：n想趁著父母年紀不算太大，保費較低，及早購買。n無論是保障型產(chǎn)品還是理財型，越早買保費越低n， 一般n過了 60 周歲后，保費很高n不說，n選擇還特別少n。n3.投保限制考慮：n想趁著父母n身體尚好n，n投保限制較少n，及早購買。老人身體或多或少會有些癥狀，所以要趁著情況不嚴重的時候購買。n如果身體已經(jīng)有很多疾病了，可能大部分醫(yī)療