某政企數(shù)字化轉(zhuǎn)型數(shù)據(jù)治理平臺解決方案

政企數(shù)字化轉(zhuǎn)型數(shù)據(jù)治理平臺解決方案目錄數(shù)據(jù)典型問題數(shù)據(jù)平臺產(chǎn)品與解決方案成功案例典型數(shù)據(jù)問題1：數(shù)據(jù)共享困難評估項目績效產(chǎn)品經(jīng)營：競爭力、銷量、毛利產(chǎn)品客戶滿意度：質(zhì)量、易用性產(chǎn)品維保：返修率、可維護性研發(fā)部銷售部銷售量易銷售型反饋財經(jīng)部售后服務合同額收入利潤客戶反饋備品備件服務成本研發(fā)部與各部門溝通打申請報告公司總裁審批系統(tǒng)對接每項數(shù)據(jù)至少一個月以企業(yè)產(chǎn)品研發(fā)為例3典型數(shù)據(jù)問題2：數(shù)據(jù)質(zhì)量不可靠文檔數(shù)據(jù)長：100CM寬：80CM高：200CM凈重：50Kg產(chǎn)品設(shè)計生產(chǎn)制造真實發(fā)貨數(shù)據(jù)海關(guān)清關(guān)，貨物與實際不符實際數(shù)據(jù)長：100CM寬：80CM高：200CM凈重：60Kg產(chǎn)品4典型數(shù)據(jù)問題3：基于數(shù)據(jù)快速分析與決策擴大生產(chǎn)Or減少生產(chǎn)工人準備度如何供應鏈是否有風險資金鏈是否有問題供應鏈財經(jīng)制造5數(shù)據(jù)治理是政企數(shù)字化轉(zhuǎn)型的核心能力找得到

質(zhì)量高數(shù)據(jù)質(zhì)量可檢驗數(shù)據(jù)標準統(tǒng)一用得好數(shù)據(jù)支撐業(yè)務應用與決策從數(shù)據(jù)采集到數(shù)據(jù)全景可視可搜索的數(shù)據(jù)目錄清晰的數(shù)據(jù)標準定義數(shù)據(jù)目錄Data

Catalog6目錄7數(shù)據(jù)典型問題數(shù)據(jù)平臺產(chǎn)品與解決方案成功案例數(shù)據(jù)平臺方案全流程提升數(shù)據(jù)質(zhì)量全量數(shù)據(jù)匯集加強數(shù)據(jù)服務數(shù)據(jù)資產(chǎn)展現(xiàn)匯集所有數(shù)據(jù)使用HW云CDM/DRS等平臺對總部和分公司的數(shù)據(jù)進行匯集規(guī)整匯集的數(shù)據(jù)使用HW云DGC平臺對數(shù)據(jù)進行數(shù)據(jù)開發(fā)、規(guī)范設(shè)計與數(shù)據(jù)清洗和治理給數(shù)據(jù)賦予業(yè)務屬性數(shù)據(jù)服務化，支撐業(yè)務應用，實現(xiàn)數(shù)據(jù)可用不可得數(shù)據(jù)大屏展示構(gòu)建可定制的數(shù)據(jù)大屏或業(yè)務應用，實現(xiàn)用戶數(shù)據(jù)一盤棋12348數(shù)據(jù)平臺方案：一站式數(shù)據(jù)運營平臺，構(gòu)建全域資產(chǎn)產(chǎn)

存

消

管

控數(shù)據(jù)接入能力數(shù)據(jù)一站式開發(fā)數(shù)據(jù)上云能力數(shù)據(jù)領(lǐng)域建模能力敏感數(shù)據(jù)安全存儲數(shù)據(jù)服務化能力分析資產(chǎn)沉淀能力分析資產(chǎn)標準化能力數(shù)據(jù)質(zhì)量管理能力元數(shù)據(jù)管理能力數(shù)據(jù)模型管理能力數(shù)據(jù)服務計量能力數(shù)據(jù)脫敏能力數(shù)據(jù)水印保護能力審計追溯能力DGC數(shù)據(jù)集成實時接入批量集成設(shè)備數(shù)據(jù)集成DGC：一站式數(shù)據(jù)運營平臺DGC數(shù)據(jù)服務數(shù)據(jù)開發(fā)可視化ETL混合編排流批結(jié)合并發(fā)調(diào)度監(jiān)控運維數(shù)據(jù)資產(chǎn)元數(shù)據(jù)采集血緣分析

資產(chǎn)管理

數(shù)據(jù)地圖

資產(chǎn)報告數(shù)據(jù)規(guī)范業(yè)務分層數(shù)據(jù)標準約束規(guī)則數(shù)據(jù)模型數(shù)據(jù)指標數(shù)據(jù)質(zhì)量質(zhì)量稽核數(shù)據(jù)對賬指標管理監(jiān)控告警質(zhì)量報告數(shù)據(jù)服務服務市場開發(fā)調(diào)試審核發(fā)布授權(quán)流控運營運維數(shù)據(jù)開發(fā)效率提升3倍

?

40+異構(gòu)數(shù)據(jù)源接入

?

數(shù)據(jù)建模工作從月到天

?

開放API，支持被集成全流程開發(fā)治理，0編碼API服務，數(shù)據(jù)->資產(chǎn)->價值文檔DDSRDSDGC可管理豐富的數(shù)據(jù)源類型批處理MRS

數(shù)倉DWS9數(shù)據(jù)集成：多種方式異構(gòu)數(shù)據(jù)源高效接入統(tǒng)一數(shù)據(jù)存儲離線數(shù)據(jù)數(shù)據(jù)庫 服務器

大數(shù)據(jù)…CDM批量數(shù)據(jù)遷移1、產(chǎn)品定位TP→數(shù)據(jù)湖場景；2、產(chǎn)品特點支持20+種數(shù)據(jù)源支持全量、增量遷移支持多種調(diào)度方式業(yè)務系統(tǒng)數(shù)據(jù)傳感器量測數(shù)據(jù)業(yè)務數(shù)據(jù)…IOT設(shè)備數(shù)據(jù)接入（kafka+Flink）1、產(chǎn)品定位IOT數(shù)據(jù)實時集成2、產(chǎn)品特點支持IOT數(shù)據(jù)實時集成實時數(shù)據(jù)數(shù)據(jù)庫業(yè)務數(shù)據(jù)大數(shù)據(jù)…10DRS實時數(shù)據(jù)遷移1、產(chǎn)品定位TP→數(shù)據(jù)倉庫場景2、產(chǎn)品特點支持HW云數(shù)據(jù)庫數(shù)據(jù)源支持全量、增量遷移支持多種調(diào)度方式批量數(shù)據(jù)遷移CDM數(shù)據(jù)遷移支持20多種常用數(shù)據(jù)源，滿足數(shù)據(jù)在云上和云下的不同遷移場景預置豐富的字段轉(zhuǎn)換功能：脫敏，字符截取，日期格式化遷移效率基于分布式計算框架進行數(shù)據(jù)任務執(zhí)行和數(shù)據(jù)傳輸優(yōu)化，效率高交付方式開箱即用，提供可視化任務開發(fā)界面，通過簡單配置幾分鐘即可完成任務開發(fā)運維提供可視化監(jiān)控，實時掌握任務執(zhí)行狀態(tài)，快速定位異常CDM特點第三方云數(shù)據(jù)庫服務器大數(shù)據(jù)企業(yè)數(shù)據(jù)中心數(shù)據(jù)庫服務器大數(shù)據(jù)HW云CDMElasticSearchFTPOBSDISHadoop關(guān)系數(shù)據(jù)庫數(shù)據(jù)倉庫CDMCDMElasticSearchFTPOBSDISHadoop關(guān)系數(shù)據(jù)庫數(shù)據(jù)倉庫HTTPVPNHTTPVPN第三方云數(shù)據(jù)庫服務器大數(shù)據(jù)企業(yè)數(shù)據(jù)中心數(shù)據(jù)庫服務器大數(shù)據(jù)11提供同構(gòu)/異構(gòu)數(shù)據(jù)源之間批量數(shù)據(jù)遷移服務，支持文件系統(tǒng)，對象存儲，關(guān)系數(shù)據(jù)庫，數(shù)據(jù)倉庫，NoSQL，大數(shù)據(jù)云服務等數(shù)據(jù)源之間遷移，無論是本地數(shù)據(jù)中心還是公有云上的數(shù)據(jù)源CDM功能特性多數(shù)據(jù)源支持HDFS、HBase、Hive、DWS、UQuery、OBS、FTP、SFTP、NAS、MySQL、PostgreSQL、SQLServer、Oracle、Db2、DCS(Redis)、DDS(MongoDB)、CloudTable、DIS(Kafka)、

Elasticsearch事務模式遷移當作業(yè)執(zhí)行失敗時，支持將數(shù)據(jù)回滾到作業(yè)開始之前的狀態(tài)，自動清理目的表中的數(shù)據(jù)。向?qū)介_發(fā)界面提供可視化的連接和任務創(chuàng)建、編輯界面，用戶通過菜單配置方式完成連接和任務創(chuàng)建和編輯臟數(shù)據(jù)歸檔支持遷移過程中的臟數(shù)據(jù)單獨歸檔到臟數(shù)據(jù)日志中，便于用戶查看。并支持設(shè)置臟數(shù)據(jù)比例閾值來決定任務是否成功。文件加密在遷移文件到文件系統(tǒng)時，支持對寫入云端的文件進行加密。表/文件/整庫遷移支持批量遷移表或者文件，還支持同構(gòu)/異構(gòu)數(shù)據(jù)庫之間整庫遷移，一個作業(yè)即可遷移幾百張表。字段數(shù)據(jù)轉(zhuǎn)換器支持去隱私、字符串操作、日期操作等常用字段數(shù)據(jù)轉(zhuǎn)換功能。增量數(shù)據(jù)遷移支持文件增量遷移和使用Where條件配合時間變量函數(shù)實現(xiàn)增量數(shù)據(jù)遷移。RESTful

API支持RESTful接口提供服務管理API（申請、注銷、啟停），連接管理API（增刪改查），作業(yè)管理API（增刪改查、復制、啟停）。MD5校驗一致性支持MD5校驗，檢查端到端文件的一致性，并輸出校驗結(jié)果。12DRS高效的數(shù)據(jù)庫上云遷移工具數(shù)據(jù)復制服務（Data

Replication

Service，簡稱為DRS）是一種易用、穩(wěn)定、高效，用于數(shù)據(jù)庫在線遷移和數(shù)據(jù)庫實時同步的云服務。DRS

圍繞云數(shù)據(jù)庫，降低了數(shù)據(jù)庫之間數(shù)據(jù)流通的復雜性，有效地幫助您減少數(shù)據(jù)傳輸?shù)某杀緫脠鼍捌渌茢?shù)據(jù)庫本地數(shù)據(jù)庫MySQLMySQLGaussDB(for

openGauss)GaussDB(for

MySQL)數(shù)據(jù)復制服務DRS云內(nèi)自建數(shù)據(jù)庫VPC專線/VPN/公網(wǎng)+SSL專線/VPN/公網(wǎng)+SSLVPCMySQL支持遷入和遷出HW云外部網(wǎng)絡支持數(shù)據(jù)全量、全量+增量同步Oracle本地數(shù)據(jù)庫14MySQLDWS目標端數(shù)據(jù)庫在線遷移支持通過多種網(wǎng)絡鏈路，實現(xiàn)跨云平臺數(shù)據(jù)庫遷移、云下數(shù)據(jù)庫遷移上云或云上跨Region的數(shù)據(jù)庫遷移等多種業(yè)務場景數(shù)據(jù)同步數(shù)據(jù)同步在不同的系統(tǒng)之間實現(xiàn)關(guān)鍵業(yè)務數(shù)據(jù)的實時流動，同步是維持不同業(yè)務系統(tǒng)之間數(shù)據(jù)的持續(xù)流動，常見的場景是：實時分析、報表系統(tǒng)、數(shù)倉環(huán)境多活災備解決地區(qū)故障導致的業(yè)

務不可用，為用戶業(yè)務

連續(xù)性提供數(shù)據(jù)庫的同

步保障。輕松地實現(xiàn)云

下數(shù)據(jù)庫到云上的災備、跨云平臺的數(shù)據(jù)庫災備客戶價值操作便捷，簡單，完全按照指引操作DRS，實現(xiàn)了數(shù)據(jù)庫的遷移和同步“人人都會”在DRS

中僅需分鐘級就能搭建起遷移任務，讓整個環(huán)境搭建“高效快速”DRS通過服務化，免去了傳統(tǒng)的DBA專家人力成本，硬件成本，并允許按需購買，實現(xiàn)了服務“人人都用上”DRS通過多項特性，大大提升任務成功率，幫助用戶“人人都能做好”數(shù)據(jù)庫遷移和同步15IOTDA：全場景極簡設(shè)備接入核心優(yōu)勢全場景極簡設(shè)備接入10+接入方式，覆蓋各類場景協(xié)議插件接入私有協(xié)議小時級設(shè)備極簡接入穩(wěn)定連接，高并發(fā)通信億級設(shè)備安全穩(wěn)定連接10萬TPS高并發(fā)可靠通信萬級TPS并發(fā)設(shè)備上線數(shù)據(jù)實時推送，按需流轉(zhuǎn)實時推送數(shù)據(jù)到業(yè)務服務器數(shù)據(jù)無縫流轉(zhuǎn)到10+云服務自定義數(shù)據(jù)流轉(zhuǎn)規(guī)則全鏈路自診斷，高效運維全鏈路日志分析和消息跟蹤設(shè)備狀態(tài)實時監(jiān)控和感知靈活自定義業(yè)務指標告警低成本構(gòu)建物聯(lián)網(wǎng)解決方案相比企業(yè)自建平臺省錢省心引入IoT平臺讓業(yè)務應用更簡單高性價比平臺實例，按需擴容設(shè)備HW云其他服務數(shù)據(jù)上報下行控制數(shù)據(jù)推送API調(diào)用數(shù)據(jù)流轉(zhuǎn)HW云IoT平臺（IoTDA）設(shè)備接入

原生協(xié)議接入行業(yè)協(xié)議接入自定義協(xié)議插件邊云協(xié)同接入監(jiān)控運維日志分析消息通信數(shù)據(jù)上報命令下發(fā)文件上傳配置下發(fā)消息跟蹤設(shè)備管理生命周期管理聯(lián)動規(guī)則OTA升級設(shè)備影子狀態(tài)監(jiān)控指標監(jiān)控數(shù)據(jù)流轉(zhuǎn)訂閱推送流轉(zhuǎn)規(guī)則數(shù)據(jù)過濾數(shù)據(jù)附加業(yè)務告警行業(yè)應用業(yè)務服務器OBS云數(shù)據(jù)庫函數(shù)IoT數(shù)據(jù)分析MRSDIS消息隊列ROMA設(shè)備接入服務（IoT

Device

Access）是HW物聯(lián)網(wǎng)基礎(chǔ)服務，提供海量設(shè)備連接上云、設(shè)備和云端雙向消息通信、批量設(shè)備管理、遠程控制和監(jiān)控、OTA升級、設(shè)備聯(lián)動規(guī)則等能力，并可將設(shè)備數(shù)據(jù)靈活流轉(zhuǎn)到HW云其他服務，幫助物聯(lián)網(wǎng)行業(yè)用戶快速完成設(shè)備聯(lián)網(wǎng)及行業(yè)應用集成。數(shù)據(jù)存儲：智能數(shù)據(jù)湖的數(shù)據(jù)基座MRS數(shù)據(jù)源貼源數(shù)據(jù)混合云業(yè)務庫物聯(lián)網(wǎng)IoT文件消息…明細數(shù)據(jù)模型數(shù)據(jù)數(shù)據(jù)存儲離線數(shù)據(jù)湖交互查詢HetuEngine（湖內(nèi)查詢）專題集市批處理HiveSparkParquet

ORCHudi（實時數(shù)據(jù)管理）實時流處理實時同步SparkStreaming/Flink（流處理引擎）Kafka（消息隊列）批量加載實時數(shù)據(jù)湖實時加載邏輯數(shù)據(jù)湖HetuEngine（跨湖查詢）數(shù)據(jù)湖A

數(shù)據(jù)湖B數(shù)據(jù)清洗挖掘建模數(shù)據(jù)管理固定報表清單/詳單

大屏展示

BI查詢按需加載實時加載AI分析專題分析實時應用自助分析容災融合數(shù)據(jù)湖版湖倉一體版HDFSOBSFlink

SQL（批流合一）CDL（實時集成引擎）實時同步定時加載容器調(diào)度MRS作為FusionInsight智能數(shù)據(jù)湖的數(shù)據(jù)基座，實現(xiàn)“三湖+集市”業(yè)務場景，滿足客戶建設(shè)數(shù)據(jù)湖過程中不同各階段的需求。實時檢索HBase（簡單檢索）ELasticSearch（復雜檢索）Clickhouse（實時OLAP）GES（圖數(shù)據(jù)庫）Redis（內(nèi)存數(shù)據(jù)庫）IOTDB（時序數(shù)據(jù)庫）……15數(shù)據(jù)存儲：高擴展高性能企業(yè)級云數(shù)據(jù)倉庫DWS…標準ANSI

SQL、JDBC、ODBC電信金融政府公共安全集中經(jīng)分

詳單查詢

企業(yè)數(shù)據(jù)倉庫 智慧交通

警務云…協(xié)調(diào)節(jié)點-1行/列存儲

X86/ARM行/列存儲

X86/ARM行/列存儲

X86/ARM本地磁盤本地磁盤本地磁盤協(xié)調(diào)節(jié)點-2協(xié)調(diào)節(jié)點-m…大規(guī)模集群通訊網(wǎng)絡數(shù)據(jù)節(jié)點-1數(shù)據(jù)節(jié)點-2數(shù)據(jù)節(jié)點-n企業(yè)數(shù)倉、數(shù)據(jù)集市、Ad-hoc查詢、CRM/ERP、交易系統(tǒng)高擴展容量和性能線性擴展，500+節(jié)點，PB級容量存儲，滿足大規(guī)模數(shù)據(jù)倉庫需求動態(tài)擴容技術(shù)，表級別在線擴容保障業(yè)務不中斷、無感知自動數(shù)據(jù)重分布技術(shù)，擴容過程性能穩(wěn)定完備的工具鏈數(shù)據(jù)遷移SQL開發(fā)集群管理高兼容能力SQL無需修改，完整應用開發(fā)和遷移工具SQL

On

HDFS技術(shù)，DWS可以方便訪問MRS數(shù)據(jù)兼容標準ANSI

SQL

99和SQL

2003，兼容PostgreSQL/Oracle數(shù)據(jù)庫生態(tài)高性能16全并行分布式MPP架構(gòu)，無單點性能瓶頸行列混存及向量化計算，滿足全行業(yè)場景高性能訴求，帶來100倍分析性能提升極速并行數(shù)據(jù)加載工具GDS，實現(xiàn)并行高速加載數(shù)據(jù)存儲：企業(yè)級云原生存算分離數(shù)據(jù)庫GaussDB(for

MySQL)GaussDB(for

MySQL)是HW自研的最新一代企業(yè)級高擴展海量存儲分布式數(shù)據(jù)庫，基于MySQL8.0版本，完全兼容MySQL。采用計算存儲分離架構(gòu)，基于HW最新一代DFV

存儲，支持1主15只讀的高擴展性、128T的海量存儲，無需分庫分表，數(shù)據(jù)0丟失，為客戶提供企業(yè)級數(shù)據(jù)庫解決方案Page

reads主節(jié)點(read-write)只讀節(jié)點(read-only)只讀節(jié)點(read-only)Coherence

trafficRedo

log

writesDFV最新一代共享存儲只讀只讀LAN

network磁盤 磁盤磁盤磁盤

磁盤MySQL主SQL

層EVSEVSSQL層FusionStorageInnoDBInnoDBBinlogPageRedoUndo傳統(tǒng)MySQL數(shù)據(jù)庫架構(gòu)MySQL

備17GaussDB(for

MySQL)架構(gòu)讀寫VS讀寫存在問題：Page雙寫和各類日志寫入消耗大量CPU、網(wǎng)絡、IO等資源，極大限制性能添加只讀節(jié)點，需要全量復制主節(jié)點數(shù)據(jù)，效率低備份和恢復效率低，1T以上數(shù)據(jù)都是小時計主備復制時延無法保證，主備倒換受到影響，難于保證RTO架構(gòu)優(yōu)勢：極致性能：計算與存儲分離，Page重做等下推到存儲節(jié)點，充分發(fā)揮計算性能極速擴展：主節(jié)點、只讀節(jié)點均不保存數(shù)據(jù)，支持快速速擴展新的只讀節(jié)點極速恢復：備份恢復采用DFV存儲快照技術(shù)，數(shù)據(jù)0丟失，故障閃恢復極致可靠：主備無需binlog同步，時延<10ms，主節(jié)點故障只讀節(jié)點極速切換19數(shù)據(jù)存儲：企業(yè)級分布式數(shù)據(jù)庫GaussDB(for

openGauss)GaussDB(foropenGauss)，是公司自主研發(fā)的新一代企業(yè)級分布式數(shù)據(jù)庫，支持x86和Kunpeng硬件架構(gòu)，基于Share-nothing架構(gòu)，提供高吞吐強一致性事務處理能力、兩地三中心金融級高可用能力、分布式高擴展能力、大數(shù)據(jù)高性能查詢能力，應用于金融、電信、政府等行業(yè)關(guān)鍵核心系統(tǒng)。高性能:支持高吞吐強一致性事務能力鯤鵬2路服務器分布式強一致：32節(jié)點1200萬tpmC高可用:雙活和兩地三中心高可用集群內(nèi)HA，數(shù)據(jù)不丟失，業(yè)務秒級中斷同城跨AZ容災，數(shù)據(jù)不丟失，分鐘級恢復兩地三中心部署易管理:易遷移，易監(jiān)控，運維兼容SQL2003標準語法+企業(yè)擴展包數(shù)據(jù)復制、監(jiān)控運維、開發(fā)工具高擴展:容量和性能按需水平擴展支持3副本、4副本高可用方案3副本最大256節(jié)點擴展能力，卓越線性比支持在線擴容數(shù)據(jù)遷移SQL開發(fā)集群管理工具集分布式執(zhí)行分布式SQLData

NodeCoordinator

Node（分布式CBO）GTM(分布式事務)Computing

network存儲引擎分布式執(zhí)行分布式SQLData

Node存儲引擎主備HA切換跨AZ多活兩地三中心X86/鯤鵬+本地存儲電信金融電力政府平安城市…適用行業(yè)20數(shù)據(jù)存儲：DDS完全兼容MongoDB、靈活架構(gòu)的文檔數(shù)據(jù)庫文檔數(shù)據(jù)庫服務（Document

Database

Service，簡稱DDS）完全兼容MongoDB協(xié)議，提供安全、高可用、高可靠、彈性伸縮和易用的數(shù)據(jù)庫服務，同時提供一鍵部署、彈性擴容、容災、備份、恢復、監(jiān)控和告警等功能。支持單節(jié)點、集群、副本集方案，滿足用戶對文檔數(shù)據(jù)庫的業(yè)務訴求。ApplicationShard

2Shard

NShard

1PrimarySecondaryHidden…DDS文檔數(shù)據(jù)庫服務PrimarySecondaryHiddenPrimarySecondaryHiddenRouterDriverMongoDB3種架構(gòu)集群、副本集、單節(jié)點集群：nTB存儲、在線擴容副本集：2TB存儲，3副本單節(jié)點：高性價比100%兼容MongoDB-遷移上云，無需業(yè)務改造-支持社區(qū)3.4/4.0版本高可用架構(gòu)高可用、跨3AZ部署高可靠自動/手動備份，數(shù)據(jù)恢復三副本Shard架構(gòu)（集群）副本集多節(jié)點（三、五、七）副本集支持跨3AZ部署每天自動備份，保留732天手動備份，永久保存?zhèn)浞莼謴透甙踩邆涠鄬影踩雷o網(wǎng)絡：VPC網(wǎng)絡隔離傳輸：SSL安全連接訪問：安全組出、入限制存儲：EVS磁盤加密管理、監(jiān)控簡便、完善的管理監(jiān)控可視化監(jiān)控：CPU/內(nèi)存/IO等實例一鍵擴容、規(guī)格變更錯誤日志、慢日志管理參數(shù)組配置21數(shù)據(jù)治理：集開發(fā)+資產(chǎn)+規(guī)范+質(zhì)量一體化的治理流程DGC平臺：提供一站式智能數(shù)據(jù)管理能力，幫助企業(yè)快速構(gòu)建從數(shù)據(jù)接入到數(shù)據(jù)分析的端到端智能數(shù)據(jù)系統(tǒng)，消除數(shù)據(jù)孤島；數(shù)據(jù)治理能力：基于HW13年數(shù)據(jù)治理方法論，幫助企業(yè)統(tǒng)一數(shù)據(jù)標準，構(gòu)建全域大數(shù)據(jù)資產(chǎn)，加快數(shù)據(jù)變現(xiàn)，實現(xiàn)數(shù)字化轉(zhuǎn)型DGC：一站式數(shù)據(jù)運營平臺數(shù)據(jù)開發(fā)可視化ETL混合編排流批結(jié)合并發(fā)調(diào)度監(jiān)控運維數(shù)據(jù)資產(chǎn)元數(shù)據(jù)采集血緣分析

資產(chǎn)管理

數(shù)據(jù)地圖

資產(chǎn)報告數(shù)據(jù)規(guī)范業(yè)務分層數(shù)據(jù)標準約束規(guī)則數(shù)據(jù)模型數(shù)據(jù)指標數(shù)據(jù)質(zhì)量質(zhì)量稽核數(shù)據(jù)對賬指標管理監(jiān)控告警質(zhì)量報告一站式平臺，一個DGC平臺即可完成數(shù)據(jù)全生命周期的開發(fā)治理工作，加速傳統(tǒng)數(shù)據(jù)治理流程7倍以上數(shù)據(jù)湖統(tǒng)一管理，單平臺統(tǒng)一接入多種數(shù)據(jù)源，支 持40多種異構(gòu)數(shù)據(jù)源HWW云各類基礎(chǔ)數(shù)據(jù)服務支持模型資產(chǎn)沉淀，構(gòu)筑行業(yè)知識庫，通過模板一鍵導入導出能力復用數(shù)據(jù)資產(chǎn)和模型，將原有1個月的數(shù)據(jù)建模工作縮短到1天以內(nèi)支持公有云、混合云數(shù)據(jù)統(tǒng)一管理，靈活支持客戶數(shù)據(jù)系統(tǒng)建設(shè)需求22數(shù)據(jù)開發(fā)：統(tǒng)一開發(fā)編排調(diào)度運維平臺，降低大數(shù)據(jù)服務門檻數(shù)據(jù)開發(fā)流程：數(shù)據(jù)建模：在規(guī)范設(shè)計環(huán)節(jié)中，根據(jù)用戶業(yè)務需求設(shè)計并創(chuàng)建好數(shù)據(jù)模型數(shù)據(jù)集成：數(shù)據(jù)開發(fā)中集成批量數(shù)據(jù)遷移進行數(shù)據(jù)遷移腳本/作業(yè)開發(fā)：在線開發(fā)SQL/Shell腳本和作業(yè)，拖拽式完成工作流編排運維調(diào)度：混合編排多類型任務，配置多種調(diào)度配置策略，監(jiān)控活動的作業(yè)數(shù)據(jù)應用：開發(fā)/加工好的數(shù)據(jù)，通過數(shù)據(jù)共享提供給業(yè)務方消費產(chǎn)品特點：一站式IDE平臺：實現(xiàn)一站式大數(shù)據(jù)服務及數(shù)倉開發(fā)，無需切換多個工具一站式編排調(diào)度平臺：支持對接多種云服務，可實現(xiàn)跨服務作業(yè)編排調(diào)度簡單易用：在線SQL/Shell腳本編輯調(diào)試；預設(shè)30多種任務類型，拖拽式工作流編排調(diào)度穩(wěn)定高效：豐富的調(diào)度配置策略，千萬級別的作業(yè)調(diào)度能力數(shù)據(jù)規(guī)范：統(tǒng)一數(shù)據(jù)分類、標準、建模、指標管理按照主題域?qū)崿F(xiàn)一數(shù)一源銀行社保房管公安銀行姓名身份證號家庭地址受理時間辦理業(yè)務聯(lián)系電話銀行卡號社保姓名身份證號單位名稱聯(lián)系地址聯(lián)系電話保險類別繳費基數(shù)房管房屋所有人姓名身份證號聯(lián)系電話房屋地址房屋用途產(chǎn)權(quán)證號登記時間公安姓名身份證號戶籍處所宗教居住地址犯罪違法信息基本信息身份證號（公安）姓名（公安）戶籍（公安）年齡（公安）聯(lián)系信息身份證號家庭地址（網(wǎng)格）聯(lián)系電話（網(wǎng)格）聯(lián)系地址（網(wǎng)格）來源（網(wǎng)格）身份證號所屬單位身份證號身份證號銀行卡號（銀行）單位名稱（社保）房屋地址（房管）銀行辦理業(yè)務家庭地址(社保)房屋用途單位名稱（銀行）職業(yè)類型產(chǎn)權(quán)證號金融產(chǎn)品保險類別等級時間家庭地址（銀行）繳費基數(shù)房屋所有人姓名賬戶信息

行為信息

持有信息身份證號姓名流動次數(shù)旅店住宿犯罪前科違章處罰身份證號單位名稱職業(yè)類型危險行業(yè)司法信息……數(shù)據(jù)建模流程、輸入、輸出信息調(diào)研收集源系統(tǒng)資料系統(tǒng)分析和調(diào)研樣本數(shù)據(jù)查看數(shù)據(jù)字典整理源系統(tǒng)介紹文檔源系統(tǒng)數(shù)據(jù)字典測試數(shù)據(jù)源系統(tǒng)調(diào)研文檔主題域數(shù)據(jù)模型概念模型設(shè)計源表主題域劃分確定主題域的主要實體確定實體之間的關(guān)聯(lián)關(guān)系源系統(tǒng)調(diào)研文檔主題域數(shù)據(jù)模型源系統(tǒng)調(diào)研文檔概念數(shù)據(jù)模型邏輯模型設(shè)計統(tǒng)一業(yè)務術(shù)語邏輯模型設(shè)計確定轉(zhuǎn)換規(guī)則完善與跟蹤源系統(tǒng)調(diào)研文檔概念數(shù)據(jù)模型數(shù)據(jù)標準參考或要求邏輯模型設(shè)計文檔代碼統(tǒng)一編碼文檔物理模型設(shè)計表名及字段命名字段類型設(shè)置

PK或其他索引詳細映射邏輯模型設(shè)計文檔代碼統(tǒng)一編碼文檔源到目標詳細映射建表語句-DDL產(chǎn)品特點：踐行數(shù)據(jù)治理方法論，將數(shù)據(jù)治理行為可視化打通數(shù)據(jù)基礎(chǔ)層到匯總層、集市層的數(shù)據(jù)處理鏈路落地數(shù)據(jù)標準和數(shù)據(jù)資產(chǎn)，通過關(guān)系建模、維度建模實現(xiàn)數(shù)據(jù)標準化通過統(tǒng)一指標平臺建設(shè)，實現(xiàn)規(guī)范化指標體系，消除歧義、統(tǒng)一口徑、統(tǒng)一計算邏輯對外提供主題式數(shù)據(jù)查詢與挖掘服務22數(shù)據(jù)質(zhì)量：數(shù)據(jù)質(zhì)量稽核作業(yè)實現(xiàn)數(shù)據(jù)標準快速落地考核監(jiān)督流程再造監(jiān)控預警趨勢分析知識沉淀業(yè)務系統(tǒng)數(shù)據(jù)監(jiān)控效果分析問題分析解決業(yè)務指標監(jiān)控數(shù)據(jù)質(zhì)量監(jiān)控數(shù)據(jù)畫像質(zhì)量監(jiān)控數(shù)據(jù)去重清洗、標準化質(zhì)量分析智能輔助告警系統(tǒng)統(tǒng)一元數(shù)據(jù)管理、數(shù)據(jù)標準、數(shù)據(jù)質(zhì)量稽核庫產(chǎn)品特點：支持兩種質(zhì)量報告：業(yè)務質(zhì)量報告和技術(shù)質(zhì)量報告內(nèi)置多種質(zhì)量規(guī)則：內(nèi)置模板規(guī)則20+種，庫級規(guī)則、表級規(guī)則、字段級規(guī)則和跨字段級規(guī)則多維度質(zhì)量監(jiān)控分析：完整性、有效性、及時性、一致性、準確性、唯一性，數(shù)據(jù)質(zhì)量監(jiān)控+業(yè)務指標監(jiān)控。23數(shù)據(jù)資產(chǎn)：統(tǒng)一數(shù)據(jù)資產(chǎn)視圖，便于資產(chǎn)搜索、訪問、溯源數(shù)據(jù)資產(chǎn)統(tǒng)一視圖技術(shù)元數(shù)據(jù)采集業(yè)務元數(shù)據(jù)管理全鏈路數(shù)據(jù)分析數(shù)據(jù)資產(chǎn)可視化API產(chǎn)品特點：360度全鏈路數(shù)據(jù)資產(chǎn)可視化，通過企業(yè)級的元數(shù)據(jù)管理厘清數(shù)據(jù)資產(chǎn)，關(guān)聯(lián)業(yè)務和技術(shù)元數(shù)據(jù)，實現(xiàn)數(shù)據(jù)資產(chǎn)的數(shù)據(jù)血緣分析和數(shù)據(jù)全景可視數(shù)據(jù)地圖提供企業(yè)數(shù)據(jù)資產(chǎn)統(tǒng)一視圖，支持數(shù)據(jù)智能搜索、數(shù)據(jù)資產(chǎn)標識、全鏈路數(shù)據(jù)血緣分析、數(shù)據(jù)概覽等能力數(shù)據(jù)資產(chǎn)報告從資產(chǎn)容量、資產(chǎn)類型、資產(chǎn)分類、資產(chǎn)標簽等多維度對數(shù)據(jù)資產(chǎn)分布進行可視化展示，支持按照天和周生成資產(chǎn)報告24數(shù)據(jù)服務：解耦數(shù)據(jù)與應用，實現(xiàn)數(shù)據(jù)共享開放產(chǎn)品特點：現(xiàn)有API統(tǒng)一管理：支持將現(xiàn)有的API快速注冊到數(shù)據(jù)服務平臺以統(tǒng)一管理和發(fā)布服務調(diào)用監(jiān)控：已獲取授權(quán)的應用、調(diào)用數(shù)、申請數(shù)、使用參數(shù)等，通過流控策略把控服務調(diào)用用，保障業(yè)務穩(wěn)定性。應用與數(shù)據(jù)解耦：應用、數(shù)據(jù)各自僅關(guān)注各自的業(yè)務邏輯部分數(shù)據(jù)模型共享能力：減少數(shù)據(jù)模型重復開發(fā)；數(shù)據(jù)安全能力：減少大量明細、敏感數(shù)據(jù)直接暴露給應用；25數(shù)據(jù)服務管理：包括API注冊、生成、發(fā)布、停用、恢復、下線、服務目錄、監(jiān)控等數(shù)據(jù)安全：數(shù)據(jù)湖內(nèi)數(shù)據(jù)全生命周期安全和隱私保護加密存儲 靜態(tài)脫敏數(shù)據(jù)水印 動態(tài)脫敏數(shù)據(jù)分級

數(shù)據(jù)分類加密接入數(shù)據(jù)安全管理數(shù)據(jù)開放數(shù)據(jù)安全洞察數(shù)據(jù)存儲數(shù)據(jù)接入數(shù)據(jù)權(quán)限管理數(shù)據(jù)表權(quán)限數(shù)據(jù)目錄權(quán)限數(shù)據(jù)訪問審計數(shù)據(jù)管理敏感數(shù)據(jù)保護敏感數(shù)據(jù)發(fā)現(xiàn)數(shù)據(jù)分級分類數(shù)據(jù)隱私保護關(guān)鍵特點細粒度權(quán)限管控：基于ABAC的細粒度（表級、字段級或記錄級）權(quán)限管控，支持基于標簽策略授權(quán)敏感數(shù)據(jù)發(fā)現(xiàn)：在數(shù)據(jù)湖中自動發(fā)現(xiàn)敏感數(shù)據(jù)并進行數(shù)據(jù)自動分級分類數(shù)據(jù)隱私保護：數(shù)據(jù)脫敏、數(shù)據(jù)水印及數(shù)據(jù)溯源26外部數(shù)據(jù)應用業(yè)務價值全流程安全管理，全方位保障企業(yè)數(shù)據(jù)安全自助發(fā)現(xiàn)隱私數(shù)據(jù)：降低數(shù)據(jù)安全管理難度統(tǒng)一管控：統(tǒng)一認證、統(tǒng)一用戶、統(tǒng)一服務目錄、統(tǒng)一API網(wǎng)關(guān)、統(tǒng)一消息統(tǒng)一認證數(shù)據(jù)治理共享交換標簽畫像BI可視化標準管控多個功能模塊統(tǒng)一認證，實現(xiàn)單點登錄，避免多次輸入用戶名、密碼的繁瑣，提升使用便捷性。通過Manageone的用戶模型統(tǒng)一適配各數(shù)據(jù)服務的用戶信息（用戶組織、角