騰訊云-大數(shù)據(jù)處理套件概述

1、大數(shù)據(jù)處理套件產(chǎn)品概述目 錄 TOC o 1-3 h z u HYPERLINK l _Toc31970511 產(chǎn)品簡(jiǎn)介產(chǎn)品概述 PAGEREF _Toc31970511 h 3 HYPERLINK l _Toc31970512 什么是騰訊大數(shù)據(jù)處理套件 PAGEREF _Toc31970512 h 3 HYPERLINK l _Toc31970513 主要功能 PAGEREF _Toc31970513 h 3 HYPERLINK l _Toc31970514 產(chǎn)品優(yōu)勢(shì) PAGEREF _Toc31970514 h 4 HYPERLINK l _Toc31970515 技術(shù)開(kāi)放 PAGEREF

2、 _Toc31970515 h 4 HYPERLINK l _Toc31970516 安全可靠 PAGEREF _Toc31970516 h 4 HYPERLINK l _Toc31970517 性能卓越 PAGEREF _Toc31970517 h 4 HYPERLINK l _Toc31970518 簡(jiǎn)單易用 PAGEREF _Toc31970518 h 4 HYPERLINK l _Toc31970519 場(chǎng)景豐富 PAGEREF _Toc31970519 h 4 HYPERLINK l _Toc31970520 生態(tài)完善 PAGEREF _Toc31970520 h 4 HYPERLI

3、NK l _Toc31970521 應(yīng)用場(chǎng)景 PAGEREF _Toc31970521 h 6 HYPERLINK l _Toc31970522 數(shù)據(jù)倉(cāng)庫(kù)建設(shè) PAGEREF _Toc31970522 h 6 HYPERLINK l _Toc31970523 實(shí)時(shí)流式數(shù)據(jù)處理 PAGEREF _Toc31970523 h 6 HYPERLINK l _Toc31970524 離線數(shù)據(jù)處理 PAGEREF _Toc31970524 h 6 HYPERLINK l _Toc31970525 數(shù)據(jù)分析與探索挖掘 PAGEREF _Toc31970525 h 6產(chǎn)品簡(jiǎn)介產(chǎn)品概述19-04-09 10:

4、13:09什么是騰訊大數(shù)據(jù)處理套件騰訊大數(shù)據(jù)處理套件（Tencent Big Data Suite，TBDS）是基于騰訊多年海量數(shù)據(jù)處理經(jīng)驗(yàn)，對(duì)外提供的可靠、安全、易用的大數(shù)據(jù)處理平臺(tái)。您可以借助 TBDS 在公有云、私有云、非云化環(huán)境，根據(jù)不同數(shù)據(jù)處理需求選擇合適的大數(shù)據(jù)分析引擎和相應(yīng)的實(shí)時(shí)數(shù)據(jù)開(kāi)發(fā)、離線數(shù)據(jù)開(kāi)發(fā)以及算法開(kāi)發(fā)服務(wù)，來(lái)構(gòu)建您的數(shù)據(jù)倉(cāng)庫(kù)、用戶(hù)畫(huà)像、精準(zhǔn)推薦、風(fēng)險(xiǎn)管控等大數(shù)據(jù)應(yīng)用服務(wù)。主要功能全鏈路數(shù)據(jù)開(kāi)發(fā)易用、安全、穩(wěn)定、高性能的全鏈路大數(shù)據(jù)開(kāi)發(fā)引擎。提供拖拽式的可視化數(shù)據(jù)開(kāi)發(fā) IDE，為用戶(hù)的大數(shù)據(jù)集成、存儲(chǔ)、計(jì)算環(huán)節(jié)提供完整而穩(wěn)定的企業(yè)級(jí)解決方案。用戶(hù)能借助于大數(shù)據(jù)套件獲取到

5、強(qiáng)大的大數(shù)據(jù)開(kāi)發(fā)能力，聚焦于進(jìn)行企業(yè)的業(yè)務(wù)創(chuàng)新。強(qiáng)大的數(shù)據(jù)分析與探索挖掘引擎一站式數(shù)據(jù)分析、探索、挖掘平臺(tái)。包含基于維度建模的多維分析、交互式探索分析、機(jī)器學(xué)習(xí)、深度學(xué)習(xí)、可視化敏捷報(bào)表門(mén)戶(hù)等功能，向用戶(hù)提供強(qiáng)大的數(shù)據(jù)分析與數(shù)據(jù)挖掘能力，助力用戶(hù)大數(shù)據(jù)的價(jià)值發(fā)現(xiàn)。開(kāi)箱即用的數(shù)據(jù)治理工具開(kāi)箱即用的數(shù)據(jù)治理工具，面向企業(yè)數(shù)據(jù)治理需求，提供完善的數(shù)據(jù)元信息管理功能。支持細(xì)到字段級(jí)別的數(shù)據(jù)權(quán)限管控，包含庫(kù)表數(shù)據(jù)字典、數(shù)據(jù)血緣跟蹤與溯源、熱點(diǎn)數(shù)據(jù)分析等特色功能，以幫助企業(yè)客戶(hù)提高海量數(shù)據(jù)資產(chǎn)的管理效率。一站式運(yùn)維管理平臺(tái)一站式的可視化運(yùn)維管理平臺(tái)。包含一鍵式集群部署、增量部署、豐富的可視化運(yùn)維工具、完善

6、的面向多租戶(hù)的計(jì)算資源管控體系和完善的用戶(hù)權(quán)限管理體系為客戶(hù)提供企業(yè)級(jí)的大數(shù)據(jù)平臺(tái)運(yùn)維管理能力支撐。產(chǎn)品優(yōu)勢(shì)19-04-09 10:13:13技術(shù)開(kāi)放存儲(chǔ)標(biāo)準(zhǔn)兼容開(kāi)源 Hadoop 標(biāo)準(zhǔn)，使歷史構(gòu)建在 Hadoop 上的大數(shù)據(jù)平臺(tái)可以平滑遷移。支持多驅(qū)動(dòng)接入、完美兼容社區(qū)標(biāo)準(zhǔn)；支持 SQL2003 標(biāo)準(zhǔn)的內(nèi)存迭代運(yùn)算引擎 SparkSQL；可選購(gòu) PLSQL 語(yǔ)法驅(qū)動(dòng)，以獲得90%的Oracle 語(yǔ)法支持。安全可靠數(shù)據(jù)節(jié)點(diǎn)分布式部署，可選多份備份。所有系統(tǒng)控制節(jié)點(diǎn)主從熱備，故障秒級(jí)切換，經(jīng)過(guò)騰訊95%業(yè)務(wù)考驗(yàn)，可用性達(dá)99.999%。支持?jǐn)?shù)據(jù)加密傳輸、存儲(chǔ)。全平臺(tái)單點(diǎn)登錄，統(tǒng)一策略管控中心?；?/p>

7、于角色的數(shù)據(jù)管控體系，支持列級(jí)粒度權(quán)限控制。完善的訪問(wèn)審計(jì)及預(yù)警模型。性能卓越高性能數(shù)據(jù)接入引擎，內(nèi)部業(yè)務(wù)日接入五萬(wàn)億條數(shù)據(jù)。性能全面超越社區(qū)方案，數(shù)據(jù)處理能力提升30%左右。支持上千維度、千億規(guī)模數(shù)據(jù)的秒級(jí)交互式多維分析。簡(jiǎn)單易用支持一鍵式部署，只需選擇您適合的服務(wù)即可快速完成部署。支持?jǐn)?shù)據(jù)接入、處理、存儲(chǔ)、分析、機(jī)器學(xué)習(xí)的拖拽式全鏈路大數(shù)據(jù)開(kāi)發(fā)，開(kāi)箱即用的數(shù)據(jù)治理工具集，數(shù)據(jù)開(kāi)發(fā)者只需專(zhuān)注于業(yè)務(wù)開(kāi)發(fā)。場(chǎng)景豐富在金融、政務(wù)、公安、零售、傳統(tǒng)企業(yè)等領(lǐng)域積累了豐富的業(yè)務(wù)應(yīng)用案例，特別是在 PB 級(jí)離線、近線、實(shí)時(shí)數(shù)倉(cāng)企業(yè)級(jí)用戶(hù)畫(huà)像，金融實(shí)時(shí)風(fēng)控，精準(zhǔn)推薦，物聯(lián)網(wǎng)大數(shù)據(jù)等場(chǎng)景我們都有成熟的解決方案

8、。生態(tài)完善深度與各行業(yè)優(yōu)秀的大數(shù)據(jù)開(kāi)發(fā)、數(shù)據(jù)治理服務(wù)及應(yīng)用商合作，為政務(wù)、金融、公安等行業(yè)客戶(hù)提供基礎(chǔ)軟件平臺(tái)+ 應(yīng)用 + 服務(wù)在內(nèi)的專(zhuān)業(yè)一體化大數(shù)據(jù)解決方案。應(yīng)用場(chǎng)景19-04-09 10:13:18騰訊大數(shù)據(jù)處理套件 TBDS 適用于企業(yè)從 GB 到 TB、PB 級(jí)的大數(shù)據(jù)處理場(chǎng)景，包括但不限于以下場(chǎng)景：數(shù)據(jù)倉(cāng)庫(kù)建設(shè)大數(shù)據(jù)處理套件完整覆蓋數(shù)據(jù)抽取、轉(zhuǎn)換、加載、建模、分析、報(bào)表呈現(xiàn)、數(shù)據(jù)治理等數(shù)倉(cāng)建設(shè)環(huán)節(jié)，用戶(hù)可借助 TBDS 大數(shù)據(jù)套件在公有云、私有云、非云化環(huán)境快速建設(shè) TB 到 PB 級(jí)的企業(yè)數(shù)據(jù)倉(cāng)庫(kù)和數(shù)據(jù)集市，搭建專(zhuān)屬的大數(shù)據(jù)應(yīng)用。通過(guò)大數(shù)據(jù)處理套件，用戶(hù)可顯著降低基于企業(yè)數(shù)據(jù)倉(cāng)庫(kù)的

9、數(shù)據(jù)應(yīng)用開(kāi)發(fā)周期，降低開(kāi)發(fā)成本，還可大大降低數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)處理、數(shù)據(jù)應(yīng)用的運(yùn)維成本。實(shí)時(shí)流式數(shù)據(jù)處理用戶(hù)可基于騰訊大數(shù)據(jù)套件快速開(kāi)發(fā)本行業(yè)在實(shí)時(shí)流式場(chǎng)景下的大數(shù)據(jù)處理、分析的應(yīng)用程序，以實(shí)現(xiàn)對(duì)企業(yè)實(shí)時(shí)業(yè)務(wù)的風(fēng)險(xiǎn)監(jiān)控與告警，以占據(jù)大數(shù)據(jù)時(shí)代的優(yōu)勢(shì)地位。流式數(shù)據(jù)處理可用于金融行業(yè)的風(fēng)險(xiǎn)管控、物聯(lián)網(wǎng)的海量傳感器數(shù)據(jù)處理、工業(yè)生產(chǎn)線的實(shí)時(shí)故障預(yù)警、病人特征數(shù)據(jù)實(shí)時(shí)分析、實(shí)時(shí)交通流量分析、互聯(lián)網(wǎng)實(shí)時(shí)流量分析等應(yīng)用場(chǎng)景。離線數(shù)據(jù)處理騰訊大數(shù)據(jù)套件基于 Hadoop 體系的 MapReduce、Hive、Pig、Spark 技術(shù)向企業(yè)用戶(hù)提供的強(qiáng)大的數(shù)據(jù)離線批處理能力，用戶(hù)可以便捷的使用騰訊大數(shù)據(jù)套件對(duì)企業(yè)數(shù)據(jù)進(jìn)行抽取、轉(zhuǎn)換、加載等離線數(shù)據(jù)處理加工。通過(guò)離線數(shù)據(jù)處理引擎，用戶(hù)可迅速的對(duì)企業(yè)所積累的數(shù)據(jù)進(jìn)行 ETL 處理，快速發(fā)掘海量歷史數(shù)據(jù)的商業(yè)價(jià)值和社會(huì)價(jià)值。數(shù)據(jù)分析與探索挖掘通過(guò)