大數(shù)據(jù)和人工智能22深度學(xué)習(xí)50min

產(chǎn)品概述及優(yōu)勢產(chǎn)品功能與定價(jià)深度學(xué)習(xí)平臺(tái)使用深度學(xué)習(xí)算法應(yīng)用

案例演示產(chǎn)品概述百度一下資源云端托管，按分鐘計(jì)費(fèi)按需使用，用完即可釋放使用靈活僅需選擇框架類型和計(jì)算資源規(guī)模，即可開始深度學(xué)習(xí)模型訓(xùn)練。入門簡單擁抱PaddlePaddle/TensorFlow開源社區(qū)，教程詳細(xì)、資源豐富、應(yīng)用廣泛。開源開放在計(jì)算、存儲(chǔ)、通信、架構(gòu)等方面都做了高效優(yōu)化，充分發(fā)揮各種資源的性能支持GPU計(jì)算正在為100+項(xiàng)產(chǎn)品提供深度學(xué)習(xí)算法支持技術(shù)特點(diǎn)產(chǎn)品優(yōu)勢僅需選擇框架類型和計(jì)算資源規(guī)模，即可開始深度學(xué)習(xí)模型訓(xùn)練。入門簡單擁抱PaddlePaddle/TensorFlow開源社區(qū)，教程詳細(xì)、資源豐富、應(yīng)用廣泛。開源開放資源云端托管，按分鐘計(jì)費(fèi)，按需使用，用完即可釋放。使用靈活支持GPU計(jì)算可以選擇使用GPU進(jìn)行模型訓(xùn)練，提高模型訓(xùn)練的效率。產(chǎn)品功能與定價(jià)百度一下產(chǎn)品功能簡介百度深度學(xué)習(xí)根據(jù)您選擇的實(shí)例機(jī)型配置和個(gè)數(shù)，按使用時(shí)長（分鐘級）實(shí)時(shí)計(jì)費(fèi)。具體計(jì)費(fèi)規(guī)則如下：集群創(chuàng)建成功后開始計(jì)費(fèi)。按分鐘計(jì)費(fèi)，不足1分鐘按1分鐘計(jì)。按小時(shí)扣費(fèi)，即北京時(shí)間整點(diǎn)扣費(fèi)并生成賬單。出賬單時(shí)間是當(dāng)前計(jì)費(fèi)周期結(jié)束后1小時(shí)內(nèi)。例如，10:00-11:00的賬單會(huì)在12:00之前生成，具體以系統(tǒng)出賬時(shí)間為準(zhǔn)。購買前需保證賬戶無欠款，且保證賬戶余額和可用代金券的總和大于或等于20元。計(jì)費(fèi)公式費(fèi)用=單價(jià)×節(jié)點(diǎn)個(gè)數(shù)×使用時(shí)長產(chǎn)品定價(jià)價(jià)格產(chǎn)品定價(jià)節(jié)點(diǎn)配置CPU（核）GPU（型號(hào)*數(shù)量）內(nèi)存（GB）硬盤單價(jià)計(jì)算最優(yōu)型8-32600GB0.053GPU計(jì)算K1型6NvidiaK40*140200GB0.086（體驗(yàn)價(jià)）GPU計(jì)算K2型12NvidiaK40*280400GB0.172（體驗(yàn)價(jià)）GPU計(jì)算K4型24NvidiaK40*4160800GB0.344（體驗(yàn)價(jià)）余額不足提醒和欠費(fèi)處理余額不足提醒：根據(jù)您最近3天的賬單金額來判斷您的賬戶余額（含可用代金券）是否足夠支付未來3天的費(fèi)用，若不足以支付，系統(tǒng)發(fā)送續(xù)費(fèi)提醒。根據(jù)您最近1天的賬單金額來判斷您的賬戶余額（含可用代金券）是否足以支付未來1天的費(fèi)用，若不足以支付，系統(tǒng)發(fā)送續(xù)費(fèi)提醒。欠費(fèi)處理：北京時(shí)間整點(diǎn)檢查您的賬戶余額是否足以支付本次百度深度學(xué)習(xí)賬單的費(fèi)用（如北京時(shí)間11點(diǎn)整檢查賬戶余額是否足以支付10點(diǎn)至11點(diǎn)的賬單費(fèi)用），若不足以支付，即為欠費(fèi)，欠費(fèi)時(shí)系統(tǒng)會(huì)發(fā)送欠費(fèi)通知。欠費(fèi)后立即停服，資源將于7天后釋放，系統(tǒng)會(huì)發(fā)送欠費(fèi)停服通知。為了不影響您的服務(wù)，建議您在使用百度深度學(xué)習(xí)時(shí)要保證賬戶中的金額足夠支付。產(chǎn)品定價(jià)深度學(xué)習(xí)平臺(tái)使用百度一下深度學(xué)習(xí)平臺(tái)使用百度深度學(xué)習(xí)是一款面向海量數(shù)據(jù)的深度學(xué)習(xí)平臺(tái)。平臺(tái)基于PaddlePaddle/TensorFlow開源計(jì)算框架?？衫冒俣仍频拇鎯?chǔ)和虛擬化產(chǎn)品直接將模型部署至應(yīng)用環(huán)境。實(shí)現(xiàn)輕松訓(xùn)練神經(jīng)網(wǎng)絡(luò)，實(shí)現(xiàn)情感分析、機(jī)器翻譯、圖像識(shí)別。支持GPU運(yùn)算，依托百度云分布式技術(shù)，為深度學(xué)習(xí)技術(shù)的研發(fā)和應(yīng)用提供可靠性高、擴(kuò)展靈活的云端托管服務(wù)。深度學(xué)習(xí)平臺(tái)使用平臺(tái)基于PaddlePaddle/TensorFlow開源計(jì)算框架。深度學(xué)習(xí)平臺(tái)使用TensorFlow是什么？TensorFlow

是一個(gè)采用數(shù)據(jù)流圖（DataFlowGraphs），用于數(shù)值計(jì)算的開源框架。是Google的“第二代”深度學(xué)習(xí)框架。架構(gòu)靈活，支持多平臺(tái)（

Linux，Windows，macOS，iOS，Android）、多架構(gòu)（x86,ARM,GPU）和分布式部署。相似的框架還有Caffe，Theano，Torch，PyTorch，Keras，MXNet，CNTK等。張量從圖中流過的直觀圖像是這個(gè)工具取名為“TensorFlow”的原因。節(jié)點(diǎn)：一般用來表示施加的數(shù)學(xué)操作，但也可以表示數(shù)據(jù)輸入（feedin）的起點(diǎn)/輸出（pushout）的終點(diǎn)，或者是讀取/寫入持久變量（persistentvariable）的終點(diǎn)?！熬€”表示“節(jié)點(diǎn)”之間的輸入/輸出關(guān)系。這些數(shù)據(jù)“線”可以輸運(yùn)“size可動(dòng)態(tài)調(diào)整”的多維數(shù)據(jù)數(shù)組，即“張量”（tensor）。一旦輸入端的所有張量準(zhǔn)備好，節(jié)點(diǎn)將被分配到各種計(jì)算設(shè)備完成異步并行地執(zhí)行運(yùn)算。數(shù)據(jù)流圖：用“結(jié)點(diǎn)”（nodes）和“線”(edges)的有向圖來描述數(shù)學(xué)計(jì)算。深度學(xué)習(xí)平臺(tái)使用PaddlePaddle是什么？PaddlePaddle，百度旗下深度學(xué)習(xí)開源平臺(tái)。PaddlePaddle的前身是百度于2013年自主研發(fā)的深度學(xué)習(xí)平臺(tái)Paddle(ParallelDistributedDeepLearning，并行分布式深度學(xué)習(xí))。全球各大科技巨頭開源的深度學(xué)習(xí)平臺(tái)都極具各自技術(shù)特點(diǎn)，對于百度，由于其自身在搜索、圖像識(shí)別、語音語義識(shí)別理解、情感分析、機(jī)器翻譯、用戶畫像推薦等多領(lǐng)域的業(yè)務(wù)和技術(shù)方向，PaddlePaddle則表現(xiàn)更加全面，是一個(gè)相對全功能的深度學(xué)習(xí)框架。平臺(tái)使用概述集群準(zhǔn)備數(shù)據(jù)上傳與下載STEP2STEP1集群準(zhǔn)備創(chuàng)建集群SSH鏈接集群1注冊并登錄百度云平臺(tái)。在百度云首頁點(diǎn)擊“注冊”，進(jìn)入百度賬號(hào)注冊界面。填寫相關(guān)信息，并點(diǎn)擊“注冊”，發(fā)送激活鏈接。點(diǎn)擊<立即進(jìn)入郵箱>，查看注冊郵件激活信息。點(diǎn)擊鏈接，完成賬號(hào)注冊。進(jìn)入百度云首頁，彈出如下網(wǎng)頁。點(diǎn)擊“登錄”，進(jìn)入登錄頁面，使用百度賬號(hào)或推廣賬號(hào)登錄百度云。集群準(zhǔn)備創(chuàng)建集群SSH鏈接集群1登錄成功后，選擇“產(chǎn)品服務(wù)>百度深度學(xué)習(xí)”，點(diǎn)擊“創(chuàng)建集群”，進(jìn)入集群創(chuàng)建頁；集群使用計(jì)費(fèi)方式，參見產(chǎn)品定價(jià)。集群準(zhǔn)備創(chuàng)建集群SSH鏈接集群1在“集群基礎(chǔ)設(shè)置”區(qū)設(shè)置集群名稱和管理員密碼。集群準(zhǔn)備創(chuàng)建集群SSH鏈接集群1在“集群鏡像”區(qū)選擇鏡像類型。用戶可以選擇paddle鏡像體驗(yàn)PaddlePaddle深度學(xué)習(xí)框架，PaddlePaddle框架的相關(guān)教程可以從PaddlePaddle深度學(xué)習(xí)入門獲取。對于正在學(xué)習(xí)或使用TensorFlow的用戶，也可以選擇tensorflow鏡像，直接在百度深度學(xué)習(xí)平臺(tái)預(yù)裝的TensorFlow環(huán)境中實(shí)踐，TensorFlow的的相關(guān)教程，可以從TensorFlow官網(wǎng)獲取。集群準(zhǔn)備創(chuàng)建集群SSH鏈接集群1在“節(jié)點(diǎn)配置”區(qū)，選擇節(jié)點(diǎn)配置類型，也可更改節(jié)點(diǎn)數(shù)量。集群準(zhǔn)備創(chuàng)建集群SSH鏈接集群1點(diǎn)擊“下一步”，在集群列表頁可查看已創(chuàng)建的集群正在“初始化中”，若節(jié)點(diǎn)數(shù)量是3，則1分鐘后集群狀態(tài)變成“運(yùn)行中”，即集群創(chuàng)建成功。集群準(zhǔn)備創(chuàng)建集群SSH鏈接集群登錄控制臺(tái)，至“產(chǎn)品服務(wù)>百度深度學(xué)習(xí)>集群詳情”頁獲取登錄信息：登錄方式、Master節(jié)點(diǎn)的公網(wǎng)IP（也可至“站內(nèi)信”中獲取Master節(jié)點(diǎn)的公網(wǎng)IP和SSH端口號(hào)）。登錄Master節(jié)點(diǎn)的用戶名和密碼是創(chuàng)建集群時(shí)設(shè)置的用戶名和密碼。2在集群創(chuàng)建成功后，在集群運(yùn)行期間，可通過SSH連接Master節(jié)點(diǎn)，具體操作如下：Linux環(huán)境下：通過sshusername@eip-p[端口號(hào)]命令連接Master節(jié)點(diǎn)。其中，eip為Master節(jié)點(diǎn)的公網(wǎng)IP地址，username是root，密碼是創(chuàng)建集群時(shí)設(shè)置的管理員密碼。Windows環(huán)境下：通過SSH客戶端（Putty、SecureCRT及Xshell等）登錄，使用SSH協(xié)議進(jìn)行登錄。集群準(zhǔn)備創(chuàng)建集群SSH鏈接集群2在集群創(chuàng)建成功后，在集群運(yùn)行期間，可通過SSH連接Master節(jié)點(diǎn)，具體操作如下：以Windows環(huán)境下Putty為例：集群準(zhǔn)備創(chuàng)建集群SSH鏈接集群2Linux環(huán)境下：通過sshusername@eip-p[端口號(hào)]命令連接Master節(jié)點(diǎn)。其中，eip為Master節(jié)點(diǎn)的公網(wǎng)IP地址，username是root，密碼是創(chuàng)建集群時(shí)設(shè)置的管理員密碼。Windows環(huán)境下：通過SSH客戶端（Putty、SecureCRT及Xshell等）登錄，使用SSH協(xié)議進(jìn)行登錄。以Putty為例：登錄控制臺(tái)集群準(zhǔn)備創(chuàng)建集群SSH鏈接集群2驗(yàn)證通過后，成功登錄主節(jié)點(diǎn)，您可對集群進(jìn)行相關(guān)操作。數(shù)據(jù)上傳與保存數(shù)據(jù)上傳數(shù)據(jù)保存BOS設(shè)置BOS的使用方法BOS的其他功能及計(jì)費(fèi)1百度深度學(xué)習(xí)平臺(tái)支持直接wget和通過對象存儲(chǔ)BOS(BaiduObjectStorage)兩種方式上傳數(shù)據(jù)。數(shù)據(jù)上傳與保存數(shù)據(jù)上傳數(shù)據(jù)保存BOS設(shè)置BOS的使用方法BOS的其他功能及計(jì)費(fèi)2百度深度學(xué)習(xí)平臺(tái)通過BOS實(shí)現(xiàn)數(shù)據(jù)的保存。數(shù)據(jù)上傳與保存數(shù)據(jù)上傳數(shù)據(jù)保存BOS設(shè)置BOS的使用方法BOS的其他功能及計(jì)費(fèi)3訪問BOS產(chǎn)品頁，點(diǎn)擊立即購買登錄控制臺(tái)；在Bucket管理頁面點(diǎn)擊新建bucket，命名后選擇所屬地域（建議選擇與百度深度學(xué)習(xí)集群相同的地域，目前百度深度學(xué)習(xí)實(shí)例的所屬地域均在北京），并設(shè)置讀寫權(quán)限為私有；創(chuàng)建完成后，在Bucket管理頁面點(diǎn)擊創(chuàng)建完成的Bucket名字進(jìn)入Bucket，即可在web上查看和上傳相關(guān)數(shù)據(jù)文件；文件上傳完成后，點(diǎn)文件名即可獲取文件地址，在百度深度學(xué)習(xí)平臺(tái)上直接通過wget方式獲取。BOSCLI是BOS調(diào)用的命令行工具，以下介紹如何在百度深度學(xué)習(xí)平臺(tái)上使用BOSCLI工具。數(shù)據(jù)上傳與保存數(shù)據(jù)上傳數(shù)據(jù)保存BOS設(shè)置BOS的使用方法BOS的其他功能及計(jì)費(fèi)4從BOSCLI工具文檔頁獲取linux下BOSCLI工具的壓縮包。解壓CLI工具包:將bcecli的庫安裝到系統(tǒng)的python目錄下:$unzipbce-cli-0.8.3.zip$pythonsetup.pyinstall數(shù)據(jù)上傳與保存數(shù)據(jù)上傳數(shù)據(jù)保存BOS設(shè)置BOS的使用方法BOS的其他功能及計(jì)費(fèi)4使用BOSCLI工具之前，推薦先設(shè)置AccessKey、SecureKey、Regiont；可以通過

-c/–configure來設(shè)置AK、SK、Region，CLI會(huì)在配置后自動(dòng)寫入當(dāng)前用戶主目錄；$bce-c$BOSAccessKeyID[None]:EnterYourAK$BOSSecretAccessKey[None]:EnterYourSK$Defaultregionname[bj]:EnterYourregion$Defaultdomain[]:EnterYourhostRegion則應(yīng)與BOS設(shè)置中，所屬地域的選擇一致，選擇北京填bj，選擇廣州則填gz，后續(xù)選項(xiàng)均可以直接回車填默認(rèn)值。BOSCLI是BOS調(diào)用的命令行工具，以下介紹如何在百度深度學(xué)習(xí)平臺(tái)上使用BOSCLI工具。以本地text.txt上傳至mybucket為例，上傳百度深度學(xué)習(xí)平臺(tái)上的文件命令如下：數(shù)據(jù)上傳與保存數(shù)據(jù)上傳數(shù)據(jù)保存BOS設(shè)置BOS的使用方法BOS的其他功能及計(jì)費(fèi)4$bceboscptext.txtbos:/mybucket/text.txtBOSCLI是BOS調(diào)用的命令行工具，以下介紹如何在百度深度學(xué)習(xí)平臺(tái)上使用BOSCLI工具。數(shù)據(jù)上傳與保存數(shù)據(jù)上傳數(shù)據(jù)保存BOS設(shè)置BOS的使用方法BOS的其他功能及計(jì)費(fèi)5參見BOS文檔深度學(xué)習(xí)算法應(yīng)用百度一下深度學(xué)習(xí)算法應(yīng)用MNIST：MNIST數(shù)據(jù)集作為一個(gè)簡單的計(jì)算機(jī)視覺數(shù)據(jù)集，包含一系列如圖1所示的手寫數(shù)字圖片和對應(yīng)的標(biāo)簽。圖片是28x28的像素矩陣，標(biāo)簽則對應(yīng)著0~9的10個(gè)數(shù)字。每張圖片都經(jīng)過了大小歸一化和居中處理。以MNIST手寫識(shí)別問題為例。深度學(xué)習(xí)算法應(yīng)用以MNIST手寫識(shí)別問題為例。演示代碼來自Github，點(diǎn)擊查看深度學(xué)習(xí)算法應(yīng)用創(chuàng)建服務(wù)器集群（配置信息）SSH連接集群此處使用Windows環(huán)境下SSH客