2023云棲大會(huì)：PolarDB-PG特性解析及最佳實(shí)踐

云原生時(shí)代的新PG：阿里云PolarDBPostgreSQL產(chǎn)品部負(fù)責(zé)人主備架構(gòu)的特點(diǎn)主備架構(gòu)的特點(diǎn)主備架構(gòu)的不足APSARA云棲大會(huì)傳統(tǒng)主備數(shù)據(jù)庫(kù)架構(gòu)的不足傳統(tǒng)主備數(shù)據(jù)庫(kù)架構(gòu)的不足主庫(kù)備庫(kù)云原生云原生?高擴(kuò)展性：分鐘級(jí)加減節(jié)點(diǎn)，可擴(kuò)展到16個(gè)計(jì)算節(jié)企業(yè)級(jí)?低成本：資源池化利用率高；增加計(jì)算節(jié)點(diǎn)存儲(chǔ)成本不變?高安全：支持SSL、TDE、SQL審計(jì)等安全需求APSARA云棲大會(huì)智能代理Application數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)數(shù)據(jù)存儲(chǔ)節(jié)點(diǎn)計(jì)算節(jié)點(diǎn)cacaacBufferpoolOutdateBackgrounWALBufferpoolCopyWALMetaInactiveMemTableWALActiveMemTableWriteWALStreamingWAL按LSNWALFilesLogIndexSynchronousAsynchronous數(shù)據(jù)同步BufferpoolOutdateBackgrounWALBufferpoolCopyWALMetaInactiveMemTableWALActiveMemTableWriteWALStreamingWAL按LSNWALFilesLogIndexSynchronousAsynchronous數(shù)據(jù)同步節(jié)點(diǎn)增加過程APSARA云棲大會(huì)應(yīng)用連接智能代理更新/查詢類SQL應(yīng)用連接智能代理更新/查詢類SQL查詢類SQLAPSARA云棲大會(huì)查詢路由原理查詢路由原理?一個(gè)應(yīng)用連接對(duì)應(yīng)后端N個(gè)連接（N為節(jié)點(diǎn)數(shù)）基于共享存儲(chǔ)的基于共享存儲(chǔ)的MPP?跨機(jī)并行，性能優(yōu)異，掃描性能可達(dá)150GB/s以上APSARA云棲大會(huì)讀寫節(jié)點(diǎn)只讀節(jié)點(diǎn)只讀節(jié)點(diǎn)只讀節(jié)點(diǎn)只讀節(jié)點(diǎn)存儲(chǔ)層存儲(chǔ)節(jié)點(diǎn)存儲(chǔ)節(jié)點(diǎn)存儲(chǔ)節(jié)點(diǎn)存儲(chǔ)節(jié)點(diǎn)25%*totalMem25%*totalMem25%*totalMem50%*25%*totalMem25%*totalMem25%*totalMem50%*totalMem效果APSARA云棲大會(huì)APSARA云棲大會(huì)效果TPSTPSTPSTPSAPSARA云棲大會(huì)046,4580開源PG309,413APSARA云棲大會(huì)老大難問題隱式類型轉(zhuǎn)換兼容Oracle的類型隱式轉(zhuǎn)換規(guī)則矩陣，且支持高精度到低精度的轉(zhuǎn)換關(guān)鍵字別名大小寫在存儲(chǔ)默認(rèn)小寫的情況下，支持表、列等對(duì)象的大小寫不敏感識(shí)別數(shù)據(jù)類型及編碼日期類型全兼容GBK/GB18030編碼支持GBK/GB18030服務(wù)器編碼格式自研connectby支持完整兼容Oracle層次查詢功能支持包括countorderby、distSQL命令context功能支持createcontext、sys_context、dbms_session功能subquery修改視圖的基礎(chǔ)表類型觸發(fā)器支持登錄登出觸發(fā)器，提供了可以在用戶登錄/登出時(shí)觸發(fā)指定函數(shù)或存儲(chǔ)過程的功能。內(nèi)置對(duì)象dbms_metadata通過DBMS_METADATA提供的方法獲取數(shù)據(jù)庫(kù)對(duì)象的元數(shù)據(jù)信息，用于重建數(shù)據(jù)庫(kù)中的對(duì)象內(nèi)置函數(shù)wm_concat、bitand、to_dsinterval、to_yminterval等內(nèi)置視圖all_*/dba_*/user_*等視圖完善APSARA云棲大會(huì)Geometry&GeographyTrajectorySfMesh支持BIM數(shù)據(jù)的存儲(chǔ)與計(jì)算VoMeshSceneGeomGrid/H3Grid支持激光點(diǎn)云數(shù)據(jù)的存儲(chǔ)與計(jì)算支持拓?fù)鋱D數(shù)據(jù)的存儲(chǔ)與計(jì)算SuperViz支持全空間數(shù)據(jù)類型的快速可視化應(yīng)用連接智能代理后端連接應(yīng)用連接智能代理后端連接APSARA云棲大會(huì)內(nèi)置連接池原理內(nèi)置連接池原理?應(yīng)用連接發(fā)起時(shí)，如果連接池沒有空閑連某游戲行業(yè)客戶使用PolarProxy連接池的效果計(jì)算節(jié)點(diǎn)共享內(nèi)存計(jì)算節(jié)點(diǎn)共享內(nèi)存PG后臺(tái)進(jìn)程進(jìn)程私有內(nèi)存APSARA云棲大會(huì)PGPG內(nèi)存管理機(jī)制的不足進(jìn)程私有內(nèi)存中容易觸發(fā)內(nèi)存不足和數(shù)據(jù)庫(kù)宕機(jī)內(nèi)存全局化存APSARA云棲大會(huì)GlobalCatalogGlobalCatalogCacheGlobalRelationCacheGlobal共享內(nèi)存PG后臺(tái)進(jìn)程進(jìn)程私有內(nèi)存進(jìn)程私有內(nèi)存內(nèi)存全局化內(nèi)存全局化級(jí)小版本打開整參數(shù)設(shè)置每種全局Cache的大小某客戶使用全局內(nèi)存后的效果分區(qū)表T分區(qū)1：date=1月分區(qū)2：date分區(qū)表T分區(qū)1：date=1月分區(qū)2：date=2月分區(qū)3：date=3月分區(qū)5：date=5月全局索引Whereorder_id=‘12345678’全局索引分區(qū)表優(yōu)化APSARA云棲大會(huì)一體化一體化HTAP原理節(jié)點(diǎn)（ADB集群）實(shí)現(xiàn)實(shí)時(shí)數(shù)據(jù)分析?根據(jù)規(guī)則或代價(jià)估算，自動(dòng)動(dòng)態(tài)路由查詢到TP或AP加速效果APSARA云棲大會(huì)ADBClusterSegmentSegmentSegmentAPSARA云棲大會(huì)冷熱分層架構(gòu)SharedStorage表級(jí)自動(dòng)冷熱數(shù)據(jù)分層原理表級(jí)自動(dòng)冷熱數(shù)據(jù)分層原理?將OSS作為全量數(shù)據(jù)存儲(chǔ)介質(zhì)，云盤/PolarStore作技術(shù)指標(biāo)?寫入性能下降10%以內(nèi)，重復(fù)點(diǎn)查性能下降15%以APSARA云棲大會(huì)極致性價(jià)比的標(biāo)準(zhǔn)版與經(jīng)濟(jì)版極致性價(jià)比的標(biāo)準(zhǔn)版與經(jīng)濟(jì)版云盤 Application存儲(chǔ)集群計(jì)算節(jié)點(diǎn)標(biāo)準(zhǔn)版與經(jīng)濟(jì)版標(biāo)準(zhǔn)版與經(jīng)濟(jì)版與企業(yè)版區(qū)別推出標(biāo)準(zhǔn)版推出標(biāo)準(zhǔn)版經(jīng)濟(jì)版Serverless版APSARA云棲大會(huì)企業(yè)版企業(yè)版分析節(jié)點(diǎn)加速節(jié)點(diǎn)內(nèi)并行分析節(jié)點(diǎn)加速節(jié)點(diǎn)內(nèi)并行APSARA云棲大會(huì)數(shù)據(jù)分析加速方案數(shù)據(jù)分析加速方案節(jié)點(diǎn)間并行節(jié)點(diǎn)間并行數(shù)據(jù)分析APSARA云棲大會(huì)性能與SQL洞察GAWRAPSARA云棲大會(huì)使用使用pgvector插件支持AIGC產(chǎn)品功能全面開源產(chǎn)品功能全面開源APSARA云棲大會(huì)新增代碼行數(shù)新增功能項(xiàng)專職開發(fā)者技術(shù)沉淀歷程開源共享存儲(chǔ)架構(gòu)開源LogIndex/DirectIO2021.52021.102022.62023.10APSARA云棲大會(huì)歡迎關(guān)注PolarDB-PG?PolarDB免費(fèi)試用：/?