DBJT45T 025-2021 綜合交通運(yùn)輸政務(wù)數(shù)據(jù)資源共享交換技術(shù)指南

DBJT45I 2 3 6 8 8 9 本文件按照GB/T1.1—2020《標(biāo)準(zhǔn)化工作導(dǎo)則第1部分：標(biāo)準(zhǔn)化文件的結(jié)構(gòu)和起草規(guī)則》的規(guī)定本文件起草單位：廣西交通設(shè)計(jì)集團(tuán)有限公司、廣西壯族自治區(qū)交通運(yùn)輸信息管理李世鋒、覃超生、劉海南、陳少鋒、黃中章、周開制、蘭建華、吳宇昊、鄧定豐、韋詩(shī)瑩、黃夢(mèng)凡、1綜合交通運(yùn)輸政務(wù)信息資源共享交換技術(shù)指南適用于廣西交通運(yùn)輸部門信息資源管理人員、第三方政務(wù)信息系統(tǒng)與信息資源管理服務(wù)GB/T21062.2政務(wù)信息資源交換體系第2部分：GB/T38664.2信息技術(shù)大數(shù)據(jù)政務(wù)數(shù)據(jù)開放共享第2部分NTIP/T0301國(guó)家綜合交通運(yùn)輸信息平臺(tái)交通運(yùn)輸數(shù)據(jù)資源交換共享平臺(tái)資源提供規(guī)范（試NTIP/T0302國(guó)家綜合交通運(yùn)輸信息平臺(tái)交通運(yùn)輸數(shù)據(jù)資源交換共享平臺(tái)交換通道規(guī)范（試NTIP/T0303國(guó)家綜合交通運(yùn)輸信息平臺(tái)交通運(yùn)輸數(shù)據(jù)資源交換共享平臺(tái)服務(wù)使用規(guī)范（試2用以描述各個(gè)信息資源的特征，以便于對(duì)信息資源的檢索、定數(shù)據(jù)采集、傳授、存儲(chǔ)、處理、共享和銷毀等各種存在形態(tài)演4.1以打造廣西交通運(yùn)輸行業(yè)政務(wù)數(shù)據(jù)共享交換3按照交通運(yùn)輸政務(wù)信息資源涉及的行業(yè)領(lǐng)域及其運(yùn)輸方式進(jìn)行劃分的行業(yè)分類類目表見交科技發(fā)按照交通運(yùn)輸行業(yè)管理涉及的業(yè)務(wù)對(duì)信息資源進(jìn)行劃分的業(yè)務(wù)分類類目表見交科技發(fā)〔2017〕123按照交通運(yùn)輸行業(yè)管理業(yè)務(wù)行為的主題進(jìn)行劃分的主題分類類目表見交科技發(fā)〔2017〕123號(hào)中按照管理對(duì)象進(jìn)行劃分的管理對(duì)象分類類目表按照信息資源的類別進(jìn)行劃分的數(shù)據(jù)形態(tài)劃分表見交5.2信息資源架構(gòu)4影響約束反饋改變制度組織5.2.2數(shù)據(jù)管理框架周期的數(shù)據(jù)治理和數(shù)據(jù)安全。其中，本文件不對(duì)數(shù)據(jù)應(yīng)用、數(shù)據(jù)治理做規(guī)范化要求。如圖2所示。數(shù)據(jù)應(yīng)用數(shù)據(jù)應(yīng)用共享交換共享交換準(zhǔn)備數(shù)據(jù)資源輔助決策應(yīng)用數(shù)據(jù)治理公眾出行服務(wù)數(shù)據(jù)標(biāo)準(zhǔn)管理數(shù)據(jù)交換管理元數(shù)據(jù)管理批量下載數(shù)據(jù)質(zhì)量管理主題庫(kù)主數(shù)據(jù)管理數(shù)據(jù)處理數(shù)據(jù)安全管理非結(jié)構(gòu)化數(shù)據(jù)安全應(yīng)急應(yīng)用數(shù)據(jù)開放管養(yǎng)維護(hù)應(yīng)用規(guī)劃建設(shè)應(yīng)用基礎(chǔ)庫(kù)業(yè)務(wù)庫(kù)感知庫(kù)數(shù)據(jù)采集數(shù)據(jù)存儲(chǔ)結(jié)構(gòu)化數(shù)據(jù)半結(jié)構(gòu)化數(shù)據(jù)信息資源目錄管理數(shù)據(jù)共享管理數(shù)據(jù)交換通道資源目錄數(shù)據(jù)安全集成監(jiān)控圖2交通運(yùn)輸政務(wù)信息資源管理架構(gòu)5a)結(jié)構(gòu)化數(shù)據(jù)源。應(yīng)具備不同的數(shù)據(jù)庫(kù)連接技術(shù)，包括ODBC、JDBC、JNDI、DAO、OLEDB、c)非結(jié)構(gòu)化數(shù)據(jù)源。應(yīng)支持FTP、SFTP、SCP等文件傳輸協(xié)議，以實(shí)現(xiàn)非結(jié)構(gòu)化數(shù)據(jù)源的連接。a)結(jié)構(gòu)化數(shù)據(jù)采集。應(yīng)適配常見的關(guān)系數(shù)b)半結(jié)構(gòu)化數(shù)據(jù)采集。應(yīng)支持Rest、SOAPc)非結(jié)構(gòu)化數(shù)據(jù)采集。應(yīng)支持FTP、SFTP、SC對(duì)于不同類型的實(shí)時(shí)數(shù)據(jù)，應(yīng)采用不同的采集方式，具體b)對(duì)于實(shí)時(shí)流數(shù)據(jù)（如GPS定位軌跡數(shù)據(jù)流），應(yīng)采用消息隊(duì)列采集，滿足寫和讀權(quán)管理要求，同時(shí)滿足“一份緩存，多方消費(fèi)”的要求。消息隊(duì)列宜采用集群和負(fù)載均衡方式對(duì)于不同類型的數(shù)據(jù)，可采用不同的變化數(shù)據(jù)捕捉方式，具體2)數(shù)據(jù)庫(kù)觸發(fā)器方式。可在源數(shù)據(jù)庫(kù)設(shè)置數(shù)據(jù)變化（增刪改）觸發(fā)器，當(dāng)變化發(fā)生時(shí)，主3)變化標(biāo)識(shí)字段方式。在數(shù)據(jù)表中設(shè)置可識(shí)別數(shù)據(jù)增量的字段，通過(guò)該字段取值變化捕捉4)全量對(duì)比方式。將數(shù)據(jù)從源數(shù)據(jù)庫(kù)全量加載，再與上一采集周期的數(shù)據(jù)進(jìn)行全量對(duì)比，b)接口數(shù)據(jù)。若接口具備主動(dòng)推送變化數(shù)據(jù)功能，則使用其功能；若接口不具備主動(dòng)推送變化c)文件數(shù)據(jù)?？赏ㄟ^(guò)掃描存儲(chǔ)系統(tǒng)，以文件名、修改時(shí)間、創(chuàng)建時(shí)間等屬性為標(biāo)識(shí)，以發(fā)現(xiàn)變6a)對(duì)于數(shù)據(jù)庫(kù)數(shù)據(jù)，應(yīng)支持不同數(shù)據(jù)庫(kù)之間的數(shù)據(jù)類型轉(zhuǎn)換；b)對(duì)于接口數(shù)據(jù)，宜支持轉(zhuǎn)換為數(shù)據(jù)庫(kù)類型數(shù)據(jù)，宜支對(duì)于數(shù)據(jù)庫(kù)數(shù)據(jù)，可采用數(shù)值加減乘除、列去重、字段拆分、字段合并、數(shù)值排序、字符串針對(duì)所有類型數(shù)據(jù)，宜適當(dāng)采用壓縮技術(shù)，減少數(shù)據(jù)存儲(chǔ)消耗?？刹捎肦AR、ZIP、GZIP、TAR等多a)對(duì)于使用頻率高、活躍性高、訪問(wèn)時(shí)效要求高的偏熱數(shù)據(jù)，應(yīng)采用關(guān)系數(shù)據(jù)庫(kù)存儲(chǔ)管理，宜b)對(duì)于使用頻率低、活躍性低、訪問(wèn)時(shí)效要求低的偏冷數(shù)據(jù)，可將結(jié)構(gòu)化數(shù)據(jù)輸出為固定格式b)對(duì)于使用頻率低、訪問(wèn)時(shí)效要求低的偏冷數(shù)據(jù)，宜采用離線數(shù)據(jù)的存儲(chǔ)技術(shù)。在信息資源存儲(chǔ)的基礎(chǔ)上，應(yīng)在邏輯上構(gòu)7電子證照感知庫(kù)路網(wǎng)運(yùn)行車輛動(dòng)態(tài)港口運(yùn)行組織機(jī)構(gòu)基礎(chǔ)庫(kù) 從業(yè)人員業(yè)務(wù)庫(kù)主題庫(kù)基礎(chǔ)庫(kù)、業(yè)務(wù)庫(kù)、感知庫(kù)和主題庫(kù)存儲(chǔ)的數(shù)據(jù)內(nèi)容具體如下：a)基礎(chǔ)庫(kù)：存儲(chǔ)交通運(yùn)輸行業(yè)各類對(duì)象的基礎(chǔ)信息數(shù)據(jù)，包括人員、組織、運(yùn)輸裝備、基礎(chǔ)設(shè)b)業(yè)務(wù)庫(kù)：存儲(chǔ)各項(xiàng)交通運(yùn)輸政務(wù)業(yè)務(wù)的辦理過(guò)程、進(jìn)度等事件信息；c)感知庫(kù)：存儲(chǔ)路網(wǎng)運(yùn)行數(shù)據(jù)、航道運(yùn)行數(shù)據(jù)、港口運(yùn)行數(shù)據(jù)、車輛動(dòng)態(tài)數(shù)據(jù)、船舶動(dòng)態(tài)數(shù)據(jù)d)主題庫(kù)：存儲(chǔ)各類主題數(shù)據(jù)，主要引用基礎(chǔ)庫(kù)、業(yè)務(wù)庫(kù)、感知庫(kù)的數(shù)據(jù)加工而成，如違法違6.4.1數(shù)據(jù)源監(jiān)控87共享與交換信息資源目錄管理應(yīng)包括目錄編目、目錄注冊(cè)、目錄發(fā)布、目錄維護(hù)等內(nèi)容。主要業(yè)務(wù)流程如圖4目錄編目a)提取特征信息：提供系統(tǒng)自動(dòng)編目和人工編目?jī)煞N方式。按照不同的維度對(duì)信息資源進(jìn)行編b)賦值：對(duì)數(shù)據(jù)和服務(wù)資源元數(shù)據(jù)中的分類信息進(jìn)行賦值，系統(tǒng)根據(jù)交通運(yùn)輸信息資源目錄體c)唯一標(biāo)識(shí)符賦碼：對(duì)信息資源和服務(wù)組件進(jìn)行唯一標(biāo)識(shí)符賦碼。按照國(guó)家標(biāo)準(zhǔn)，支持唯一標(biāo)9d)用戶權(quán)限驗(yàn)證：目錄權(quán)限管理是為不同用戶級(jí)別進(jìn)行授權(quán)。滿足不同用戶對(duì)目錄瀏覽、檢索目錄注冊(cè)主要是方便地實(shí)現(xiàn)數(shù)據(jù)和服務(wù)資源目錄內(nèi)容提供者向目錄體系注冊(cè)數(shù)據(jù)和服務(wù)資源元數(shù)a)提交：提供者將需要對(duì)外發(fā)布的信息資源和服務(wù)組件資源進(jìn)行相關(guān)元數(shù)據(jù)描述。系統(tǒng)能提供自動(dòng)注冊(cè)工具，提供者根據(jù)核心元數(shù)據(jù)標(biāo)準(zhǔn)要求構(gòu)建新項(xiàng)目數(shù)據(jù)庫(kù)，目錄注冊(cè)管理模塊可直a)發(fā)布。編制好且經(jīng)過(guò)數(shù)據(jù)提供方審核確認(rèn)的目錄，可由目錄管理方選擇發(fā)布，發(fā)布后應(yīng)根據(jù)目錄共享屬性、開放屬性展示到共享門戶、開放門戶等，應(yīng)支持單條目錄發(fā)布和批量發(fā)布兩b)退回。對(duì)于已發(fā)布的目錄，應(yīng)支持退回功能，同時(shí)應(yīng)從共享門戶、開放門戶的展示中撤銷，.1目錄維護(hù)管理系統(tǒng)的主要作用是保證目錄服務(wù)系統(tǒng)的可用性，包括數(shù)據(jù)和服務(wù)資源目錄庫(kù).2系統(tǒng)應(yīng)支持管理者能夠通過(guò)系統(tǒng)保存、備份、注銷與恢復(fù)信息資源目錄內(nèi)容。目錄內(nèi)容的開始圖5綜合交通運(yùn)輸信息資源共享管理業(yè)務(wù)流程7.2.2技術(shù)功能面向數(shù)據(jù)共享管理用戶，為滿足支撐交通運(yùn)輸部門相互之間的數(shù)據(jù)共享管理工作，應(yīng)包括以下功能：a)共享資源發(fā)布。共享管理用戶應(yīng)基于信息資源目錄發(fā)布的信息資源實(shí)現(xiàn)共享。發(fā)布時(shí)應(yīng)與目錄中確定的共享類型、共享方式等保持一致。共享發(fā)布的類型應(yīng)只包括無(wú)條件共享和有條件共享(含特定范圍共享)兩種，有條件共享的宜支持定義共享?xiàng)l件。共享方式應(yīng)包括但不限于：網(wǎng)頁(yè)瀏覽、接口調(diào)用、數(shù)據(jù)下載及通過(guò)交換平臺(tái)傳輸；b)共享申請(qǐng)與審核。信息資源需求用戶通過(guò)自治區(qū)級(jí)平臺(tái)申請(qǐng)獲取資源后，管理用戶通過(guò)平臺(tái)審核，應(yīng)包括通過(guò)與駁回兩類操作，駁回情況下必須具備填寫駁回理由功能，通過(guò)情況下，應(yīng)具備登記交換內(nèi)容、交換頻率、限制條件(如某區(qū)域、某時(shí)段)等信息；c)審核規(guī)則設(shè)定。平臺(tái)宜具備設(shè)置共享審核時(shí)限要求及自動(dòng)審核規(guī)則功能，如超過(guò)一定時(shí)間后自動(dòng)通過(guò)審核、經(jīng)過(guò)多次提醒后自動(dòng)通過(guò)審核、超時(shí)不操作則暫停該用戶所屬單位數(shù)據(jù)獲取d)共享規(guī)則定制。共享管理員根據(jù)申請(qǐng)情況定制共享規(guī)則，在接到數(shù)據(jù)共享申請(qǐng)后，系統(tǒng)根據(jù)規(guī)則可自動(dòng)執(zhí)行審批。如：對(duì)無(wú)條件共享數(shù)據(jù)，則可自動(dòng)審批。對(duì)于特定范圍共享的數(shù)據(jù)，可在依據(jù)申請(qǐng)用戶的權(quán)限進(jìn)行判定，符合條件的自動(dòng)審批，不符合預(yù)定條件的提交管理員審e)使用反饋與反饋處理。數(shù)據(jù)使用方將共享信息資源使用情況反饋至平臺(tái)運(yùn)維方或者數(shù)據(jù)提供f)用戶管理。應(yīng)支持共享管理相關(guān)用戶的維護(hù)，包括增加新用戶、修改用戶信息和權(quán)限、刪除g)共享信息管理。共享管理模塊應(yīng)記錄信息資源的基本信息、共享對(duì)象、共享時(shí)間等信息，同7.3共享服務(wù)數(shù)據(jù)提供方提供滿足數(shù)據(jù)需求方的多種數(shù)據(jù)服務(wù)，具體實(shí)現(xiàn)方式可包括：WebService接口、數(shù)據(jù)庫(kù)接口、專用API、批量下載以及數(shù)據(jù)交換服務(wù)等。廣西綜合交通運(yùn)輸信息資源共享服務(wù)應(yīng)遵循共享服務(wù)業(yè)務(wù)流程如圖6所示。開始結(jié)束圖6綜合交通運(yùn)輸信息資源共享服務(wù)業(yè)務(wù)流程7.3.2技術(shù)功能a)服務(wù)發(fā)布。服務(wù)提供方向平臺(tái)提供資源后，依據(jù)提供的資源進(jìn)行服務(wù)發(fā)布；b)服務(wù)申請(qǐng)。服務(wù)使用方依據(jù)信息資源目錄查詢到服務(wù)提供方已發(fā)布的服務(wù)，根據(jù)業(yè)務(wù)需要填c)服務(wù)審核。服務(wù)提供方需要對(duì)填寫的服務(wù)使用申請(qǐng)進(jìn)行審核，審核通過(guò)后，提交給服務(wù)使用d)服務(wù)授權(quán)。服務(wù)提供方有兩種服務(wù)授權(quán)方式，一種是根據(jù)服務(wù)使用方提交的申請(qǐng)授權(quán)；另一種是主動(dòng)授權(quán)給服務(wù)使用方，服務(wù)授權(quán)支持永久授權(quán)和按照時(shí)間段授權(quán)。當(dāng)服務(wù)提供方發(fā)布服務(wù)后，已明確服務(wù)的使用方，則可直接授權(quán)；當(dāng)服務(wù)使用方對(duì)需要使用的服務(wù)沒(méi)有被主動(dòng)e)服務(wù)使用。服務(wù)提供方授權(quán)成功后，服務(wù)使用方即可根據(jù)使用方案使用服g)反饋復(fù)核。服務(wù)提供方對(duì)服務(wù)使用方的服務(wù)使用情況反饋進(jìn)行復(fù)核，用于改善服務(wù)質(zhì)量?？蓴U(kuò)展消息傳輸和流傳輸?shù)慕粨Q方式，以支持動(dòng)態(tài)數(shù)據(jù)（如傳感器數(shù)據(jù)、北斗或GPS數(shù)據(jù)等）的實(shí)時(shí)傳a)靜態(tài)數(shù)據(jù)傳輸通道應(yīng)實(shí)現(xiàn)文件格式數(shù)據(jù)的傳輸，可兼容數(shù)據(jù)庫(kù)連接等交換傳輸。應(yīng)實(shí)現(xiàn)端到端的高效、可靠、安全、便捷的數(shù)據(jù)傳輸，跨網(wǎng)域、跨系統(tǒng)之間應(yīng)通過(guò)前置機(jī)（亦可稱作交換前置節(jié)點(diǎn)）作為數(shù)據(jù)中轉(zhuǎn)緩沖，前置機(jī)的節(jié)點(diǎn)管理功能應(yīng)至少支持文件類數(shù)據(jù)傳輸?shù)墓芾韇)靜態(tài)數(shù)據(jù)文件傳輸通道應(yīng)支持平臺(tái)無(wú)關(guān)、自主路由、多點(diǎn)投放的功能，并根據(jù)需要配置專用通道，實(shí)現(xiàn)特定數(shù)據(jù)內(nèi)容高效、優(yōu)先傳輸。自治區(qū)級(jí)交換傳輸通道應(yīng)與交通運(yùn)輸部平臺(tái)保持c)動(dòng)態(tài)數(shù)據(jù)傳輸通道應(yīng)優(yōu)先選擇消息隊(duì)列中間件方式，應(yīng)滿足實(shí)時(shí)流數(shù)據(jù)量大、實(shí)時(shí)性要求高請(qǐng)與審核、交換規(guī)則定制、交換通道管理、交換日志使用方案(路務(wù)a)交換節(jié)點(diǎn)部署與注冊(cè)。交換管理系統(tǒng)應(yīng)具備在不同前置機(jī)部署交換節(jié)點(diǎn)的功能，交換節(jié)點(diǎn)定位為構(gòu)建不同節(jié)點(diǎn)之間通道，完成數(shù)據(jù)交換任務(wù)，其受交換管理系統(tǒng)統(tǒng)一管理、分配通道與b)交換通道申請(qǐng)與審核。交換通道申請(qǐng)內(nèi)容應(yīng)包括：交換相關(guān)節(jié)點(diǎn)、更新頻率、限制條件(如某區(qū)域、某時(shí)段等);任何數(shù)據(jù)交換均應(yīng)在通道申請(qǐng)通過(guò)，獲取傳輸資源后進(jìn)行，周期性交c)交換規(guī)則定制。通過(guò)交換申請(qǐng)后，應(yīng)支持平臺(tái)管理員定制交換規(guī)則，系統(tǒng)可根據(jù)規(guī)則自動(dòng)執(zhí)務(wù)數(shù)、繁忙程度、傳輸速度等）、正在傳輸?shù)娜蝿?wù)（任務(wù)名稱、傳輸內(nèi)容、開始時(shí)間、完成），e)交換日志管理。對(duì)交換通道的使用情況進(jìn)行記錄，交換日志應(yīng)至少包括：交換的時(shí)間、交換的業(yè)務(wù)授權(quán)碼、交換的信息資源內(nèi)容、交換的結(jié)果、交換的數(shù)據(jù)量、交換的源節(jié)點(diǎn)和目的節(jié)1234聯(lián)機(jī)查詢?nèi)蝿?wù)的開始時(shí)間，格式為“YYYY-MM-DDhh:mm:ss.nnn”5即查詢?nèi)蝿?wù)結(jié)束，可輸出結(jié)果至交換界面的時(shí)間，格式為“YYYY-MM-DDhh:mm:ss.nnn”6789若數(shù)據(jù)庫(kù)連接成功，留空；若連接失敗，則填寫數(shù)據(jù)庫(kù)管理系統(tǒng)的返回原因數(shù)據(jù)表查詢成功，留空；查詢失敗，則填寫數(shù)據(jù)1234文件下載任務(wù)的開始時(shí)間，格式為“YYYY-MM-DDhh:mm:ss.nnn”5下載任務(wù)結(jié)束時(shí)間，格式為“YYYY-MM-DDhh:mm:ss.nnn”6789因12345接口調(diào)用任務(wù)的開始時(shí)間，格式為“YYYY-MM-DDhh:mm:ss.nnn”6接口調(diào)用后，返回結(jié)果的時(shí)間，格式為“YYYY-MM-DDhh:mm:ss.nnn”789因123456789任務(wù)開始時(shí)間，格式為“YYYY-MM-DDhh:mm:ss.nnn”任務(wù)結(jié)束時(shí)間，格式為“YYYY-MM-DDhh:mm:ss.nnn”123456789任務(wù)開始時(shí)間，格式為“YYYY-MM-DDhh:mm:ss.nnn”任務(wù)結(jié)束時(shí)間，格式為“YYYY-MM-DDhh:mm:ss.nnn”信息資源名稱來(lái)源系統(tǒng)來(lái)源數(shù)據(jù)庫(kù)信息資源摘要式行業(yè)分類業(yè)務(wù)分類管理對(duì)象分類主題分類信息類別分類類項(xiàng)目細(xì)目信息資源提供方提供方內(nèi)部部門提供方聯(lián)系方式信