DB3704T 0029-2023 石榴大數(shù)據(jù)平臺(tái)建設(shè)規(guī)范　

ICS65.020.99CCSB07DB3704I前言 II石榴大數(shù)據(jù)平臺(tái)建設(shè)規(guī)范 2規(guī)范性引用文件 3術(shù)語和定義 4總體要求 5總體架構(gòu) 6功能要求 7技術(shù)要求 8運(yùn)行管理 附錄A（資料性）石榴數(shù)據(jù)資源采集分類表 附錄B（資料性）石榴大數(shù)據(jù)平臺(tái)數(shù)據(jù)填報(bào)單示例 表B.1農(nóng)戶數(shù)據(jù)填報(bào)單 表B.2企業(yè)數(shù)據(jù)填報(bào)單 表B.3飯店數(shù)據(jù)填報(bào)單 表B.4景區(qū)數(shù)據(jù)填報(bào)單 參考文獻(xiàn) DB3704/T0029—20231DB3704/T0029—2023石榴大數(shù)據(jù)平臺(tái)建設(shè)規(guī)范本文件規(guī)定了石榴大數(shù)據(jù)平臺(tái)的總體架構(gòu)、總體要求，以及功能、性能和運(yùn)行管理等方面的要本文件適用于石榴大數(shù)據(jù)平臺(tái)的設(shè)計(jì)、建設(shè)，石榴產(chǎn)業(yè)相關(guān)大數(shù)據(jù)的采集、治理、信息發(fā)掘等。2規(guī)范性引用文件下列文件中的內(nèi)容通過文中的規(guī)范性引用文件而構(gòu)成本文件必不可少的條款。其中，注日期的引用文件，僅該日期對(duì)應(yīng)的版本適用于本文件；不注日期的引用文件，其最新版本（包括所有的修改單）適用于本文件。GB/T5271.1信息技術(shù)詞匯第1部分:基本術(shù)語GB/T20271信息安全技術(shù)信息系統(tǒng)通用安全技術(shù)要求GB/T22239信息安全技術(shù)信息系統(tǒng)安全登記保護(hù)基本要求GB/T28827.1信息技術(shù)運(yùn)行維護(hù)第1部分：通用要求GB/T28827.3信息技術(shù)運(yùn)行維護(hù)第3部分：應(yīng)急響應(yīng)規(guī)范GB/T31732測(cè)土配方施肥配肥服務(wù)點(diǎn)技術(shù)規(guī)范GB/T33705土壤水分觀測(cè)頻域反射法GB/T36092信息技術(shù)備份存儲(chǔ)備份技術(shù)應(yīng)用要求NY/T1118測(cè)土配方施肥技術(shù)規(guī)范NY/T3500農(nóng)業(yè)信息基礎(chǔ)共享元數(shù)據(jù)NY/T4061農(nóng)業(yè)大數(shù)據(jù)核心元數(shù)據(jù)DB3704/T001-2020嶧城石榴生產(chǎn)技術(shù)規(guī)程3術(shù)語和定義下列術(shù)語和定義適用于本文件。3.1農(nóng)業(yè)大數(shù)據(jù)agriculturalbigdata具有數(shù)據(jù)量大、來源多樣、生成極快且多變等特征，融合了農(nóng)業(yè)地域性、季節(jié)性、多樣性、周期性等行業(yè)特征后產(chǎn)生的類型多樣、結(jié)構(gòu)復(fù)雜、具有潛在價(jià)值的數(shù)據(jù)集合。[來源：NY/T4061-2021，3.2]3.2農(nóng)業(yè)信息資源agriculturalinformationresource經(jīng)過系統(tǒng)化組織、有序、可利用的各種與農(nóng)業(yè)生產(chǎn)、經(jīng)營、管理及服務(wù)等活動(dòng)有關(guān)的消息、情報(bào)、數(shù)據(jù)及資料等的總稱。[來源：NY/T3500-2019，3.6，有修改]3.3數(shù)據(jù)管理datamanagement2在數(shù)據(jù)處理系統(tǒng)中，提供對(duì)數(shù)據(jù)的訪問，執(zhí)行或監(jiān)視數(shù)據(jù)的存儲(chǔ)，以及控制輸入輸出操作等功會(huì)引起系統(tǒng)故障，而且沒有冗余或替代的操作程序作為補(bǔ)救的產(chǎn)品故障。4總體要求本標(biāo)準(zhǔn)針對(duì)石榴大數(shù)據(jù)平臺(tái)的建設(shè)提出建設(shè)要求，總體上應(yīng)滿足以下要求：a)統(tǒng)籌規(guī)劃、充分考慮各地基礎(chǔ)設(shè)施與數(shù)據(jù)資源的可獲取性、共享性、準(zhǔn)確性。b)平臺(tái)應(yīng)滿足開放性要求，提供可擴(kuò)展的數(shù)據(jù)接口，支持系統(tǒng)內(nèi)外部數(shù)據(jù)交換服務(wù)，確保信息的互通共享。c)應(yīng)采取必要措施，保證接入平臺(tái)的設(shè)備、系統(tǒng)和用戶的安全性，以及數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)傳輸、數(shù)據(jù)應(yīng)用的安全性。d)平臺(tái)應(yīng)提供清晰、簡(jiǎn)潔、友好的人機(jī)交互界面，操作應(yīng)易學(xué)易用，便于管理和維護(hù)。e)應(yīng)建立完善的運(yùn)行保障機(jī)制，配備常態(tài)化運(yùn)維隊(duì)伍，保障平臺(tái)的穩(wěn)定運(yùn)行。5總體架構(gòu)5.1總體架構(gòu)圖石榴大數(shù)據(jù)平臺(tái)總體架構(gòu)應(yīng)包括基礎(chǔ)設(shè)施層、數(shù)據(jù)資源層、業(yè)務(wù)支撐層、應(yīng)用層、交互層及數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范體系和信息安全體系，見圖1。數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范體系信息安全體系圖1石榴大數(shù)據(jù)平臺(tái)總體架構(gòu)圖5.2基礎(chǔ)設(shè)施層基礎(chǔ)設(shè)施層為系統(tǒng)各層提供必要的基礎(chǔ)環(huán)境，包括支撐石榴大數(shù)據(jù)平臺(tái)運(yùn)行的網(wǎng)絡(luò)資源、計(jì)算資源、存儲(chǔ)資源、硬件資源等。3DB3704/T0029—20235.3數(shù)據(jù)資源層5.3.1數(shù)據(jù)資源庫數(shù)據(jù)資源層為其上層提供數(shù)據(jù)支持，數(shù)據(jù)資源庫應(yīng)包括但不限于自然資源數(shù)據(jù)、種植過程數(shù)據(jù)、經(jīng)營主體數(shù)據(jù)、農(nóng)資和設(shè)施數(shù)據(jù)、產(chǎn)品質(zhì)量數(shù)據(jù)、輿情數(shù)據(jù)、市場(chǎng)信息等。5.3.2數(shù)據(jù)庫設(shè)計(jì)管理數(shù)據(jù)庫設(shè)計(jì)和管理應(yīng)保證數(shù)據(jù)的完整性、一致性、有效性、及時(shí)性、準(zhǔn)確性和安全性。5.4業(yè)務(wù)支撐層業(yè)務(wù)支撐層為應(yīng)用層提供工具、功能和服務(wù)支撐，包括數(shù)據(jù)管理系統(tǒng)、平臺(tái)管理系統(tǒng)、質(zhì)量安全追溯系統(tǒng)、服務(wù)門戶系統(tǒng)等。5.5應(yīng)用層應(yīng)用層應(yīng)滿足石榴產(chǎn)業(yè)的監(jiān)管、分析決策、產(chǎn)業(yè)服務(wù)、對(duì)外展示等功能需求，包括數(shù)據(jù)資源管理、數(shù)據(jù)融合分析、生產(chǎn)管理、質(zhì)量安全追溯、產(chǎn)業(yè)監(jiān)管等。5.6交互層交互層直接面向用戶，為用戶提供多種使用和訪問方式，應(yīng)能對(duì)不同類型的用戶訪問、不同終端等提供支持，包括但不限于門戶網(wǎng)站、微信公眾號(hào)/小程序、手機(jī)APP等。5.7數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范體系包括數(shù)據(jù)資源分類分級(jí)、數(shù)據(jù)整合與集成、數(shù)據(jù)接口、系統(tǒng)架構(gòu)等標(biāo)準(zhǔn)規(guī)范。5.8信息安全系統(tǒng)包括數(shù)據(jù)采集、存儲(chǔ)、傳輸?shù)冗^程中的數(shù)據(jù)安全，系統(tǒng)運(yùn)行安全及應(yīng)用安全等。6功能要求6.1生產(chǎn)管理6.1.1種植生產(chǎn)管理石榴種植生產(chǎn)管理應(yīng)包括石榴、盆景、苗木生產(chǎn)過程的農(nóng)事操作、農(nóng)業(yè)投入品、產(chǎn)品采收、產(chǎn)品包裝和入庫等環(huán)節(jié)，對(duì)石榴產(chǎn)前、產(chǎn)中和產(chǎn)后各階段的生產(chǎn)情況進(jìn)行詳細(xì)記錄。6.1.2智慧生產(chǎn)監(jiān)測(cè)在種植園區(qū)設(shè)置監(jiān)測(cè)站點(diǎn)，記錄監(jiān)測(cè)站點(diǎn)的土壤肥力、土壤水分等信息，并為農(nóng)戶提供配方施肥建議，測(cè)土施肥方法參照NY/T1118，測(cè)土施肥服務(wù)方法參考GB/T31732，土壤水分測(cè)試方法參考GB/T33705。6.1.3病蟲害監(jiān)測(cè)與預(yù)警應(yīng)建立病蟲害監(jiān)測(cè)系統(tǒng)，針對(duì)高發(fā)病蟲害進(jìn)行數(shù)據(jù)采集和監(jiān)測(cè)，并建立病蟲害預(yù)警和應(yīng)急預(yù)案，病蟲害防治技術(shù)參照DB3704/T001-2020的規(guī)定執(zhí)行。6.1.4在線服務(wù)4DB3704/T0029—2023應(yīng)建立在線技術(shù)服務(wù)系統(tǒng)，提供專家在線技術(shù)指導(dǎo)、農(nóng)技知識(shí)、在線培訓(xùn)等服務(wù)。6.2質(zhì)量安全追溯應(yīng)建立石榴全產(chǎn)業(yè)鏈溯源、問題石榴溯源追蹤制度和技術(shù)體系，通過區(qū)塊鏈技術(shù)對(duì)石榴生產(chǎn)、加工、質(zhì)檢、倉儲(chǔ)、包裝、運(yùn)輸、銷售等環(huán)節(jié)進(jìn)行精細(xì)化管理，實(shí)現(xiàn)石榴產(chǎn)品來源可查、去向可尋、有責(zé)可追。6.3產(chǎn)業(yè)監(jiān)管6.3.1產(chǎn)業(yè)供求對(duì)接應(yīng)建立供求對(duì)接系統(tǒng)，面向農(nóng)戶、新型經(jīng)營主體、農(nóng)業(yè)生產(chǎn)加工企業(yè)、流通企業(yè)提供線上石榴鮮果、石榴加工品、盆景、苗木、農(nóng)機(jī)、農(nóng)資供求信息，提供產(chǎn)業(yè)內(nèi)各類主體供求對(duì)接，在線交流的渠道。6.3.2市場(chǎng)監(jiān)測(cè)應(yīng)建立市場(chǎng)監(jiān)測(cè)系統(tǒng)，實(shí)現(xiàn)相關(guān)市場(chǎng)數(shù)據(jù)的自動(dòng)采集、實(shí)時(shí)分析市場(chǎng)價(jià)格走勢(shì)及產(chǎn)業(yè)輿情的聲量走勢(shì)、正負(fù)面比例、傳播路徑、異常預(yù)警等，為政府部門、涉農(nóng)企業(yè)等客戶提供石榴輿情的大數(shù)據(jù)監(jiān)測(cè)、分析、預(yù)警服務(wù)。6.4數(shù)據(jù)資源管理6.4.1數(shù)據(jù)采集平臺(tái)應(yīng)支持手動(dòng)輸入、數(shù)據(jù)實(shí)時(shí)采集、外部系統(tǒng)接入等多種數(shù)據(jù)采集方式，并建立采集數(shù)據(jù)審核機(jī)制，確保輸入數(shù)據(jù)的完整性、準(zhǔn)確性、有效性、實(shí)時(shí)性、一致性。數(shù)據(jù)采集對(duì)象應(yīng)多元化，包括石榴種植農(nóng)戶、石榴加工企業(yè)、石榴主產(chǎn)區(qū)域飯店、石榴景區(qū)等不同主體，可參照附錄B。6.4.2數(shù)據(jù)目錄管理石榴數(shù)據(jù)目錄管理系統(tǒng)應(yīng)包含目錄編制、審核、發(fā)布和目錄管理等功能，承擔(dān)石榴大數(shù)據(jù)資源目錄的編目和管理、實(shí)現(xiàn)石榴大數(shù)據(jù)目錄的展示與獲取全過程的跟蹤記錄。6.4.3數(shù)據(jù)分類科學(xué)劃分石榴產(chǎn)業(yè)相關(guān)數(shù)據(jù)資源，包括各類基本信息、經(jīng)營數(shù)據(jù)、市場(chǎng)數(shù)據(jù)、輿情數(shù)據(jù)、科技知識(shí)類數(shù)據(jù)、物聯(lián)網(wǎng)數(shù)據(jù)等結(jié)構(gòu)化、半結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)，可參照附錄A。6.4.4數(shù)據(jù)存儲(chǔ)數(shù)據(jù)存儲(chǔ)應(yīng)遵循Hadoop技術(shù)路線，為海量（TB/PB級(jí)）石榴大數(shù)據(jù)提供分布式存儲(chǔ)服務(wù)，與分布式文件系統(tǒng)、非關(guān)系型數(shù)據(jù)庫及傳統(tǒng)數(shù)據(jù)庫無縫集成，支持多種數(shù)據(jù)存儲(chǔ)場(chǎng)景。6.4.5數(shù)據(jù)集成數(shù)據(jù)集成應(yīng)提供可跨異構(gòu)石榴數(shù)據(jù)存儲(chǔ)系統(tǒng)能力，組合多種石榴數(shù)據(jù)源，提供不同網(wǎng)絡(luò)環(huán)境下的全量/增量石榴數(shù)據(jù)同步通道，支持多種同構(gòu)及異構(gòu)數(shù)據(jù)源之間相互數(shù)據(jù)同步，滿足不同石榴數(shù)據(jù)遷移場(chǎng)景。5DB3704/T0029—20236.4.6數(shù)據(jù)質(zhì)量應(yīng)包含質(zhì)量總覽、規(guī)則管理、標(biāo)準(zhǔn)檢測(cè)、質(zhì)量檢測(cè)、質(zhì)量分析等模塊，提供一體化的數(shù)據(jù)質(zhì)量檢測(cè)能力，并進(jìn)行質(zhì)量改進(jìn)，保證數(shù)據(jù)準(zhǔn)確性、一致性、完整性。6.5數(shù)據(jù)融合分析6.5.1氣象數(shù)據(jù)分析構(gòu)建氣象災(zāi)害分級(jí)和監(jiān)測(cè)預(yù)警指標(biāo)，建立最低氣溫和積溫?cái)?shù)據(jù)庫，確定不同時(shí)期、不同品種、不同地形石榴凍害發(fā)生的臨界溫度，構(gòu)建實(shí)時(shí)響應(yīng)的氣象災(zāi)害預(yù)測(cè)預(yù)警模型。6.5.2市場(chǎng)供需分析應(yīng)建立石榴消費(fèi)指數(shù)模型、市場(chǎng)價(jià)格波動(dòng)分析模型、市場(chǎng)價(jià)格預(yù)測(cè)模型等市場(chǎng)供需分析模型。6.5.3產(chǎn)銷監(jiān)測(cè)分析應(yīng)建立石榴供需信息數(shù)據(jù)庫和供需預(yù)測(cè)模型，提供石榴庫存預(yù)警指數(shù)、生產(chǎn)銷售預(yù)警指數(shù)等預(yù)警信息，為政府、農(nóng)戶提供農(nóng)業(yè)種養(yǎng)殖品種、規(guī)模、產(chǎn)銷節(jié)奏等的決策支持。7技術(shù)要求7.1性能要求平臺(tái)軟硬件能力應(yīng)滿足日常訪問最高峰值，具備軟硬件升級(jí)能力。應(yīng)具備較高可靠性和穩(wěn)定性，避免由于某一設(shè)備、網(wǎng)絡(luò)線路、軟件的單點(diǎn)故障影響平臺(tái)整體運(yùn)行。7.2部署環(huán)境要求支撐環(huán)境應(yīng)適應(yīng)分布式存儲(chǔ)、分布式計(jì)算、并行計(jì)算等技術(shù)體系；建有獨(dú)立機(jī)房的，機(jī)房建設(shè)應(yīng)符合國家相關(guān)標(biāo)準(zhǔn)規(guī)范；數(shù)據(jù)可根據(jù)需求選擇具有高可用性集群方案的商用或開源數(shù)據(jù)庫系統(tǒng)。7.3數(shù)據(jù)接口要求石榴大數(shù)據(jù)平臺(tái)應(yīng)提供服務(wù)接口和開發(fā)接口兩種形式，確保平臺(tái)數(shù)據(jù)和功能服務(wù)可被第三方系統(tǒng)調(diào)用共享。開發(fā)接口應(yīng)提供API應(yīng)用程序編程接口或SDK軟件開發(fā)工具包，支持利用腳本語言、開發(fā)包集成的二次開發(fā)模式。8運(yùn)行管理8.1總體要求平臺(tái)應(yīng)具備完善的運(yùn)維管理體系并嚴(yán)格按照體系執(zhí)行，系統(tǒng)運(yùn)行維護(hù)基本要求應(yīng)符合GB/T28827.1的要求；系統(tǒng)運(yùn)行維護(hù)的應(yīng)急響應(yīng)應(yīng)符合GB/T28827.3的要求。應(yīng)建立完善的數(shù)據(jù)對(duì)接維護(hù)機(jī)制，設(shè)置專人負(fù)責(zé)維護(hù)與政務(wù)平臺(tái)、的數(shù)據(jù)對(duì)接運(yùn)維工作，保障平臺(tái)的正常穩(wěn)定運(yùn)行。8.2系統(tǒng)安全要求68.2.1總體安全要求石榴大數(shù)據(jù)平臺(tái)建設(shè)應(yīng)按照《中華人民共和國計(jì)算機(jī)信息系統(tǒng)安全保護(hù)條例》《中華人民共和國數(shù)據(jù)安全法》《中華人民共和國個(gè)人信息保護(hù)法》規(guī)定，遵循信息安全技術(shù)標(biāo)準(zhǔn)，設(shè)立安全管理制度和機(jī)構(gòu)，對(duì)其非涉密的支撐環(huán)境、數(shù)據(jù)資源、軟件系統(tǒng)及其應(yīng)用與運(yùn)行維護(hù)等各方面的安全進(jìn)行全面設(shè)計(jì)和防護(hù)保障。8.2.2系統(tǒng)、數(shù)據(jù)及運(yùn)行安全要求平臺(tái)安全性要求應(yīng)達(dá)到GB/T22239規(guī)定的二級(jí)要求，系統(tǒng)安全技術(shù)符合GB/T20271的要求。應(yīng)采取有效的安全措施，對(duì)登錄用戶進(jìn)行身份鑒別，保證登錄用戶為合法用戶。應(yīng)采用系統(tǒng)訪問權(quán)限控制措施，根據(jù)用戶類別設(shè)置可訪問內(nèi)容，確保數(shù)據(jù)安全。應(yīng)經(jīng)過嚴(yán)格的攻擊性測(cè)試和壓力測(cè)試，確保具有一定的抗攻擊能力和業(yè)務(wù)承載能力。8.3數(shù)據(jù)備份應(yīng)對(duì)關(guān)鍵程序和數(shù)據(jù)進(jìn)行備份，并具備完善的應(yīng)急和災(zāi)難恢復(fù)措施。數(shù)據(jù)備份應(yīng)符合GB/T36092的要求。7（資料性）石榴數(shù)據(jù)資源采集分類表據(jù)計(jì)89況標(biāo)男女計(jì)（資料性）石榴大數(shù)據(jù)平臺(tái)數(shù)據(jù)填報(bào)單示例農(nóng)資投入農(nóng)資投入農(nóng)資投入農(nóng)資投入農(nóng)資投入農(nóng)資投入農(nóng)資投入農(nóng)資投入農(nóng)資投入農(nóng)資投入（輛)購話(萬元)計(jì)專利申請(qǐng)次數(shù)：次專利申請(qǐng)次數(shù)：次專利申請(qǐng)次數(shù)：次專利申請(qǐng)次數(shù)：次紹類型國有企業(yè)，集體企業(yè)，私營企業(yè)，外商企