勤智創(chuàng)新創(chuàng)業(yè)大數(shù)據(jù)平臺解決專業(yè)方案

勤智創(chuàng)新創(chuàng)業(yè)大數(shù)據(jù)平臺處理方案成全部勤智數(shù)碼科技股份6月

目錄1 建設(shè)大數(shù)據(jù)平臺的目的 32 大數(shù)據(jù)平臺帶來的價值 33 投資建設(shè)的內(nèi)容 43.1 大數(shù)據(jù)支撐體系建設(shè) 53.1.1 大數(shù)據(jù)支撐平臺 53.1.2 數(shù)據(jù)管理子系統(tǒng) 103.1.3 創(chuàng)新創(chuàng)業(yè)管理子系統(tǒng) 133.1.4 數(shù)據(jù)統(tǒng)一展示門戶子系統(tǒng) 143.1.5 用戶及權(quán)限管理子系統(tǒng) 173.2 大數(shù)據(jù)平臺運(yùn)營維護(hù)服務(wù) 193.2.1 平臺內(nèi)部資源的監(jiān)控管理 193.2.2 平臺故障處理管理 203.2.3 日常平臺管理任務(wù)自動化 213.2.4 故障處理自動化 213.3 科研專家和數(shù)據(jù)資源 224 項(xiàng)目收費(fèi)和收益模型 224.1 平臺運(yùn)營服務(wù) 224.2 數(shù)據(jù)運(yùn)營服務(wù)收益 234.3 大數(shù)據(jù)產(chǎn)業(yè)鏈發(fā)展促進(jìn)收益 234.4 政府社會收益 235 項(xiàng)目建設(shè)階段目標(biāo) 24

建設(shè)大數(shù)據(jù)平臺目標(biāo)大數(shù)據(jù)正在改變信息社會，我們正從IT時代走向DT時代。大數(shù)據(jù)產(chǎn)業(yè)，作為國家戰(zhàn)略新興產(chǎn)業(yè)，受到各級政府高度重視。大數(shù)據(jù)產(chǎn)業(yè)建設(shè)，經(jīng)過“政府引導(dǎo)、市場主導(dǎo)”模式建設(shè)一個數(shù)據(jù)驅(qū)動創(chuàng)新創(chuàng)業(yè)生態(tài)環(huán)境，改變當(dāng)下政務(wù)數(shù)據(jù)分散、獨(dú)立現(xiàn)實(shí)狀況，充足利用“大眾創(chuàng)業(yè)、萬眾創(chuàng)新”創(chuàng)新創(chuàng)業(yè)熱潮，主動建設(shè)一個以數(shù)據(jù)驅(qū)動運(yùn)行體系、創(chuàng)新創(chuàng)業(yè)生態(tài)、大數(shù)據(jù)產(chǎn)業(yè)鏈、政務(wù)數(shù)據(jù)共享交換、智慧城市大數(shù)據(jù)支撐平臺為關(guān)鍵目標(biāo)大數(shù)據(jù)全產(chǎn)業(yè)鏈生態(tài)環(huán)境。以“一點(diǎn)創(chuàng)新，全盤激活”為引導(dǎo)思緒，“一平臺，多應(yīng)用”為框架設(shè)計思緒，在人才培育體系建立、就業(yè)崗位增加、產(chǎn)業(yè)發(fā)展空間和產(chǎn)值提升等方面真切做到為政府提供全方位服務(wù)，從而為產(chǎn)業(yè)發(fā)展現(xiàn)實(shí)狀況形成標(biāo)桿性發(fā)展格局，扎實(shí)大數(shù)據(jù)產(chǎn)業(yè)發(fā)展基礎(chǔ)。深入推進(jìn)“大眾創(chuàng)業(yè)、萬眾創(chuàng)新”，讓創(chuàng)業(yè)創(chuàng)新成為經(jīng)濟(jì)增加“倍增器”、發(fā)展方法“轉(zhuǎn)換器”，讓“大眾創(chuàng)業(yè)、萬眾創(chuàng)新”在全社會蔚然成風(fēng)；支撐政府在更高平臺上實(shí)現(xiàn)經(jīng)濟(jì)可連續(xù)發(fā)展，為產(chǎn)業(yè)轉(zhuǎn)型升級提供經(jīng)驗(yàn)和啟示。大數(shù)據(jù)平臺帶來價值創(chuàng)新創(chuàng)業(yè)大數(shù)據(jù)平臺能夠帶來巨大產(chǎn)業(yè)發(fā)展空間、處理很多歷史問題、明確城市產(chǎn)業(yè)發(fā)展方向和帶動相關(guān)產(chǎn)業(yè)協(xié)同發(fā)展，具體表現(xiàn)在：數(shù)據(jù)運(yùn)行體系建立：建立以數(shù)據(jù)為關(guān)鍵資產(chǎn)和驅(qū)動力運(yùn)行體系，全方面利用智慧城市框架內(nèi)各類垂直業(yè)務(wù)運(yùn)行數(shù)據(jù)、國信優(yōu)易擁有可訪問700T國家部分部委政務(wù)數(shù)據(jù)、區(qū)域政府各委辦局政務(wù)數(shù)據(jù)等高價值數(shù)據(jù)資產(chǎn)，并為之配套形成標(biāo)桿性規(guī)范和標(biāo)準(zhǔn)，對于大數(shù)據(jù)產(chǎn)業(yè)發(fā)展方向無疑會產(chǎn)生標(biāo)志性里程碑意義。依靠國信優(yōu)易未來國家級大數(shù)據(jù)共享促進(jìn)中心發(fā)展定位，創(chuàng)新創(chuàng)業(yè)大數(shù)據(jù)平臺作為區(qū)域內(nèi)唯一國信優(yōu)易所擁有國家部委關(guān)鍵數(shù)據(jù)資源訪問接口，在未來以數(shù)據(jù)驅(qū)動運(yùn)行體系中會處于很有利發(fā)展格局。創(chuàng)新創(chuàng)業(yè)生態(tài)孵化：以數(shù)據(jù)為基礎(chǔ)創(chuàng)新創(chuàng)業(yè)平臺，不僅迎合了國家“大眾創(chuàng)業(yè)、萬眾創(chuàng)新”政策，能夠?yàn)檎?wù)，產(chǎn)生很多就業(yè)機(jī)會，形成有效匯聚人才、吸引投資強(qiáng)大磁場。數(shù)據(jù)作為政府關(guān)鍵資產(chǎn)，有數(shù)據(jù)就有機(jī)遇，就會有些人才培養(yǎng)和孵化潤土。大數(shù)據(jù)產(chǎn)業(yè)鏈打造：結(jié)合大數(shù)據(jù)產(chǎn)業(yè)發(fā)展目標(biāo)，充足利用創(chuàng)新創(chuàng)業(yè)大數(shù)據(jù)平臺中擁有高價值智慧城市運(yùn)行數(shù)據(jù)、國信優(yōu)易數(shù)據(jù)、政務(wù)數(shù)居等關(guān)鍵資源，打造以數(shù)據(jù)為關(guān)鍵產(chǎn)業(yè)鏈：產(chǎn)業(yè)鏈上游為各類數(shù)據(jù)擁有者和數(shù)據(jù)制造者；產(chǎn)業(yè)鏈中游為多種數(shù)據(jù)加工、創(chuàng)新創(chuàng)業(yè)、數(shù)據(jù)使用者，讓數(shù)據(jù)成為產(chǎn)業(yè)鏈“石油”資源，驅(qū)動產(chǎn)業(yè)鏈良性發(fā)展；產(chǎn)業(yè)鏈下游為政府或社會企業(yè)對數(shù)據(jù)加工創(chuàng)新步驟產(chǎn)生各類落地應(yīng)用和商業(yè)模式進(jìn)行投資和運(yùn)行；經(jīng)過大數(shù)據(jù)產(chǎn)業(yè)鏈良性循環(huán)，為政府帶來百億等級產(chǎn)業(yè)發(fā)展機(jī)遇和上億產(chǎn)值。智慧城市數(shù)據(jù)互聯(lián)支撐：智慧城市發(fā)展計劃頂層設(shè)計會包含到很多底層數(shù)據(jù)和上層應(yīng)用，將各類垂直應(yīng)用運(yùn)行數(shù)據(jù)接入到統(tǒng)一智慧城市數(shù)據(jù)支撐平臺中，能夠?yàn)槲磥碇腔鄢鞘薪ㄔO(shè)產(chǎn)生數(shù)據(jù)互聯(lián)互通提供基礎(chǔ)支撐，為數(shù)據(jù)運(yùn)行體系提供充足血液。政務(wù)數(shù)據(jù)共享交換：經(jīng)過對各個委辦局?jǐn)?shù)據(jù)孤島中各類數(shù)據(jù)分類、數(shù)據(jù)目錄定義、數(shù)據(jù)挖局、數(shù)據(jù)分析、數(shù)據(jù)清理、數(shù)據(jù)脫敏、數(shù)據(jù)水印、權(quán)限管控、數(shù)據(jù)熱度模型等各類數(shù)據(jù)生產(chǎn)加工，為上層基于數(shù)據(jù)共享創(chuàng)新等應(yīng)用提供足夠數(shù)據(jù)支撐；同時政府也可充足利用民生數(shù)據(jù)，脫敏利用后最大程度做到服務(wù)于民。成全部勤智數(shù)碼科技股份（以下簡稱“勤智數(shù)碼”）成立于，管理團(tuán)體均來自世界五百強(qiáng)，含有豐富資本運(yùn)作、市場運(yùn)行經(jīng)驗(yàn)，依靠和電子科技大學(xué)成立“機(jī)器學(xué)習(xí)和數(shù)據(jù)智能”聯(lián)合試驗(yàn)室，在大數(shù)據(jù)平臺、數(shù)據(jù)分析和算法融合、應(yīng)用開發(fā)等領(lǐng)域有豐富項(xiàng)目經(jīng)驗(yàn)和實(shí)力，成功承接過數(shù)十個政府大型項(xiàng)目標(biāo)建設(shè)，運(yùn)行和運(yùn)維工作。勤智數(shù)碼期望借助當(dāng)?shù)鼗髽I(yè)優(yōu)勢，負(fù)擔(dān)創(chuàng)新創(chuàng)業(yè)大數(shù)據(jù)平臺項(xiàng)目建設(shè)及后期運(yùn)行工作，組建最優(yōu)異教授團(tuán)體，在頂層設(shè)計、建設(shè)和運(yùn)行工作等方面高質(zhì)量、按計劃完成。投資建設(shè)內(nèi)容創(chuàng)新創(chuàng)業(yè)大數(shù)據(jù)平臺項(xiàng)目標(biāo)投資建設(shè)，因?yàn)榘浻布Y源、咨詢溝通、信息數(shù)據(jù)等內(nèi)容繁多，勤智數(shù)碼結(jié)合政府相關(guān)項(xiàng)目經(jīng)驗(yàn)，對初步提議投資模式進(jìn)行了以下歸納總結(jié)。創(chuàng)新創(chuàng)業(yè)大數(shù)據(jù)平臺項(xiàng)目關(guān)鍵包含到三個方面投資建設(shè)內(nèi)容，包含：1）大數(shù)據(jù)支撐體系建設(shè)2）大數(shù)據(jù)平臺運(yùn)行維護(hù)服務(wù)3）科研教授和數(shù)據(jù)資源服務(wù)投入具體投資建設(shè)內(nèi)容以下：大數(shù)據(jù)支撐體系建設(shè)為了實(shí)現(xiàn)政務(wù)數(shù)據(jù)共享創(chuàng)新體系建立，對政務(wù)數(shù)據(jù)需要有完備分析處理體系，以支撐整個創(chuàng)新創(chuàng)業(yè)生態(tài)、大數(shù)據(jù)產(chǎn)業(yè)鏈健康發(fā)展，而且國信優(yōu)易擁有高質(zhì)量國家部委各類數(shù)據(jù)，為了能有效訪問到經(jīng)過國信優(yōu)易授權(quán)各類數(shù)據(jù)，建設(shè)內(nèi)容已經(jīng)充足考慮應(yīng)用中國現(xiàn)在成熟和優(yōu)異技術(shù)，最大程度復(fù)用國信優(yōu)易大數(shù)據(jù)平臺成熟穩(wěn)定技術(shù)架構(gòu)和實(shí)現(xiàn)，結(jié)合特定需求元數(shù)據(jù)管理、數(shù)據(jù)分類、數(shù)據(jù)審計、數(shù)據(jù)審核、數(shù)據(jù)評定、數(shù)據(jù)定級、數(shù)據(jù)公布、數(shù)據(jù)水印管理、數(shù)據(jù)開放接口管理、數(shù)據(jù)展示統(tǒng)一門戶系統(tǒng)、身份權(quán)限管理、用戶管理、平臺門戶系統(tǒng)、其它接口和應(yīng)用平臺等符合當(dāng)?shù)貙?shí)際情況定制開發(fā)等建設(shè)內(nèi)容。大數(shù)據(jù)支撐體系是整個創(chuàng)新創(chuàng)業(yè)大數(shù)據(jù)平臺項(xiàng)目標(biāo)關(guān)鍵支撐，也是投資建設(shè)難度最大一個投資建設(shè)任務(wù)之一。包含：大數(shù)據(jù)支撐平臺創(chuàng)新創(chuàng)業(yè)大數(shù)據(jù)平臺負(fù)擔(dān)了智慧城市底層支撐、政務(wù)數(shù)據(jù)共享交換、互聯(lián)網(wǎng)數(shù)據(jù)存放、國信優(yōu)易數(shù)據(jù)訪問接口等多個關(guān)鍵業(yè)務(wù)需求，平臺本身需要含有和采取優(yōu)異經(jīng)過深度優(yōu)化大數(shù)據(jù)技術(shù)、分布式存放計算和算法模型、高并發(fā)和快速響應(yīng)高速緩存架構(gòu)等，建設(shè)一個基于SOA框架大數(shù)據(jù)能力關(guān)鍵平臺，作為整個項(xiàng)目標(biāo)數(shù)據(jù)智慧處理中心，需要支持多個數(shù)據(jù)源聚集（政務(wù)數(shù)據(jù)、互聯(lián)網(wǎng)數(shù)據(jù)、行業(yè)數(shù)據(jù)等），支持不一樣數(shù)據(jù)格式（結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)和流數(shù)據(jù)等）。在繁雜數(shù)據(jù)接入要求情況下，采取基于總線機(jī)制數(shù)據(jù)接入系統(tǒng)，能夠快速有效完成數(shù)據(jù)接入要求和提供豐富和靈活擴(kuò)展性。大數(shù)據(jù)支撐平臺建設(shè)計劃采取復(fù)用國信優(yōu)易成熟大數(shù)據(jù)平臺產(chǎn)品思緒，一是確保了和國信優(yōu)易數(shù)據(jù)接口訪問互通一致性、二是成熟產(chǎn)品架構(gòu)確保了運(yùn)行穩(wěn)定性、技術(shù)優(yōu)異性。平臺總體邏輯架構(gòu)分為三層：基礎(chǔ)設(shè)施層（IaaS層）、大數(shù)據(jù)平臺層（PaaS層），和大數(shù)據(jù)應(yīng)用層（SaaS層）?；A(chǔ)設(shè)施層依靠于分布式存放架構(gòu)，大數(shù)據(jù)平臺層則提供了包含數(shù)據(jù)接入、分析、共享和平臺管理在內(nèi)大數(shù)據(jù)分析處理功效，最終由大數(shù)據(jù)應(yīng)用層提供多種大數(shù)據(jù)應(yīng)用來充足展示大數(shù)據(jù)平臺數(shù)據(jù)處理能力和共享能力。圖：創(chuàng)新創(chuàng)業(yè)大數(shù)據(jù)平臺邏輯架構(gòu)設(shè)計基礎(chǔ)設(shè)施支撐平臺IaaS政務(wù)大數(shù)據(jù)平臺將充足利用區(qū)域政務(wù)中心（或信息中心）提供基礎(chǔ)設(shè)施資源，如：計算、存放、備份、網(wǎng)絡(luò)和安全防護(hù)等，從而為政務(wù)大數(shù)據(jù)平臺提供一個穩(wěn)定可靠、高性能、擴(kuò)展性強(qiáng)、易于管理基礎(chǔ)設(shè)施平臺，IaaS層中基礎(chǔ)服務(wù)器和網(wǎng)絡(luò)等資源計劃盡可能復(fù)用現(xiàn)有硬件資源。大數(shù)據(jù)分析處理平臺PaaS政務(wù)大數(shù)據(jù)平臺利用數(shù)據(jù)接入服務(wù)，將在云計算中心布署政務(wù)應(yīng)用中存在政務(wù)信息資源和互聯(lián)網(wǎng)數(shù)據(jù)進(jìn)行統(tǒng)一接入，經(jīng)過對結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行處理后，匯總形成總計21個一級類，133個二級類政務(wù)大數(shù)據(jù)目錄庫，實(shí)現(xiàn)資源查詢、檢索和共享利用。同時，構(gòu)建高效大數(shù)據(jù)分析系統(tǒng)，利用分布式數(shù)據(jù)處理、分析工具和展示工具，為上層應(yīng)用服務(wù)提供大數(shù)據(jù)處理和分析能力。另外，利用大數(shù)據(jù)門戶，為政府各委辦局、社會公眾、社會應(yīng)用開發(fā)商提供資源查詢、信息公開和數(shù)據(jù)服務(wù)。大數(shù)據(jù)經(jīng)典示范應(yīng)用層SaaS利用基礎(chǔ)設(shè)施支撐平臺和分析處理平臺構(gòu)建基礎(chǔ)云端應(yīng)用服務(wù)能力，建設(shè)數(shù)據(jù)創(chuàng)新創(chuàng)業(yè)促進(jìn)系統(tǒng)、數(shù)據(jù)創(chuàng)新競賽等提云端應(yīng)用服務(wù)，在平臺落地建設(shè)完成時，即可提供具體應(yīng)用提升人氣，產(chǎn)生數(shù)據(jù)價值。標(biāo)準(zhǔn)和優(yōu)異平臺大數(shù)據(jù)平臺計劃設(shè)計完全符合國家宏觀政策和各類標(biāo)準(zhǔn)，在標(biāo)準(zhǔn)規(guī)范層面，經(jīng)過建立政務(wù)大數(shù)據(jù)平臺數(shù)據(jù)目錄編制規(guī)范、數(shù)據(jù)權(quán)限管理規(guī)范、運(yùn)行標(biāo)準(zhǔn)規(guī)范、平臺安全和運(yùn)維標(biāo)準(zhǔn)規(guī)范、數(shù)據(jù)交換接口規(guī)范，為平臺運(yùn)行、維護(hù)和安全級權(quán)限控制管理等方面提供標(biāo)準(zhǔn)規(guī)范依據(jù)。大數(shù)據(jù)平臺關(guān)鍵技術(shù)優(yōu)勢顯著，以整體高可用性、靈活可擴(kuò)展性、技術(shù)優(yōu)異性為標(biāo)準(zhǔn)，打造適合于政府大數(shù)據(jù)產(chǎn)業(yè)發(fā)展支撐平臺：雙總線技術(shù)SOA框架:平臺層采取基于政務(wù)服務(wù)總線（GSB）及政務(wù)數(shù)據(jù)總線（GDB）雙總線架構(gòu)SOA框架。GDB關(guān)鍵負(fù)責(zé)數(shù)據(jù)接入和交換，GSB關(guān)鍵負(fù)責(zé)對內(nèi)對外提供統(tǒng)一服務(wù)接口。深度優(yōu)化分布式異構(gòu)存放技術(shù):平臺使用了經(jīng)過深度優(yōu)化HDFS、HBase和集群關(guān)系數(shù)據(jù)庫相結(jié)合異構(gòu)存放方案，利用基于內(nèi)存交換技術(shù)高速緩存和高性能數(shù)據(jù)中間件實(shí)現(xiàn)了高并發(fā)異構(gòu)存放體系。自主知識產(chǎn)權(quán)高效算法和分布式計算框架：平臺內(nèi)部集成了幾十種自主知識產(chǎn)權(quán)經(jīng)過十多年技術(shù)沉淀算法集合，利用MapReduce和Spark高效分布式計算框架，實(shí)現(xiàn)各類復(fù)雜數(shù)據(jù)挖掘和分析需求。圖：創(chuàng)新創(chuàng)業(yè)大數(shù)據(jù)平臺功效層次架構(gòu)設(shè)計互聯(lián)網(wǎng)輿情信息模塊據(jù)不完全統(tǒng)計，中國網(wǎng)民規(guī)模達(dá)6.32億，互聯(lián)網(wǎng)普及率為46.9%，網(wǎng)絡(luò)已經(jīng)成為超越廣播、報紙、電視第一大信息傳輸媒介。42%消費(fèi)者擁有博客或個人空間。61.7%網(wǎng)民在購置之前到網(wǎng)絡(luò)小區(qū)（如垂直網(wǎng)站、論壇、博客或問答）尋求推薦和提議。34%博主發(fā)表相關(guān)產(chǎn)品和品牌意見。73%消費(fèi)者在網(wǎng)上交流見解。76%網(wǎng)民將網(wǎng)絡(luò)口碑作為了解產(chǎn)品和服務(wù)最可靠信息源。78%消費(fèi)者相信好友推薦。在選擇商品和服務(wù)時，大家愈加關(guān)注她們在網(wǎng)絡(luò)上排行。不到10%網(wǎng)民發(fā)表著超出80%原創(chuàng)言論，并吸引著超出90%點(diǎn)擊率。依據(jù)權(quán)威媒體統(tǒng)計，69%政府和企業(yè)危機(jī)來自于互聯(lián)網(wǎng)。對互聯(lián)網(wǎng)信息接入將在信息資源規(guī)模上對大數(shù)據(jù)提供愈加豐富數(shù)據(jù)資源。本項(xiàng)目將對互聯(lián)網(wǎng)門戶網(wǎng)站、網(wǎng)絡(luò)社交論壇、微博輿論信息等相關(guān)信息資源進(jìn)行接入?；ヂ?lián)網(wǎng)分布式爬蟲對互聯(lián)網(wǎng)數(shù)據(jù)獲取關(guān)鍵依靠于網(wǎng)絡(luò)爬蟲技術(shù)實(shí)現(xiàn)。創(chuàng)新創(chuàng)業(yè)大數(shù)據(jù)平臺采取優(yōu)異分布式網(wǎng)絡(luò)爬蟲框架，由框架完成爬蟲統(tǒng)一調(diào)度、管理和維護(hù)工作，和被采集數(shù)據(jù)統(tǒng)一存放工作。爬蟲使用者只需要進(jìn)行簡單配置或開發(fā)極少許腳本代碼即可完成一個復(fù)雜頁面甚至網(wǎng)站爬取工作。另外，平臺在正當(dāng)范圍內(nèi)合適利用反防爬蟲技術(shù)，如驗(yàn)證碼識別、動態(tài)IP、動態(tài)用戶等，從而保障互聯(lián)網(wǎng)數(shù)據(jù)有效獲取，降低人工干預(yù)，節(jié)省成本。平臺提供部分互聯(lián)網(wǎng)門戶網(wǎng)站、網(wǎng)絡(luò)社交論壇、微博等系統(tǒng)爬蟲，并采集對應(yīng)數(shù)據(jù)以供平臺使用。對于以后新增應(yīng)用，假如需要用到其它網(wǎng)站數(shù)據(jù)，則能夠基于爬蟲框架，使用平臺提供SDK套件開發(fā)對應(yīng)爬蟲?；ヂ?lián)網(wǎng)門戶網(wǎng)站信息獲取接入互聯(lián)網(wǎng)門戶網(wǎng)站信息獲取接入是利用分布式網(wǎng)頁爬取技術(shù)，和基于行業(yè)領(lǐng)域字庫模式識別技術(shù)，實(shí)現(xiàn)對各類新聞門戶網(wǎng)站、行業(yè)領(lǐng)域?qū)I(yè)門戶網(wǎng)站等相關(guān)B/S網(wǎng)頁進(jìn)行實(shí)時解析獲取符合條件數(shù)據(jù)。互聯(lián)網(wǎng)門戶網(wǎng)站信息爬取對象以下：對新華網(wǎng)、人民網(wǎng)、中國新聞網(wǎng)、新浪網(wǎng)、搜狐網(wǎng)、騰訊網(wǎng)、網(wǎng)易網(wǎng)、鳳凰網(wǎng)、省級新聞網(wǎng)等各大綜合類新聞網(wǎng)站實(shí)時監(jiān)控，獲取符合條件電子政務(wù)相關(guān)信息。對中國氣象網(wǎng)、中國地震臺網(wǎng)、交通網(wǎng)、減災(zāi)網(wǎng)等行業(yè)領(lǐng)域門戶網(wǎng)站實(shí)時監(jiān)控，獲取氣象、地震、交通、自然災(zāi)難信息。其它政府期望立即獲取有價值互聯(lián)網(wǎng)信息等。網(wǎng)絡(luò)社交論壇信息獲取和門戶網(wǎng)站信息獲取方法類似，網(wǎng)絡(luò)社交論壇信息獲取一樣經(jīng)過網(wǎng)頁爬取技術(shù)獲取互聯(lián)網(wǎng)中社交論壇信息。關(guān)鍵提供以下相關(guān)內(nèi)容獲?。簩μ煅男^(qū)、貓撲小區(qū)、搜狐論壇、鳳凰論壇、網(wǎng)易論壇、新浪論壇、凱迪小區(qū)、強(qiáng)國論壇、中華網(wǎng)論壇、新華網(wǎng)論壇、環(huán)球網(wǎng)論壇、紅網(wǎng)論壇等眾多主流論壇信息進(jìn)行實(shí)時監(jiān)控，獲取符合條件電子政務(wù)相關(guān)信息。對搜狗說吧、baidu貼吧等公共交流平臺中信息進(jìn)行監(jiān)控，獲取網(wǎng)民反應(yīng)電子政務(wù)相關(guān)信息內(nèi)容。微博信息獲取微博信息獲取關(guān)鍵經(jīng)過調(diào)用爬蟲對新浪微博網(wǎng)頁爬取方法，對微博用戶公布信息進(jìn)行實(shí)時爬取，微博信息能夠進(jìn)行基礎(chǔ)統(tǒng)計分析，為未來深層次利用做好準(zhǔn)備。數(shù)據(jù)管理子系統(tǒng)元數(shù)據(jù)服務(wù)系統(tǒng)元數(shù)據(jù)庫管理基于Web瀏覽器端，向后臺系統(tǒng)管理員提供依據(jù)數(shù)據(jù)平臺內(nèi)部元數(shù)據(jù)標(biāo)準(zhǔn)（數(shù)據(jù)描述元數(shù)據(jù)、服務(wù)信息元數(shù)據(jù)），分別進(jìn)行對應(yīng)元數(shù)據(jù)庫創(chuàng)建和管理功效。元數(shù)據(jù)管理基于Web瀏覽器端，向后臺系統(tǒng)管理員提供對元數(shù)據(jù)文件導(dǎo)入功效?；趩螜C(jī)版元數(shù)據(jù)編輯器，向后臺系統(tǒng)管理員提供對數(shù)據(jù)描述元數(shù)據(jù)創(chuàng)建編輯保留功效。提供基于元數(shù)據(jù)檢索、元數(shù)據(jù)入庫存放、元數(shù)據(jù)修改刪除功效元數(shù)據(jù)管理WebService服務(wù)。元數(shù)據(jù)服務(wù)管理基于Web瀏覽器端，向后臺系統(tǒng)管理員提供啟停元數(shù)據(jù)服務(wù)功效。數(shù)據(jù)目錄和接口標(biāo)準(zhǔn)管理系統(tǒng)大數(shù)據(jù)資源目錄體系梳理包含對政務(wù)信息資源關(guān)鍵元數(shù)據(jù)標(biāo)準(zhǔn)、分類標(biāo)準(zhǔn)、標(biāo)識編碼標(biāo)準(zhǔn)等方面進(jìn)行梳理。參考國家對政務(wù)信息資源分類體系制訂標(biāo)準(zhǔn)，經(jīng)過先期梳理，可將政務(wù)大數(shù)據(jù)資源目錄梳理為21個一級類，133個二級類。代碼目錄名稱描述和說明ZA綜合政務(wù)相關(guān)政治方面事物和和國家管理工作ZAA政務(wù)綜合類和政務(wù)管理相關(guān)綜合性事務(wù)，包含政務(wù)督查、電子政務(wù)、信息公開ZAB方針政策政府制訂、宏觀、指導(dǎo)各個領(lǐng)域發(fā)展方針政策ZAD政府工作相關(guān)政府規(guī)章制度、組織機(jī)構(gòu)建設(shè)和發(fā)展，和工作職責(zé)等相關(guān)信息ZAE機(jī)構(gòu)編制相關(guān)機(jī)構(gòu)編制管理、機(jī)構(gòu)體系目前概況和遠(yuǎn)景計劃ZAF政府領(lǐng)導(dǎo)相關(guān)政府各級領(lǐng)導(dǎo)簡歷、工作崗位、工作活動、講話等相關(guān)信息ZAG會議、會務(wù)會議產(chǎn)生文件等相關(guān)信息，和會議組織、管理相關(guān)信息ZAH重大事件有深遠(yuǎn)影響事件相關(guān)信息ZB經(jīng)濟(jì)管理相關(guān)經(jīng)濟(jì)管理、計劃、發(fā)展概況ZBA經(jīng)濟(jì)管理綜合類ZBB經(jīng)濟(jì)發(fā)展計劃相關(guān)經(jīng)濟(jì)宏觀發(fā)展計劃ZBC經(jīng)濟(jì)管理相關(guān)經(jīng)濟(jì)宏觀管理現(xiàn)實(shí)狀況ZBD經(jīng)濟(jì)體制改革相關(guān)經(jīng)濟(jì)體制改革管理和計劃、發(fā)展情況。ZBE經(jīng)貿(mào)管理相關(guān)經(jīng)濟(jì)貿(mào)易宏觀管理和發(fā)展調(diào)查匯報、統(tǒng)計資料ZBF統(tǒng)計相關(guān)統(tǒng)計工作管理和發(fā)展情況………………(此處只列出部分分類,整體依據(jù)國家標(biāo)準(zhǔn)進(jìn)行同一分類)在平臺建設(shè)同時結(jié)合符合國家標(biāo)準(zhǔn)平臺段數(shù)據(jù)目錄定義,結(jié)合各個委辦局實(shí)際接口情況，明確各個委辦局?jǐn)?shù)據(jù)接口接入標(biāo)準(zhǔn)，明確可匯聚共享交換數(shù)據(jù)分類、數(shù)據(jù)格式、數(shù)據(jù)類型、數(shù)據(jù)接入方法等內(nèi)容。經(jīng)過明確接口標(biāo)準(zhǔn)定義，指導(dǎo)各個委辦局?jǐn)?shù)據(jù)接入，并提供必需技術(shù)支持和指導(dǎo)。數(shù)據(jù)目錄定義和管理要遵照國家現(xiàn)有政務(wù)電子信息化建設(shè)相關(guān)標(biāo)準(zhǔn)，同時結(jié)合各個委辦局?jǐn)?shù)據(jù)地域特殊性進(jìn)行更細(xì)致完善，確保數(shù)據(jù)目錄在遵照國家標(biāo)準(zhǔn)前提下，兼容支持當(dāng)?shù)卣黝悢?shù)據(jù)。數(shù)據(jù)挖掘和分析系統(tǒng)數(shù)據(jù)分析模塊子系統(tǒng)作為創(chuàng)新創(chuàng)業(yè)大數(shù)據(jù)平臺對外提供數(shù)據(jù)深度挖掘和分析服務(wù)關(guān)鍵系統(tǒng)，分布式數(shù)據(jù)處理子系統(tǒng)提供了對分布式存放數(shù)據(jù)進(jìn)行處理能力。數(shù)據(jù)分析系統(tǒng)利用多個分布式計算引擎，結(jié)合分布式數(shù)據(jù)存放模型對各類結(jié)構(gòu)化及非結(jié)構(gòu)化信息資源進(jìn)行快速分布式分析處理，并將分析處理后中間結(jié)果數(shù)據(jù)提供給上層示范性應(yīng)用和其它部門業(yè)務(wù)系統(tǒng)中進(jìn)行二次利用；另外，模型管理子系統(tǒng)提供各類業(yè)務(wù)分析模型新建、修改等管理功效。創(chuàng)新創(chuàng)業(yè)大數(shù)據(jù)平臺數(shù)據(jù)分析系統(tǒng)可分為以下多個關(guān)鍵部分：分布式計算引擎支撐系統(tǒng)在分布式處理領(lǐng)域中，分布式并行技術(shù)是最為關(guān)鍵領(lǐng)域之一。沒有好分布式處理程序支持，分布式處理就不可能很好工作，所謂超級計算、大數(shù)據(jù)分析也就愈加無從談起了。創(chuàng)新創(chuàng)業(yè)大數(shù)據(jù)平臺經(jīng)過提供MapReduce、Spark和Storm三種分布式計算框架，為上層應(yīng)用提供大數(shù)據(jù)分布式計算支撐。這種架構(gòu)既能夠最大程度滿足多種業(yè)務(wù)模型需求，同時也能夠充足利用政務(wù)大數(shù)據(jù)平臺軟硬件資源，提供數(shù)據(jù)存放訪問及分布式計算任務(wù)調(diào)度、運(yùn)行及結(jié)果通知等功效。算法及模型支撐系統(tǒng)數(shù)據(jù)分析不能一概而論，數(shù)據(jù)分析需要有基礎(chǔ)算法支撐。伴隨數(shù)據(jù)集規(guī)模和復(fù)雜度連續(xù)上升，對算法要求也越來越高。創(chuàng)新創(chuàng)業(yè)大數(shù)據(jù)平臺采取基于Hadoop技術(shù)架構(gòu)處理技術(shù)，為數(shù)據(jù)分析師及開發(fā)者提供幾十種含有自主知識產(chǎn)權(quán)分布式算法。平臺提供對應(yīng)SDK開發(fā)工具套件及算法調(diào)用API，從而讓多種應(yīng)用能夠方便使用平臺數(shù)據(jù)及其算法。擁有基礎(chǔ)算法支持僅僅完成了數(shù)據(jù)分析和挖掘第一步，對于每一個具體基于數(shù)據(jù)應(yīng)用系統(tǒng)，全部需要依據(jù)其本身特點(diǎn)建立對應(yīng)分析模型，才能夠有效支撐應(yīng)用系統(tǒng)。簡單說，分析模型能夠看作是由一個或多個基礎(chǔ)算法組合而成，基礎(chǔ)算法提供了大量中間結(jié)果，而模型則將大量中間結(jié)果處理為最終止果。數(shù)據(jù)分析開發(fā)套件SDK大數(shù)據(jù)平臺提供三種分布式計算框架為平臺提供了強(qiáng)大分布式計算能力，從而為多種基于數(shù)據(jù)應(yīng)用提供了基礎(chǔ)運(yùn)行環(huán)境；同時，基礎(chǔ)算法庫中大量分布式算法實(shí)現(xiàn)則為數(shù)據(jù)分析模型建立提供了底層工具支撐。為了讓平臺計算能力和算法分析能力應(yīng)用到實(shí)際業(yè)務(wù)之中，還需要經(jīng)過研發(fā)人員開發(fā)出使用這些計算能力和算法庫分析程序。分布式計算開發(fā)套件SDK則使平臺含有了二次開發(fā)能力，它能夠讓研發(fā)人員利用大數(shù)據(jù)平臺中分布式并行計算能力，經(jīng)過基于數(shù)據(jù)分析定制開發(fā)，實(shí)現(xiàn)對海量大數(shù)據(jù)進(jìn)行分析處理，建立數(shù)據(jù)分析處理結(jié)果性數(shù)據(jù)，為上層大數(shù)據(jù)業(yè)務(wù)應(yīng)用提供數(shù)據(jù)支撐。數(shù)據(jù)信息管理系統(tǒng)數(shù)據(jù)審核數(shù)據(jù)審核模塊關(guān)鍵是接收供給商門戶網(wǎng)站上傳流數(shù)據(jù)和塊狀數(shù)據(jù)，對這些數(shù)據(jù)進(jìn)行審核，決定其是否能經(jīng)過，并進(jìn)入數(shù)據(jù)評定。數(shù)據(jù)評定數(shù)據(jù)評定模塊關(guān)鍵是對已審核過數(shù)據(jù)，針對各個指標(biāo)項(xiàng)進(jìn)行數(shù)值評定，最終保留其評定結(jié)果，供用戶查詢和數(shù)據(jù)定價時參考。數(shù)據(jù)定價數(shù)據(jù)定價模塊關(guān)鍵是設(shè)置經(jīng)過數(shù)據(jù)評定數(shù)據(jù)，對應(yīng)不一樣用戶、不一樣使用環(huán)境進(jìn)行數(shù)據(jù)定價。數(shù)據(jù)公布管理數(shù)據(jù)公布管理模塊關(guān)鍵是公布經(jīng)過定價或評定數(shù)據(jù)，進(jìn)行對外公布，設(shè)置其公布范圍和公布狀態(tài)。數(shù)據(jù)日志系統(tǒng)數(shù)據(jù)日志存放對外提供數(shù)據(jù)日志存放服務(wù)接口，供其它系統(tǒng)進(jìn)行數(shù)據(jù)日志信息存放。數(shù)據(jù)日志查詢基于Web瀏覽器端，向后臺系統(tǒng)管理員提供數(shù)據(jù)日志查詢功效。數(shù)據(jù)審計系統(tǒng)數(shù)據(jù)服務(wù)使用情況審計基于web瀏覽器端，向后臺系統(tǒng)管理員提供對登陸和使用平臺進(jìn)行數(shù)據(jù)服務(wù)使用情況用戶行為進(jìn)行跟蹤統(tǒng)計和統(tǒng)計，并形成份析匯報功效。服務(wù)狀態(tài)監(jiān)視基于web端，向后臺系統(tǒng)管理員提供對全部已注冊并公布開放數(shù)據(jù)API和數(shù)據(jù)下載服務(wù)服務(wù)狀態(tài)信息進(jìn)行監(jiān)視統(tǒng)計，并形成份析匯報功效。數(shù)據(jù)使用權(quán)標(biāo)識系統(tǒng)塊狀數(shù)據(jù)水印服務(wù)向數(shù)據(jù)平臺提供webservice形式塊數(shù)據(jù)水印服務(wù)接口。流數(shù)據(jù)水印服務(wù)向API管理系統(tǒng)和創(chuàng)新工場API系統(tǒng)提供webservice形式流數(shù)據(jù)水印服務(wù)接口。水印管理服務(wù)基于web瀏覽器端，向后臺系統(tǒng)管理員提供對水印管理和驗(yàn)證功效。創(chuàng)新創(chuàng)業(yè)管理子系統(tǒng)創(chuàng)新創(chuàng)業(yè)應(yīng)用管理系統(tǒng)創(chuàng)新應(yīng)用APP測試創(chuàng)新工場APP測試：當(dāng)APP上架之前需要經(jīng)過后臺管理人員測試，創(chuàng)新工場開發(fā)者用戶應(yīng)該提供給數(shù)據(jù)平臺測試賬號，部署測試環(huán)境，提供測試數(shù)據(jù)，和對應(yīng)APP部分基礎(chǔ)信息。后臺管理員會依據(jù)提供信息對該APP進(jìn)行測試。創(chuàng)新應(yīng)用APP公布APP公布：對于測試經(jīng)過APP應(yīng)用，后臺管理員會進(jìn)行公布，添加新APP應(yīng)用，輸入APP相關(guān)基礎(chǔ)信息“名稱、開發(fā)者、訪問方法、說明描述、使用說明及演示地址等”。開放數(shù)據(jù)API管理系統(tǒng)API公布開放數(shù)據(jù)API公布：API數(shù)據(jù)系統(tǒng)關(guān)鍵提供給用戶使用API方法，進(jìn)行數(shù)據(jù)下載。是經(jīng)過接口形式，實(shí)時獲取最新數(shù)據(jù)。后臺管理員上架API，填寫API具體信息包含：API數(shù)據(jù)描述（api收費(fèi)情況描述、接口作用信息、接口參數(shù)對照信息、返回字典等信息），接口信息（調(diào)用地址、返回格式），API調(diào)用文檔，和API調(diào)用地址。以后會經(jīng)過后臺管理人員審核確定API經(jīng)過審核，才會公布到數(shù)據(jù)平臺。API測試API公布之前必需經(jīng)過測試，確保API可用性、正確性、和數(shù)據(jù)完整性，對部分法律要求不許可公布數(shù)據(jù)將不給予公布。數(shù)據(jù)統(tǒng)一展示門戶子系統(tǒng)數(shù)據(jù)統(tǒng)一展示門戶數(shù)據(jù)統(tǒng)一展示門戶關(guān)鍵為一般用戶提供瀏覽、確定數(shù)據(jù)范圍功效，數(shù)據(jù)是由平臺或數(shù)據(jù)供給商提供，用戶能夠經(jīng)過分類、查找、過濾等方法找到自己關(guān)注數(shù)據(jù)，然后查看數(shù)據(jù)具體信息，數(shù)據(jù)本身全部是經(jīng)過脫敏和加密，符合對外展示具體要求，成為數(shù)據(jù)驅(qū)動運(yùn)行體系統(tǒng)一對外展示接口。數(shù)據(jù)統(tǒng)一展示門戶系統(tǒng)功效包含，數(shù)據(jù)展示，數(shù)據(jù)過濾功效，數(shù)據(jù)查找功效，數(shù)據(jù)列表，數(shù)據(jù)具體信息。數(shù)據(jù)展示數(shù)據(jù)展示功效關(guān)鍵是將數(shù)據(jù)種類、描述、樣例、歷史訪問量等信息展示給用戶，以方便用戶分析使用。具體包含以下內(nèi)容：數(shù)據(jù)分類顯示數(shù)據(jù)分類會出現(xiàn)頁面頭部導(dǎo)航欄，當(dāng)用戶把鼠標(biāo)放到某一大分類出，彈出目前大分類下全部子分類，用戶點(diǎn)擊子分類進(jìn)入目前子分類相關(guān)數(shù)據(jù)具體列表頁面。數(shù)據(jù)過濾功效提供標(biāo)簽過濾功效，用戶點(diǎn)擊其中某個標(biāo)簽，會根據(jù)此標(biāo)簽和之前過濾標(biāo)簽重新過濾目標(biāo)數(shù)據(jù)。目標(biāo)數(shù)據(jù)將以標(biāo)簽匹配數(shù)據(jù)標(biāo)題關(guān)鍵字查找出來，以列表形式展示出來，以供用戶選擇。數(shù)據(jù)查找功效提供查找功效，用戶經(jīng)過頁面搜索查找相關(guān)輸入關(guān)鍵字所匹配數(shù)據(jù)，搜索框前能夠選擇搜索數(shù)據(jù)標(biāo)題還是搜索詳情，默認(rèn)是標(biāo)題關(guān)鍵字，輸入數(shù)據(jù)關(guān)鍵字，依據(jù)程序處理搜索相關(guān)數(shù)據(jù)關(guān)鍵字匹配，以列表形式展示出來以供用選擇。數(shù)據(jù)列表數(shù)據(jù)列表會展示目前用戶選擇或默認(rèn)分類下全部數(shù)據(jù)，會以列表分頁形式展示，根據(jù)時間默認(rèn)排序。目前列表會展示數(shù)據(jù)部分基礎(chǔ)信息“數(shù)據(jù)標(biāo)題、數(shù)據(jù)質(zhì)量評分、數(shù)據(jù)圖片、數(shù)據(jù)訪問量和數(shù)據(jù)簡單描述”；假如目前登錄用戶為創(chuàng)新工場用戶，創(chuàng)新工廠用戶進(jìn)入API列表，api標(biāo)題后會多出金銀銅等級，只有符合目前等級用戶才能夠調(diào)用目前API數(shù)據(jù)。數(shù)據(jù)具體信息數(shù)據(jù)具體信息，點(diǎn)擊數(shù)據(jù)標(biāo)題進(jìn)入目前數(shù)據(jù)具體信息頁面。會顯示目前數(shù)據(jù)具體信息，包含“數(shù)據(jù)圖片、數(shù)據(jù)標(biāo)題、數(shù)據(jù)價值、數(shù)據(jù)起源、數(shù)據(jù)上架時間、數(shù)據(jù)大小、目前數(shù)據(jù)下載量、數(shù)據(jù)簡短描述、目前數(shù)據(jù)完整性（八個指標(biāo)）、收藏、推薦相關(guān)目前數(shù)據(jù)相關(guān)數(shù)據(jù)、數(shù)據(jù)具體信息、訪問過用戶對目前數(shù)據(jù)評論信息”。數(shù)據(jù)檢索數(shù)據(jù)檢索包含，標(biāo)簽篩選，數(shù)據(jù)關(guān)鍵字及具體信息搜索。用戶點(diǎn)擊其中某個標(biāo)簽，會根據(jù)此標(biāo)簽和之前過濾標(biāo)簽重新過濾目標(biāo)數(shù)據(jù)。目標(biāo)數(shù)據(jù)將以標(biāo)簽匹配數(shù)據(jù)標(biāo)題關(guān)鍵字查找出來。搜索框前能夠選擇搜索數(shù)據(jù)標(biāo)題還是具體信息，默認(rèn)是標(biāo)題關(guān)鍵字，輸入數(shù)據(jù)關(guān)鍵字，依據(jù)程序處理搜索相關(guān)數(shù)據(jù)關(guān)鍵字匹配，以列表形式展示出來以供用選擇。用戶管理目前平臺用戶管理分為三類：一般用戶管理、創(chuàng)新工廠用戶管理、供給商用戶管理。一般用戶管理：一般用戶能夠在前臺個人中心里管理自己基礎(chǔ)信息，查看自己賬戶信息，修改密碼等操作。還能夠經(jīng)過我訂單查詢目前全部訂單，及訂單最新狀態(tài)，查看并管理目前API信息。查看目前系統(tǒng)消息。創(chuàng)新工廠用戶管理：創(chuàng)新工廠用戶能夠在個人中心管理自己基礎(chǔ)信息，查看自己目前等級，查看并管理自己賬戶余額，查看并管理目前API信息，更新自己所購置API版本等，公布自己應(yīng)用，查看而且管理自己目前已公布應(yīng)用。查看目前系統(tǒng)消息。供給商用戶管理：供給商用戶能夠在前臺個人中心里管理自己基礎(chǔ)信息，查看而且管理自己數(shù)據(jù)狀態(tài)，修改密碼等操作。公布數(shù)據(jù)，查看自己公布數(shù)據(jù)情況。查看目前系統(tǒng)消息。數(shù)據(jù)共享交換系統(tǒng)數(shù)據(jù)聚集配置管理基于web端，向后臺系統(tǒng)管理員提供對數(shù)據(jù)平臺主節(jié)點(diǎn)和分節(jié)點(diǎn)/獨(dú)立數(shù)據(jù)終端系統(tǒng)之間數(shù)據(jù)聚集操作配置管理功效。數(shù)據(jù)在線聚集基于web端，向后臺系統(tǒng)管理員提供進(jìn)行數(shù)據(jù)在線聚集傳輸操作管理功效。數(shù)據(jù)離線聚集基于web端，向后臺系統(tǒng)管理員提供進(jìn)行數(shù)據(jù)離線聚集傳輸操作管理功效，包含數(shù)據(jù)離線聚集包導(dǎo)出及導(dǎo)入功效。數(shù)據(jù)共享交換日志管理基于web端，向后臺系統(tǒng)管理員提供數(shù)據(jù)共享交換業(yè)務(wù)操作日志統(tǒng)計檢索瀏覽功效。數(shù)據(jù)訪問規(guī)則系統(tǒng)訪問規(guī)則管理基于web瀏覽器端，向后臺系統(tǒng)管理員提供基于內(nèi)置數(shù)據(jù)訪問業(yè)務(wù)規(guī)則，對特定用戶或特定數(shù)據(jù)服務(wù)進(jìn)行訪問規(guī)則設(shè)置管理功效。數(shù)據(jù)訪問服務(wù)向平臺提供基于webservice形式API數(shù)據(jù)訪問服務(wù)接口。訪問信息服務(wù)向平臺提供基于webservice形式API數(shù)據(jù)訪問歷史統(tǒng)計信息檢索服務(wù)接口。訪問規(guī)則管理對數(shù)據(jù)訪問相關(guān)各類規(guī)則進(jìn)行統(tǒng)一管理和配置。用戶及權(quán)限管理子系統(tǒng)用戶信息管理系統(tǒng)數(shù)據(jù)平臺注冊用戶管理平臺注冊用戶管理，系統(tǒng)管理員能夠在后臺進(jìn)行平臺注冊用戶管理。經(jīng)過用戶管理，能夠查看用戶訂單，和發(fā)覺不正當(dāng)用戶后，對用戶凍結(jié)功效。創(chuàng)新工場用戶管理創(chuàng)新工場用戶管理，系統(tǒng)管理員能夠在后臺對平臺全部創(chuàng)新工場用戶進(jìn)行操作。能夠在后臺用戶管理中創(chuàng)新工場用戶管理中設(shè)置。能夠進(jìn)行查看目前全部創(chuàng)新工場用戶列表及具體信息“創(chuàng)新工場用戶名稱、所公布API、公布時間、賬戶信息、用戶等級等?！惫芾韱T還能夠?qū)π律暾垊?chuàng)新工場用戶進(jìn)行審核，對不符合創(chuàng)新工場用戶條件申請進(jìn)行駁回。對已經(jīng)經(jīng)過審核創(chuàng)新工場用戶賬戶進(jìn)行凍結(jié)，叫停該用戶在應(yīng)用市場所公布應(yīng)用。數(shù)據(jù)供給商管理數(shù)據(jù)供給商管理，系統(tǒng)管理員能夠在后臺對平臺全部數(shù)據(jù)供給商進(jìn)行操作。能夠在后臺用戶管理中數(shù)據(jù)供給商管理中設(shè)置。能夠進(jìn)行查看目前全部供給商列表及具體信息“供給商名稱、所提供數(shù)據(jù)、時間等。”管理員還能夠?qū)π律暾垟?shù)據(jù)供給商進(jìn)行審核，對不符合數(shù)據(jù)供給商申請進(jìn)行駁回。對已經(jīng)經(jīng)過審核數(shù)據(jù)供給商進(jìn)行凍結(jié)，叫停所公布數(shù)據(jù)等操作。系統(tǒng)管理員管理系統(tǒng)管理員管理，超級管理員賬號能夠在后臺配置相關(guān)系統(tǒng)管理員權(quán)限，設(shè)置不一樣管理權(quán)限從而實(shí)現(xiàn)不一樣角色管理員劃分，比如訂單管理員，只能進(jìn)行訂單操作，無法操作其它菜單。超級管理員能夠在后臺用戶管理中配置相關(guān)系統(tǒng)管理員權(quán)限。授權(quán)管理系統(tǒng)數(shù)據(jù)服務(wù)分組管理和授權(quán)基于Web瀏覽器端，向后臺系統(tǒng)管理員提供對數(shù)據(jù)服務(wù)進(jìn)行分組定義和分組管理設(shè)置功效。基于Web瀏覽器端，向后臺系統(tǒng)管理員提供將數(shù)據(jù)服務(wù)分組和用戶分組進(jìn)行對應(yīng)關(guān)系設(shè)置和管理，根據(jù)對應(yīng)關(guān)系對用戶組進(jìn)行數(shù)據(jù)服務(wù)授權(quán)功效。數(shù)據(jù)服務(wù)分級管理和授權(quán)基于Web瀏覽器端，向后臺系統(tǒng)管理員提供對數(shù)據(jù)服務(wù)進(jìn)行分級定義和分組管理設(shè)置功效?；赪eb瀏覽器端，向后臺系統(tǒng)管理員提供將數(shù)據(jù)服務(wù)分級和用戶分級進(jìn)行對應(yīng)關(guān)系設(shè)置和管理，根據(jù)對應(yīng)關(guān)系對用戶等級進(jìn)行數(shù)據(jù)服務(wù)授權(quán)功效。數(shù)據(jù)服務(wù)單獨(dú)授權(quán)基于Web瀏覽器端，向后臺系統(tǒng)管理員提供為特定用戶對特定數(shù)據(jù)服務(wù)訪問授權(quán)進(jìn)行管理控制功效。提供針對特定用戶訪問特定數(shù)據(jù)服務(wù)授權(quán)WebService服務(wù)接口。數(shù)據(jù)訪問權(quán)限管理數(shù)據(jù)訪問權(quán)限管理：一般用戶及其供給商用戶只能夠訪問一般塊數(shù)據(jù)，及API。創(chuàng)新工廠用戶除了能夠查看一般塊數(shù)據(jù)，及API，還能夠調(diào)用創(chuàng)新工廠中對應(yīng)著自己賬戶等級API。身份認(rèn)證和訪問控制系統(tǒng)用戶身份認(rèn)證提供WebService形式用戶身份正當(dāng)性認(rèn)證服務(wù)，依據(jù)用戶名和口令進(jìn)行用戶身份比對認(rèn)證。數(shù)據(jù)服務(wù)動態(tài)Token授權(quán)服務(wù)向用戶提供獲取數(shù)據(jù)服務(wù)（開放數(shù)據(jù)API服務(wù)和塊數(shù)據(jù)下載服務(wù)）訪問授權(quán)動態(tài)TokenWeb服務(wù)API，經(jīng)過用戶身份認(rèn)證和數(shù)據(jù)服務(wù)訪問權(quán)限認(rèn)證后，向用戶返回最新數(shù)據(jù)服務(wù)調(diào)用授權(quán)動態(tài)Token。數(shù)據(jù)服務(wù)訪問控制對用戶向數(shù)據(jù)平臺發(fā)送數(shù)據(jù)服務(wù)調(diào)用請求進(jìn)行有效性驗(yàn)證和訪問控制。大數(shù)據(jù)平臺運(yùn)行維護(hù)服務(wù)創(chuàng)新創(chuàng)業(yè)大數(shù)據(jù)平臺項(xiàng)目包含軟硬件系統(tǒng)范圍較廣，且承載了關(guān)鍵關(guān)鍵數(shù)據(jù)資產(chǎn)，其穩(wěn)定運(yùn)行保障十分關(guān)鍵，勤智數(shù)碼依靠本身十多年IT運(yùn)維經(jīng)驗(yàn)，建立一套基于ISO/IEC0和ITILv3理論，遵照ITSS、GB/T28827-系列運(yùn)行維護(hù)服務(wù)國家標(biāo)準(zhǔn)運(yùn)行維護(hù)體系，對平臺中各子系統(tǒng)和各功效模塊提供統(tǒng)一監(jiān)控維護(hù)服務(wù)，包含服務(wù)提供狀態(tài)監(jiān)控、服務(wù)使用狀態(tài)監(jiān)控、系統(tǒng)運(yùn)行狀態(tài)監(jiān)控等。包含以下平臺運(yùn)維服務(wù)：平臺內(nèi)部資源監(jiān)控管理對平臺所包含全部硬件資源、軟件資源和數(shù)據(jù)資源進(jìn)行實(shí)時不間斷7x二十四小時監(jiān)控和管理，合理設(shè)定資源狀態(tài)預(yù)警閾值設(shè)定，確保任何資源狀態(tài)異常立即通報和展示，經(jīng)過聲光報警、短信、郵件立即通知，確保管理人員立即發(fā)覺和處理問題。同時借助大數(shù)據(jù)平臺優(yōu)勢，實(shí)現(xiàn)平臺內(nèi)部軟件、硬件資源運(yùn)行狀態(tài)趨勢估計，不一樣資源告警閾值智能化管理和自動設(shè)定，做到平臺內(nèi)部運(yùn)行狀態(tài)穩(wěn)定和連續(xù)。硬件資源監(jiān)控大數(shù)據(jù)平臺硬件資源較多，全部硬件資源包含：路由器、交換機(jī)、防火墻、主機(jī)（window、linux、Solaris、HP-Unix、AIX等）、虛擬服務(wù)器、無線設(shè)備AC/AP、存放設(shè)備、光交換、其它安全設(shè)備等監(jiān)控，監(jiān)控方法支持snmpv1/2/3、ssh/telnet、TCP、syslog、trap、腳本、WMI、netflow/cflow/sflow/netstream協(xié)議等。支持對大數(shù)據(jù)平臺包含多種設(shè)備狀態(tài)實(shí)時監(jiān)控(如：通斷、資源使用情況、端口狀態(tài)、流量峰值、流量改變量等其它關(guān)鍵指標(biāo)等)支持網(wǎng)絡(luò)設(shè)備流量應(yīng)用層協(xié)議分析和監(jiān)控.借助類似曲線圖表現(xiàn)大數(shù)據(jù)平臺內(nèi)部最近一個小時，最近一天，最近一周，最近一月，最近十二個月服務(wù)器或集群cpu負(fù)載,內(nèi)存,網(wǎng)絡(luò),硬盤等指標(biāo)支持各類監(jiān)控指標(biāo)告警閾值人工和自動調(diào)整支持告警信息短信、郵件通知和聲光報警通知支持網(wǎng)絡(luò)拓?fù)浜蜋C(jī)房視圖可視化管理支持網(wǎng)絡(luò)資源配置自動備份軟件資源監(jiān)控大數(shù)據(jù)平臺內(nèi)部軟件資源復(fù)雜，需要支持統(tǒng)一化一體監(jiān)控模式，支持對Hadoop架構(gòu)體系內(nèi)全部軟件模塊和系統(tǒng)（HBase、HDFS等）、關(guān)系型數(shù)據(jù)庫（MySQL集群、Oracle、SQLServer等）、中間件系統(tǒng)、前端應(yīng)用、軟件TCP端口等軟件資源監(jiān)控和管理，支持SNMP、SSH/telnet、JMX、JDBC等監(jiān)控方法和協(xié)議，實(shí)現(xiàn)：支持大數(shù)據(jù)平臺內(nèi)部多種傳統(tǒng)關(guān)系型數(shù)據(jù)庫和數(shù)據(jù)庫集群、Hadoop架構(gòu)中HDFS/HBase等狀態(tài)、內(nèi)存數(shù)據(jù)庫狀態(tài)、各類中間件資源狀態(tài)、平臺內(nèi)部和前端應(yīng)用狀態(tài)、各類內(nèi)外部接口狀態(tài)實(shí)時監(jiān)控支持各類監(jiān)控資源告警閾值人工和自動調(diào)整支持告警信息短信、郵件通知和聲光報警通知軟件信息變動和資源使用異常等關(guān)鍵指標(biāo)監(jiān)控基于軟件關(guān)聯(lián)關(guān)系監(jiān)控，實(shí)現(xiàn)基于多個軟件和硬件業(yè)務(wù)等級監(jiān)控平臺故障處理管理大數(shù)據(jù)平臺包含軟硬件信息和數(shù)據(jù)量較大，平臺上線運(yùn)行后見面臨海量故障信息，故障信息分析是運(yùn)維工程師面臨難題，而云計算、虛擬化等新技術(shù)廣泛采取深入加劇了運(yùn)維管理復(fù)雜度。需要對運(yùn)維步驟進(jìn)行梳理，將技術(shù)人員從繁重運(yùn)維工作中解脫出來，實(shí)現(xiàn)運(yùn)維作業(yè)標(biāo)準(zhǔn)化、自動化，縮短業(yè)務(wù)響應(yīng)時間，提升服務(wù)質(zhì)量。平臺各類故障和告警處理管理關(guān)鍵針對平臺運(yùn)行期間全部異常事件統(tǒng)一管理，確保全部異常事件全部被處理管理功效。借助國家標(biāo)準(zhǔn)和ITILSLA模型，需要建立一套完備故障事件、問題、變更和公布等標(biāo)準(zhǔn)化故障處理步驟，規(guī)范故障處理過程，做到故障立即處理、追蹤、統(tǒng)計，確保每一個問題和故障全部能被立即處理。提供頁面/郵件/短信/聲音/光/消息用戶端/WebService接口立即經(jīng)過責(zé)任人進(jìn)行告警處理。日常平臺管理任務(wù)自動化日常平臺管理工作中有很多是標(biāo)準(zhǔn)化工作，如巡檢、值班等工作。這些工作會占用大量時間，將人工操作、管理轉(zhuǎn)變?yōu)橄到y(tǒng)自動化操作和管理，能夠節(jié)省時間，將精力投入到更緊急、更關(guān)鍵工作中。自動巡檢功效平臺監(jiān)控管理系統(tǒng)自動將需要巡檢設(shè)備狀態(tài)發(fā)送到系統(tǒng)中，自動進(jìn)行設(shè)備運(yùn)行狀態(tài)和關(guān)鍵指標(biāo)性能數(shù)據(jù)搜集匯總形成自動巡檢結(jié)果，同時巡檢過程全程統(tǒng)計，經(jīng)過巡檢工單，能夠跟蹤巡檢實(shí)施情況。人工巡檢功效針對非監(jiān)控資源巡檢，可經(jīng)過系統(tǒng)內(nèi)提供人工巡檢功效完成巡檢結(jié)果統(tǒng)計，為巡檢任務(wù)實(shí)施計劃、監(jiān)督和結(jié)果電子化管理提供了有效手段。值班管理系統(tǒng)提供值班管理功效實(shí)現(xiàn)管理人員排班、值班、交接班等信息電子化管理，系統(tǒng)自動排班。故障處理自動化告警處理過程經(jīng)過基于ITIL事件、問題、變更等標(biāo)準(zhǔn)化步驟進(jìn)行管理系統(tǒng)自動進(jìn)行告警過濾、壓縮，避免海量告警。自動將關(guān)鍵告警經(jīng)過消息發(fā)送給責(zé)任人。系統(tǒng)自動運(yùn)行預(yù)定義腳本恢復(fù)故障。對于需要技術(shù)人員處理故障，系統(tǒng)自動創(chuàng)建工單，派發(fā)給管理人員處理。系統(tǒng)自動關(guān)聯(lián)知識庫，幫助技術(shù)人員處理工單。技術(shù)人員處理結(jié)束后處理方案一鍵轉(zhuǎn)知識，知識不停累積。平臺內(nèi)部管理移動化支持移動終端平臺狀態(tài)監(jiān)控和故障事件處理，實(shí)現(xiàn)管理人員不在現(xiàn)場