基于大數(shù)據(jù)處理的管理模式下信息處理框架設(shè)計(jì),信息管理論文

PAGEPAGE7基于大數(shù)據(jù)處理的管理模式下信息處理框架設(shè)計(jì),信息管理論文題目第一章第二章第三章第四章第五章基于大數(shù)據(jù)處理的管理形式下信息處理框架設(shè)計(jì)總結(jié)/以下為以下為以下為以下為參考文獻(xiàn)第5章基于大數(shù)據(jù)處理的管理形式下信息處理框架設(shè)計(jì)在大數(shù)據(jù)背景下，管理的關(guān)鍵就是信息數(shù)據(jù)的整合與分析，在各個(gè)模塊中，信息系統(tǒng)的存在尤為重要，數(shù)據(jù)的傳遞、收集、服務(wù)的提供都離不開信息系統(tǒng)，它是對(duì)整個(gè)管理形式的一個(gè)關(guān)鍵支撐。5.1需求分析首先，對(duì)于通信系統(tǒng)而言，數(shù)據(jù)流動(dòng)和交換能力、存儲(chǔ)能力和計(jì)算能力是必須的。在大數(shù)據(jù)背景下的海量數(shù)據(jù)信息支撐下，實(shí)時(shí)的數(shù)據(jù)采集和處理、數(shù)據(jù)驅(qū)動(dòng)的決策制定所需的海量數(shù)據(jù)的存儲(chǔ)和分析，都需要信息系統(tǒng)能夠提供高度動(dòng)態(tài)、高度延展的基礎(chǔ)能力保證。其次，實(shí)現(xiàn)海量多形式數(shù)據(jù)的實(shí)時(shí)準(zhǔn)確的分享也是必須的。數(shù)據(jù)是為企業(yè)業(yè)務(wù)提供必須的能力的關(guān)鍵因素。無論對(duì)于智能生產(chǎn)、網(wǎng)絡(luò)銷售還是智慧物流，都需要由數(shù)據(jù)驅(qū)動(dòng)，實(shí)現(xiàn)多個(gè)業(yè)務(wù)的有機(jī)整合，協(xié)同工作。這就需要企業(yè)信息系統(tǒng)能夠像人體中的循環(huán)系統(tǒng)一樣，對(duì)于不同的上層業(yè)務(wù)應(yīng)用提供統(tǒng)一的數(shù)據(jù)支持，針對(duì)不同業(yè)務(wù)，應(yīng)對(duì)的數(shù)據(jù)格式，數(shù)據(jù)訪問形式的不同需求，實(shí)現(xiàn)多格式、多形式數(shù)據(jù)的統(tǒng)一管理，實(shí)時(shí)分享。最后，還需要有靈敏敏捷的平臺(tái)支撐。面對(duì)市場(chǎng)需求和客戶群體的快速演變，怎樣實(shí)現(xiàn)快速應(yīng)對(duì)是企業(yè)發(fā)展的根本所在。無論是智能生產(chǎn)、網(wǎng)絡(luò)銷售還是智慧物流，都面對(duì)這由于數(shù)據(jù)速度快速這樣特點(diǎn)而需要快速響應(yīng)這一問題。這樣就需要企業(yè)的信息系統(tǒng)在現(xiàn)有業(yè)務(wù)功能的基礎(chǔ)上，具備迅速重新組合提供新服務(wù)的能力。為了支撐這些新服務(wù)，能敏捷地調(diào)整本身能力提供和服務(wù)管理也是必備的功能。傳統(tǒng)的豎井式系統(tǒng)構(gòu)架難以實(shí)現(xiàn)靈敏動(dòng)態(tài)的能力保障來應(yīng)對(duì)快速多變的業(yè)務(wù)需求，業(yè)務(wù)應(yīng)用也只能實(shí)現(xiàn)單獨(dú)的業(yè)務(wù)單元，這樣一來，企業(yè)的業(yè)務(wù)應(yīng)用就會(huì)隨著業(yè)務(wù)的變動(dòng)而產(chǎn)生更改，甚至可能會(huì)導(dǎo)致業(yè)務(wù)集成的重構(gòu)。除此之外，對(duì)于數(shù)據(jù)容量、數(shù)據(jù)流量及數(shù)據(jù)流動(dòng)的實(shí)時(shí)性等方面，在傳統(tǒng)的應(yīng)用集成形式之下都存在著明顯的限制。一種新的，能夠提供大規(guī)模分布式系統(tǒng)中離散通信、存儲(chǔ)和處理能力，并以靈敏、可靠、透明的形式提供應(yīng)上層平臺(tái)和應(yīng)用的新信息系統(tǒng)的構(gòu)建成為了必須。它需要能提供針對(duì)海量多格式、多形式數(shù)據(jù)的跨平臺(tái)、跨應(yīng)用的統(tǒng)一支撐平臺(tái)；還必須提供高度敏捷的高可用、實(shí)時(shí)響應(yīng)的系統(tǒng)平臺(tái)以支持快速變化的功能目的。5.2信息處理構(gòu)架基于云計(jì)算平臺(tái)技術(shù)面向大規(guī)模分布式系統(tǒng)的資源會(huì)聚、管理和調(diào)度功能得到了最大的利用，能夠提供高性能可線性延展的分布式通信、存儲(chǔ)和計(jì)算能力，比照傳統(tǒng)的豎井式系統(tǒng)構(gòu)造，這種構(gòu)造能夠更好的適應(yīng)時(shí)代需求，能夠應(yīng)對(duì)由于大數(shù)據(jù)所帶來的信息處理壓力，使企業(yè)的管理愈加快速有效。在這里種形式下，信息交換將成為重點(diǎn)，應(yīng)用或服務(wù)間的互動(dòng)將由信息交換來定義〔包含信息數(shù)據(jù)模型，牽涉互動(dòng)的不同服務(wù)在互動(dòng)行為中的角色〕，系統(tǒng)中數(shù)據(jù)流依靠于分布式數(shù)據(jù)總線實(shí)現(xiàn)，而事件驅(qū)動(dòng)、RESTful架構(gòu)及常見的SOA形式都能夠采用數(shù)據(jù)驅(qū)動(dòng)集成形式描繪敘述。這樣，信息系統(tǒng)中業(yè)務(wù)應(yīng)用與基礎(chǔ)構(gòu)架之間的界線就模糊了。業(yè)務(wù)能力的開發(fā)、部署和運(yùn)營(yíng)都依靠于系統(tǒng)支撐平臺(tái)所提供的資源、能力和管理功能?；谝陨纤悸?，我們能夠得出基于云計(jì)算平臺(tái)的企業(yè)新型信息系統(tǒng)構(gòu)架〔如此圖5.1〕。此構(gòu)架在邏輯上可分成能力層、平臺(tái)層和資源層。能力層包含分布式數(shù)據(jù)總線〔通信能力〕，分布式統(tǒng)一存儲(chǔ)系統(tǒng)〔存儲(chǔ)能力〕，分布式工作流和調(diào)度引擎〔計(jì)算能力和資源調(diào)度〕；平臺(tái)層包含統(tǒng)一服務(wù)管理框架，統(tǒng)一服務(wù)交付框架，統(tǒng)一數(shù)據(jù)管理和訪問，以及自動(dòng)化運(yùn)維管理系統(tǒng)。系統(tǒng)的各個(gè)模塊如下：〔1〕運(yùn)維管理系統(tǒng)運(yùn)維管理系統(tǒng)在現(xiàn)有的大量跨域、異構(gòu)軟硬件基礎(chǔ)設(shè)施之上，快速搭建統(tǒng)一的資源和服務(wù)管理系統(tǒng)，提供面向系統(tǒng)平臺(tái)和業(yè)務(wù)應(yīng)用的高效的運(yùn)維服務(wù)。它提供基礎(chǔ)設(shè)施管理平臺(tái)的快速構(gòu)建能力，以及通過自動(dòng)化方式進(jìn)行大規(guī)模業(yè)務(wù)應(yīng)用部署及全生命周期管理、資源和應(yīng)用的監(jiān)控報(bào)警，自動(dòng)化故障排查修復(fù)等能力。運(yùn)維管理系統(tǒng)集成了策略引擎、分布式工作流、資源服務(wù)管理調(diào)度等機(jī)制，在搭建高性能的基礎(chǔ)設(shè)施和應(yīng)用服務(wù)運(yùn)行平臺(tái)的基礎(chǔ)上，保證資源及服務(wù)的延展性、容錯(cuò)性和流動(dòng)性，進(jìn)而實(shí)現(xiàn)整體管理的高效和透明化?！?〕分布式數(shù)據(jù)總線分布式數(shù)據(jù)總線支持常見的通信形式和通信模型，用于將系統(tǒng)中各個(gè)組成部分連接在一起，通過提供高容錯(cuò)、高性能的數(shù)據(jù)傳輸和交換支持系統(tǒng)的各個(gè)組成部分之間的通信和協(xié)作。它起到神經(jīng)中樞和循環(huán)系統(tǒng)的作用，從根本上保證了系統(tǒng)的實(shí)時(shí)性、動(dòng)態(tài)適應(yīng)性、延展性及松耦合性等。〔3〕數(shù)據(jù)采集系統(tǒng)數(shù)據(jù)采集系統(tǒng)是整個(gè)信息系統(tǒng)中數(shù)據(jù)的源頭，所有來自企業(yè)內(nèi)部和外部各個(gè)方面的數(shù)據(jù)都通過其進(jìn)入到信息系統(tǒng)之中，它會(huì)對(duì)進(jìn)入系統(tǒng)的數(shù)據(jù)進(jìn)行過濾和整理?！?〕數(shù)據(jù)存儲(chǔ)系統(tǒng)分布式文件系統(tǒng)用于對(duì)總數(shù)量和總?cè)萘慷己艽蟮母黝悎D片、視頻等多媒體文件，以及其他非構(gòu)造化數(shù)據(jù)的實(shí)時(shí)高效存儲(chǔ)和訪問。分布式實(shí)時(shí)數(shù)據(jù)庫(kù)用于用戶行為數(shù)據(jù)和系統(tǒng)日志數(shù)據(jù)等數(shù)量大、關(guān)聯(lián)弱的構(gòu)造化數(shù)據(jù)的實(shí)時(shí)性和高效性的存儲(chǔ)和訪問。關(guān)系型數(shù)據(jù)庫(kù)集群用于實(shí)現(xiàn)海量強(qiáng)關(guān)系型構(gòu)造化數(shù)據(jù)的存儲(chǔ)和快熟訪問?！?〕數(shù)據(jù)服務(wù)系統(tǒng)數(shù)據(jù)服務(wù)系統(tǒng)是系統(tǒng)平臺(tái)與上層應(yīng)用之間的橋梁。它通過對(duì)信息系統(tǒng)中的數(shù)據(jù)層，能力層實(shí)現(xiàn)功能抽象，采用面向服務(wù)體系構(gòu)架理念將系統(tǒng)平臺(tái)中不同的功能單元通過服務(wù)之間定義良好的接口聯(lián)絡(luò)起來，消除不同功能模塊以及數(shù)據(jù)提供者之間的技術(shù)差異，使不同的平臺(tái)服務(wù)和業(yè)務(wù)應(yīng)用協(xié)調(diào)運(yùn)行，實(shí)現(xiàn)不同功能模塊之間的數(shù)據(jù)交換與流動(dòng)。〔6〕服務(wù)交付服務(wù)交付框架是數(shù)據(jù)流的終點(diǎn)，是用戶使用信息系統(tǒng)的入口。對(duì)于用戶請(qǐng)求進(jìn)行處理、施行用戶認(rèn)證等相關(guān)斷定。通過可延展的前端服務(wù)器集群和根據(jù)業(yè)務(wù)需求制定的負(fù)載平衡機(jī)制，來實(shí)現(xiàn)高性能可靠的服務(wù)交付能力。包括安全管理、接入管理等功能?！?〕分布式工作流引擎分布式工作流引擎是系統(tǒng)中的執(zhí)行者，用于實(shí)現(xiàn)對(duì)于基于大規(guī)模系統(tǒng)的分布式工作流進(jìn)行定義、調(diào)度和執(zhí)行，用于支撐大規(guī)模系統(tǒng)的自動(dòng)化運(yùn)維和分布式計(jì)算框架的實(shí)現(xiàn)。在這一基于云計(jì)算平臺(tái)的新信息系統(tǒng)下，高速可靠、易于擴(kuò)展的數(shù)據(jù)交換和傳輸存儲(chǔ)成為了可能。系統(tǒng)能夠在網(wǎng)絡(luò)情況不良好的情況之下仍然保證數(shù)據(jù)通道的暢通性及數(shù)據(jù)交換的可靠性和安全性。分布在網(wǎng)絡(luò)之上的各個(gè)組件間的數(shù)據(jù)流能夠得到很好的控制。這樣一來，海量數(shù)據(jù)的統(tǒng)一訪問和集中存儲(chǔ)得到了解決，數(shù)據(jù)實(shí)時(shí)性得到提高；通過大規(guī)模軟件的快速部署、配置及基于策略的資源調(diào)度和管理機(jī)制，資源的自動(dòng)部署和靈敏調(diào)