A蘇州旅游服務(wù)大數(shù)據(jù)平臺(tái)示范項(xiàng)目可行性研究報(bào)告

1、蘇州旅游服務(wù)大數(shù)據(jù)建設(shè)與應(yīng)用示范項(xiàng)目可行性研究報(bào)告項(xiàng)目名稱：蘇州旅游服務(wù)大數(shù)據(jù)建設(shè)與應(yīng)用示范項(xiàng)目申報(bào)單位：江蘇太湖九次方大數(shù)據(jù)信息技術(shù)服務(wù)有限公司地 址：蘇州太湖國家旅游度假區(qū)孫武路2999號(hào)太湖微谷產(chǎn)業(yè)園1號(hào)樓8層郵政編碼：215164聯(lián) 系 人：童欣電 話：XXX- XXX XXX傳 真：XXX- XXX XXX申報(bào)日期：2016年01月26日44目 錄第一章項(xiàng)目總論1一、項(xiàng)目名稱1二、項(xiàng)目申報(bào)單位1三、項(xiàng)目建設(shè)性質(zhì)1四、項(xiàng)目建設(shè)地點(diǎn)1五、項(xiàng)目建設(shè)內(nèi)容1六、建設(shè)期限2七、項(xiàng)目總投資2八、資金來源2九、可行性結(jié)論2第二章項(xiàng)目的意義和必要性3第三章國內(nèi)外發(fā)展現(xiàn)狀4第四章項(xiàng)目建設(shè)方案6一、建設(shè)目

2、標(biāo)6二、建設(shè)方案6三、技術(shù)基礎(chǔ)6第五章建設(shè)進(jìn)度15一、建設(shè)條件落實(shí)情況15二、建設(shè)工期和進(jìn)度安排15第六章項(xiàng)目實(shí)施管理16一、領(lǐng)導(dǎo)和管理機(jī)構(gòu)16二、項(xiàng)目實(shí)施機(jī)構(gòu)17三、項(xiàng)目管理模式19四、運(yùn)行維護(hù)機(jī)構(gòu)20五、相關(guān)管理制度21第七章環(huán)境污染防治24一、適用標(biāo)準(zhǔn)24二、建設(shè)期環(huán)境影響及治理措施24三、運(yùn)營(yíng)期環(huán)境影響及治理措施25四、環(huán)境影響評(píng)價(jià)結(jié)論26第八章投資估算及明細(xì)26一、分項(xiàng)投資估算26二、分年度投資計(jì)劃27第九章項(xiàng)目承擔(dān)單位概況28第十章經(jīng)濟(jì)效益和社會(huì)效益分析28一、經(jīng)濟(jì)效益分析28二、社會(huì)效益分析29三、社會(huì)影響分析30第十一章項(xiàng)目風(fēng)險(xiǎn)分析31一、技術(shù)風(fēng)險(xiǎn)31二、安全風(fēng)險(xiǎn)31三、數(shù)據(jù)質(zhì)

3、量風(fēng)險(xiǎn)32四、實(shí)施風(fēng)險(xiǎn)33五、管理風(fēng)險(xiǎn)34六、需求變更風(fēng)險(xiǎn)35第一章 項(xiàng)目總論一、 項(xiàng)目名稱蘇州旅游服務(wù)大數(shù)據(jù)平臺(tái)二、 項(xiàng)目申報(bào)單位江蘇太湖九次方大數(shù)據(jù)信息技術(shù)服務(wù)有限公司三、 項(xiàng)目建設(shè)性質(zhì)新建四、 項(xiàng)目建設(shè)地點(diǎn)蘇州太湖國家旅游度假區(qū)孫武路2999號(hào)太湖微谷產(chǎn)業(yè)園1號(hào)樓8層五、 項(xiàng)目建設(shè)內(nèi)容該建設(shè)項(xiàng)目為蘇州旅游服務(wù)大數(shù)據(jù)平臺(tái)建設(shè)項(xiàng)目，項(xiàng)目總投資3000萬元人民幣。主要建設(shè)內(nèi)容：構(gòu)建旅游服務(wù)大數(shù)據(jù)平臺(tái)，該平臺(tái)內(nèi)含旅游路線信息，旅游信息查詢，旅游收入統(tǒng)計(jì)，旅游大數(shù)據(jù)預(yù)測(cè)四大模塊，平臺(tái)整合全省旅游信息，旨在打造全方位智能化的旅游服務(wù)。六、 建設(shè)期限本項(xiàng)目建設(shè)工期為36個(gè)月（2016年3月-2019年

4、2月）。七、 項(xiàng)目總投資本項(xiàng)目總投資3000萬元人民幣，所需資金主要由項(xiàng)目申請(qǐng)單位與企業(yè)解決，并申請(qǐng)國家財(cái)政補(bǔ)貼。八、 資金來源本項(xiàng)目總投資3000萬元人民幣，其中擬申請(qǐng)國家補(bǔ)貼600萬元。九、 可行性結(jié)論該項(xiàng)目投資3000萬元人民幣，項(xiàng)目建設(shè)工期為36個(gè)月。通過項(xiàng)目的投資規(guī)模、建設(shè)期限、建設(shè)內(nèi)容及社會(huì)效益等方面內(nèi)容，經(jīng)過專家的論證得出結(jié)論，該項(xiàng)目建設(shè)內(nèi)容符合國家產(chǎn)業(yè)政策，投資計(jì)劃合理，建設(shè)規(guī)模適度，建設(shè)資金落實(shí)到位，技術(shù)上非?？尚小Ｍㄟ^本項(xiàng)目的建設(shè)，將大數(shù)據(jù)旅游、一站式旅行服務(wù)業(yè)務(wù)集中于云計(jì)算服務(wù)平臺(tái)，旅游云計(jì)算服務(wù)平臺(tái)建設(shè)的內(nèi)容、方案，借助基于云計(jì)算中心的空間信息處理能力和大數(shù)據(jù)挖掘能力，

5、構(gòu)建大數(shù)據(jù)旅游服務(wù)商業(yè)模式，實(shí)現(xiàn)旅游的精準(zhǔn)互動(dòng)營(yíng)銷、游客的個(gè)性化服務(wù)。蘇州旅游服務(wù)大數(shù)據(jù)平臺(tái)投入運(yùn)營(yíng)后，通過大數(shù)據(jù)記錄下游客的消費(fèi)習(xí)慣、消費(fèi)時(shí)間、旅游線路，消費(fèi)習(xí)慣等等信息，通過對(duì)這些數(shù)據(jù)的分析，可以推測(cè)出每年何時(shí)為旅游高峰，游客喜歡哪些景點(diǎn)以及物品，提前對(duì)這些情況做好準(zhǔn)備，改進(jìn)景區(qū)中的不足，并在何時(shí)的時(shí)機(jī)定向推送消費(fèi)。因此會(huì)產(chǎn)生巨大的經(jīng)濟(jì)效益，對(duì)促進(jìn)當(dāng)?shù)厣鐣?huì)和諧發(fā)展具有積極意義，項(xiàng)目的建設(shè)十分可行也非常必要。第二章 項(xiàng)目的意義和必要性旅游業(yè)信息化發(fā)展滯后于旅游的整體發(fā)展需要，旅游信息資源零散、碎片化，旅游信息資源開發(fā)程序滯后，靜止的信息多，不斷更新的信息少，多數(shù)旅游信息離及時(shí)、快速、全面這些

6、要求還有著很大的差距。部分旅游商家仍然采用傳統(tǒng)的商業(yè)模式，信息服務(wù)能力較差，信息不暢，資源無法共享，主管部門很難管理。多數(shù)旅游平臺(tái)只是做了一個(gè)門戶，功能、互動(dòng)都很少，不能完全滿足游客和社會(huì)的需求。旅游大數(shù)據(jù)服務(wù)作為智慧城市建設(shè)的重要內(nèi)容，它需要綜合運(yùn)用物聯(lián)網(wǎng)、云計(jì)算等新一代信息技術(shù)，借助各類終端設(shè)備，通過多種通信方式，實(shí)現(xiàn)對(duì)旅游信息的智能感知、智能管理，讓旅游信息及時(shí)、全面處理，使旅游的全過程實(shí)現(xiàn)智能化?；诼糜涡袠I(yè)整體發(fā)展的需要，讓游客吃、住、行、游、購、娛、展、演等整個(gè)旅游業(yè)態(tài)都實(shí)現(xiàn)信息化，建設(shè)一個(gè)功能全面綜合化旅游產(chǎn)業(yè)服務(wù)平臺(tái)勢(shì)在必行。第三章 國內(nèi)外發(fā)展現(xiàn)狀一、國外現(xiàn)狀大數(shù)據(jù)作為新興產(chǎn)業(yè)

7、受到了國內(nèi)外政府的鼓勵(lì)與支持，資金與智力投資雙管齊下，使得大數(shù)據(jù)產(chǎn)業(yè)迅速興起，而旅游業(yè)正逐漸成為世界上最大的產(chǎn)業(yè)，旅游大數(shù)據(jù)服務(wù)平臺(tái)的發(fā)展與利用已經(jīng)成為國外眾多國家社會(huì)與經(jīng)濟(jì)發(fā)展的重要課題。1)韓國發(fā)展掌上移動(dòng)旅游信息服務(wù)平臺(tái)。它是基于智能手機(jī)等移動(dòng)終端，以用戶所處地點(diǎn)為中心，提供周圍的景點(diǎn)、酒店和餐飲等旅游信息。即通過移動(dòng)旅游信息服務(wù)平臺(tái)安排合理的行程線路，游客不僅可以通過該平臺(tái)獲取信息，還可免費(fèi)下載周邊景區(qū)的信息應(yīng)用程序。2)英、德開發(fā)“智能導(dǎo)游”服務(wù)平臺(tái)軟件。該軟件以“增強(qiáng)現(xiàn)實(shí)”技術(shù)為基礎(chǔ)，讓游客通過聲光與影像，游客只需要用手機(jī)攝像頭，量身定做專屬于游客的旅行方案，相當(dāng)于一個(gè)全職導(dǎo)游。3

8、)比利時(shí)發(fā)展“標(biāo)識(shí)都市”項(xiàng)目。比利時(shí)推出基于微電子旅游大全“標(biāo)識(shí)都市”項(xiàng)目，布魯塞爾用二維碼技術(shù)和城市的信息進(jìn)行對(duì)接。通過手機(jī)掃描二維碼獲取信息，將旅行手冊(cè)所提到的所有信息都以二維碼的形式體現(xiàn)，在2012年9月21日推出中文版。4)新加坡開啟“旅游計(jì)劃”。新加坡推出“智慧國2015計(jì)劃”，包括購買相關(guān)旅游商品或?qū)ｉT服務(wù)。為游客整合旅游前、旅游中、旅游后的信息服務(wù)。游客可以利用智能手機(jī)等移動(dòng)終端，接受到旅游信息，提供具有個(gè)性化的針對(duì)信息服務(wù)。二、國內(nèi)現(xiàn)狀中國旅游產(chǎn)業(yè)的發(fā)展也進(jìn)入了一個(gè)快速增長(zhǎng)時(shí)期，旅游服務(wù)平臺(tái)利用旅游行業(yè)數(shù)據(jù)庫進(jìn)行分析,國內(nèi)研究單位大力建設(shè)旅游相關(guān)的數(shù)據(jù)中心、服務(wù)端平臺(tái)、使用端平

9、臺(tái)、將IT構(gòu)架引人旅游業(yè),將分散、海量的旅游信息,更友好地呈現(xiàn)出來,方便客人計(jì)劃和安排行程,并決定購買，以下是國內(nèi)典型的旅游服務(wù)平臺(tái)介紹：1)南京市旅游服務(wù)平臺(tái)：南京市旅游服務(wù)平臺(tái)包括前端應(yīng)用體系和后端支撐體系。前端應(yīng)用體系包含六個(gè)技術(shù)主體以及一套保障體系。后端支撐體系由旅游信息資源數(shù)據(jù)庫和基礎(chǔ)服務(wù)系統(tǒng)組成，提供全面、強(qiáng)大的支持服務(wù)。2)北京市旅游以“智慧北京便利旅游”為主題,開發(fā)三個(gè)系統(tǒng)(自助導(dǎo)游講解系統(tǒng)、城市自助導(dǎo)覽系統(tǒng)、網(wǎng)絡(luò)虛擬旅游系統(tǒng)),推進(jìn)四個(gè)數(shù)字(數(shù)字景區(qū)、數(shù)字酒店、數(shù)字旅行社、數(shù)字鄉(xiāng)村),推出一卡一亭(一卡通和北京禮物網(wǎng)上特色商亭),在三年內(nèi)實(shí)現(xiàn)無線寬帶。3)武漢市旅游大數(shù)據(jù)服務(wù)

10、平臺(tái)建設(shè)是根據(jù)信息生成、傳輸、處理和應(yīng)用的過程，通過網(wǎng)絡(luò)將感知的各種信息進(jìn)行接入和實(shí)時(shí)傳送；支撐層是為了智能處理，利用云計(jì)算等各種智能計(jì)算技術(shù)，及時(shí)地對(duì)海量的數(shù)據(jù)進(jìn)行信息控制、分析和處理，分為智慧終端和采集終端，智慧終端主要是便攜的終端上網(wǎng)設(shè)備，為旅游者提供豐富的服務(wù)。第四章 項(xiàng)目建設(shè)方案一、 建設(shè)目標(biāo)該建設(shè)項(xiàng)目為蘇州旅游服務(wù)大數(shù)據(jù)平臺(tái)建設(shè)項(xiàng)目，項(xiàng)目總投資3000萬元人民幣，主要建設(shè)內(nèi)容：構(gòu)建旅游服務(wù)大數(shù)據(jù)平臺(tái)，該平臺(tái)內(nèi)含旅游路線信息，旅游信息查詢，旅游收入統(tǒng)計(jì)，旅游大數(shù)據(jù)預(yù)測(cè)四大模塊，平臺(tái)整合全省旅游信息，旨在打造全方位智能化的旅游服務(wù)。二、 建設(shè)方案蘇州旅游服務(wù)大數(shù)據(jù)平臺(tái)的建設(shè)結(jié)合實(shí)際需求

11、，實(shí)行統(tǒng)籌規(guī)劃、分步實(shí)施，搭建一個(gè)支撐多元渠道的智慧旅游綜合數(shù)據(jù)中心，開發(fā)蘇州旅游服務(wù)大數(shù)據(jù)平臺(tái)；開發(fā)蘇州旅游服務(wù)信息咨詢與服務(wù)系統(tǒng)、旅游行業(yè)管理系統(tǒng)、智慧景區(qū)信息系統(tǒng)和智慧旅游電子商務(wù)系統(tǒng)四大子系統(tǒng)平臺(tái)，實(shí)現(xiàn)旅游信息查詢、旅游收入統(tǒng)計(jì)、旅游大數(shù)據(jù)預(yù)測(cè)等功能。打響旅游品牌，建成中心城市和國內(nèi)知名、一流的智慧旅游線路。 圖1 旅游服務(wù)大數(shù)據(jù)平臺(tái)蘇州旅游服務(wù)大數(shù)據(jù)平臺(tái)通過利用運(yùn)營(yíng)商大數(shù)據(jù)資源打造實(shí)時(shí)數(shù)據(jù)分析的信息化基礎(chǔ)平臺(tái)，通過對(duì)游客信息進(jìn)行多維度的精準(zhǔn)分析和有效預(yù)測(cè)，可以為用戶提供輿情分析、事件預(yù)警，同時(shí)可以通過有效整合旅游監(jiān)管數(shù)據(jù)、旅游行業(yè)數(shù)據(jù)、為政府、旅游企業(yè)制定宣傳營(yíng)銷策略提供有效的數(shù)據(jù)支

12、撐，真正實(shí)現(xiàn)“智慧旅游”。解決方法與步驟方案如下：1)數(shù)據(jù)采集 實(shí)時(shí)采集運(yùn)營(yíng)商用戶海量數(shù)據(jù)，包括用戶號(hào)碼、位置、時(shí)間等等。2)挖掘分析 對(duì)數(shù)據(jù)進(jìn)行深度挖局分析，為旅游局及相關(guān)政府部門提供實(shí)時(shí)準(zhǔn)確的區(qū)域及景區(qū)游客報(bào)表。3)預(yù)警發(fā)布 在某些景區(qū)出現(xiàn)擁堵或者其他緊急情況可自動(dòng)精確向游客推送預(yù)警信息。蘇州旅游服務(wù)大數(shù)據(jù)建設(shè)項(xiàng)目提供基礎(chǔ)服務(wù)，利用大數(shù)據(jù)的信息充實(shí)和創(chuàng)新平臺(tái)服務(wù)，把旅游服務(wù)推向更加智能、更加便捷的更高水平，實(shí)現(xiàn)的主要功能與應(yīng)用包括以下 5部分:1.智慧導(dǎo)覽與智能導(dǎo)游的開發(fā)與應(yīng)用平臺(tái)智慧導(dǎo)游與智慧導(dǎo)覽就是利用云計(jì)算、物聯(lián)網(wǎng)等新技術(shù)，游客僅利用手機(jī) APP 就可以實(shí)現(xiàn)智能導(dǎo)游講解，實(shí)時(shí)接收到對(duì)

13、應(yīng)景點(diǎn)的語音、圖文等介紹，并可以將其保存至手機(jī)。2.游客餐飲消費(fèi)智能信息管理系統(tǒng)的開發(fā)與應(yīng)用平臺(tái)通過開發(fā)餐飲消費(fèi)智能信息管理軟件，形成強(qiáng)大的后臺(tái)餐飲消費(fèi)數(shù)據(jù)感知網(wǎng)絡(luò)，對(duì)服務(wù)的企業(yè)進(jìn)行餐飲消費(fèi)智能微分析。了解和分析單個(gè)游客的消費(fèi)偏好，進(jìn)行良好的客戶關(guān)系管理，有利于提升游客的滿意度及商家的商品推廣和電子商務(wù)；同時(shí)，也可以了解商家的實(shí)時(shí)運(yùn)營(yíng)狀況，有利于其運(yùn)營(yíng)管理和診斷運(yùn)營(yíng)中存在的不足。3.旅游市場(chǎng)智能調(diào)研系統(tǒng)的開發(fā)與應(yīng)用平臺(tái)智能調(diào)研系統(tǒng)建立在智能終端調(diào)研平臺(tái)和在線調(diào)研平臺(tái)之上，分別通過瀏覽器調(diào)查數(shù)據(jù)收集系統(tǒng)和智能手機(jī)、平板電腦、智能 PAD 的調(diào)查數(shù)據(jù)收集系統(tǒng)，以互聯(lián)網(wǎng)和 2G、3G、4G 或者Wi

14、Fi等網(wǎng)絡(luò)接入作為數(shù)據(jù)收集渠道，幫助用戶快速、高效的開展抽樣調(diào)查工作。智能調(diào)研系統(tǒng)的開發(fā)與應(yīng)用，使得問卷更加具有針對(duì)性。4.游客住宿消費(fèi)智能信息管理系統(tǒng)的開發(fā)與應(yīng)用平臺(tái)通過開發(fā)住宿消費(fèi)智能信息管理軟件，形成強(qiáng)大的后臺(tái)煮熟數(shù)據(jù)感知網(wǎng)絡(luò)，對(duì)服務(wù)的企業(yè)進(jìn)行住宿智能微分析。了解和分析單個(gè)游客的消費(fèi)偏好，進(jìn)行良好的客戶關(guān)系管理，有利于提升游客的滿意度及商家的商品推廣和電子商務(wù)；同時(shí)，也可以了解商家的實(shí)時(shí)運(yùn)營(yíng)狀況，有利于其運(yùn)營(yíng)管理和診斷運(yùn)營(yíng)中存在的不足。5.旅游景區(qū)服務(wù)大數(shù)據(jù)子平臺(tái)通過這一平臺(tái)，服務(wù)地區(qū)內(nèi)各大景區(qū)實(shí)時(shí)游客數(shù)量、游客歸屬地、游客活動(dòng)軌跡、游客駐留時(shí)長(zhǎng)、游客進(jìn)入景區(qū)次數(shù)等多種信息將一覽無遺。此

15、舉將推動(dòng)當(dāng)?shù)芈糜螛I(yè)的管理、服務(wù)、消費(fèi)等方面的深度變革。該平臺(tái)利用中國移動(dòng)分布在景區(qū)周邊的基站資源，通過構(gòu)建基礎(chǔ)數(shù)據(jù)處理能力及大數(shù)據(jù)算法模型，將當(dāng)?shù)馗鞔缶皡^(qū)實(shí)時(shí)游客數(shù)量、游客歸屬地、游客活動(dòng)軌跡等信息進(jìn)行處理三、 技術(shù)基礎(chǔ)（一） 大數(shù)據(jù)關(guān)鍵技術(shù)介紹1. 大數(shù)據(jù)采集技術(shù)數(shù)據(jù)是指通過RFID射頻數(shù)據(jù)、傳感器數(shù)據(jù)、社交網(wǎng)絡(luò)交互數(shù)據(jù)及移動(dòng)互聯(lián)網(wǎng)數(shù)據(jù)等方式獲得的各種類型的結(jié)構(gòu)化、半結(jié)構(gòu)化（或稱之為弱結(jié)構(gòu)化）及非結(jié)構(gòu)化的海量數(shù)據(jù)，是大數(shù)據(jù)知識(shí)服務(wù)模型的根本。重點(diǎn)要突破分布式高速高可靠數(shù)據(jù)爬取或采集、高速數(shù)據(jù)全映像等大數(shù)據(jù)收集技術(shù)；突破高速數(shù)據(jù)解析、轉(zhuǎn)換與裝載等大數(shù)據(jù)整合技術(shù)；設(shè)計(jì)質(zhì)量評(píng)估模型，開發(fā)數(shù)據(jù)質(zhì)量技

16、術(shù)。2. 大數(shù)據(jù)預(yù)處理技術(shù)主要完成對(duì)已接收數(shù)據(jù)的辨析、抽取、清洗等操作。1）抽?。阂颢@取的數(shù)據(jù)可能具有多種結(jié)構(gòu)和類型，數(shù)據(jù)抽取過程可以幫助我們將這些復(fù)雜的數(shù)據(jù)轉(zhuǎn)化為單一的或者便于處理的構(gòu)型，以達(dá)到快速分析處理的目的。2）清洗：對(duì)于大數(shù)據(jù)，并不全是有價(jià)值的，有些數(shù)據(jù)并不是我們所關(guān)心的內(nèi)容，而另一些數(shù)據(jù)則是完全錯(cuò)誤的干擾項(xiàng)，因此要對(duì)數(shù)據(jù)通過過濾“去噪”從而提取出有效數(shù)據(jù)。3. 大數(shù)據(jù)存儲(chǔ)及管理技術(shù)大數(shù)據(jù)存儲(chǔ)與管理要用存儲(chǔ)器把采集到的數(shù)據(jù)存儲(chǔ)起來，建立相應(yīng)的數(shù)據(jù)庫，并進(jìn)行管理和調(diào)用。重點(diǎn)解決復(fù)雜結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化大數(shù)據(jù)管理與處理技術(shù)。主要解決大數(shù)據(jù)的可存儲(chǔ)、可表示、可處理、可靠性及有效傳輸?shù)?/p>

17、幾個(gè)關(guān)鍵問題。開發(fā)可靠的分布式文件系統(tǒng)（DFS）、能效優(yōu)化的存儲(chǔ)、計(jì)算融入存儲(chǔ)、大數(shù)據(jù)的去冗余及高效低成本的大數(shù)據(jù)存儲(chǔ)技術(shù)；突破分布式非關(guān)系型大數(shù)據(jù)管理與處理技術(shù)，異構(gòu)數(shù)據(jù)的數(shù)據(jù)融合技術(shù)，數(shù)據(jù)組織技術(shù)，研究大數(shù)據(jù)建模技術(shù)；突破大數(shù)據(jù)索引技術(shù)；突破大數(shù)據(jù)移動(dòng)、備份、復(fù)制等技術(shù)；開發(fā)大數(shù)據(jù)可視化技術(shù)。4. 大數(shù)據(jù)分析及挖掘技術(shù)大數(shù)據(jù)分析技術(shù)。改進(jìn)已有數(shù)據(jù)挖掘和機(jī)器學(xué)習(xí)技術(shù)；開發(fā)數(shù)據(jù)網(wǎng)絡(luò)挖掘、特異群組挖掘、圖挖掘等新型數(shù)據(jù)挖掘技術(shù)；突破基于對(duì)象的數(shù)據(jù)連接、相似性連接等大數(shù)據(jù)融合技術(shù)；突破用戶興趣分析、網(wǎng)絡(luò)行為分析、情感語義分析等面向領(lǐng)域的大數(shù)據(jù)挖掘技術(shù)。（二） 系統(tǒng)網(wǎng)絡(luò)結(jié)構(gòu)1. 系統(tǒng)需求分析由于近年

18、來互聯(lián)網(wǎng)上計(jì)算數(shù)據(jù)的總量呈爆炸式增長(zhǎng)，據(jù)不完全統(tǒng)計(jì)，僅2010年初到現(xiàn)在，互聯(lián)網(wǎng)上的數(shù)據(jù)傳輸量就達(dá)到175EB，不到一年的數(shù)據(jù)量超過了過去9年的數(shù)據(jù)量總量。按照需求規(guī)劃的1860家媒體數(shù)據(jù)量也是相當(dāng)龐大的，所以監(jiān)測(cè)系統(tǒng)必須要具備采集、存儲(chǔ)、分析互聯(lián)網(wǎng)媒體中海量數(shù)據(jù)的能力，而且產(chǎn)品還對(duì)數(shù)據(jù)采集周期有一定要求，負(fù)責(zé)采集數(shù)據(jù)的爬蟲系統(tǒng)需要具備非常高的抓取效率。系統(tǒng)將來需要處理的數(shù)據(jù)量肯定將會(huì)越來越多，所以在設(shè)計(jì)整個(gè)系統(tǒng)架構(gòu)時(shí)，需要充分的考慮系統(tǒng)各個(gè)模塊（主要是采集、存儲(chǔ)、分析）的擴(kuò)展性，采用分布式集群設(shè)計(jì)。2. 系統(tǒng)拓?fù)浞桨冈O(shè)計(jì)網(wǎng)絡(luò)采用星型網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu),并采用分層方式設(shè)計(jì)。簡(jiǎn)化網(wǎng)絡(luò)結(jié)構(gòu)，提高數(shù)據(jù)傳輸

19、效率。網(wǎng)絡(luò)核心交換到服務(wù)器，形成千M到千M傳輸，網(wǎng)絡(luò)接入層設(shè)計(jì)、內(nèi)部網(wǎng)絡(luò)服務(wù)。網(wǎng)絡(luò)核心采用一臺(tái)華為 的H3C S5024E核心交換機(jī)。交換機(jī)提供1000M以太網(wǎng)端口，與網(wǎng)絡(luò)的其他部分連接，組成1000M主干網(wǎng)絡(luò)，為了保證整個(gè)網(wǎng)絡(luò)的可靠性，核心交換機(jī)配置冗余引擎和雙電源。Internet數(shù)據(jù)首先通過防火墻過慮進(jìn)入二層交換機(jī)，經(jīng)過前端軟防火墻的策略檢測(cè)，最終到達(dá)服務(wù)器，并訪問資源。服務(wù)器集群內(nèi)包括兩臺(tái)蜘蛛服務(wù)器，三臺(tái)分布式數(shù)據(jù)存儲(chǔ)和分析服務(wù)器，一臺(tái)數(shù)據(jù)中心服務(wù)器，一臺(tái)數(shù)據(jù)備份服務(wù)器（與數(shù)據(jù)中心服務(wù)器以熱備方式工作，此結(jié)構(gòu)為冗余設(shè)計(jì)，在數(shù)據(jù)中心出現(xiàn)問題時(shí)，可由交換機(jī)自動(dòng)將數(shù)據(jù)切換至備份服務(wù)器。），一

20、臺(tái)管理服務(wù)器。服務(wù)器全部采用成熟的企業(yè)版linux 系統(tǒng)，免費(fèi)快速安全，系統(tǒng)對(duì)用戶數(shù)據(jù)、資料的安全性，以及網(wǎng)絡(luò)帶寬都要比較高，網(wǎng)絡(luò)的負(fù)載能力強(qiáng)，存儲(chǔ)空間大，前面準(zhǔn)備采用asa 5540，對(duì)一些非法用戶入侵限制，訪問規(guī)則，對(duì)數(shù)據(jù)包的檢測(cè)過濾。圖 2 系統(tǒng)拓?fù)鋱D3. 系統(tǒng)流量設(shè)計(jì)方案根據(jù)我們的經(jīng)驗(yàn)，在10M網(wǎng)絡(luò)帶寬環(huán)境下，系統(tǒng)每小時(shí)最多可以采集大約5萬個(gè)網(wǎng)頁，這只是最理想的狀態(tài)，因?yàn)閷?duì)帶寬流量的消耗主要包括檢查新的網(wǎng)頁內(nèi)容和對(duì)正文頁的抓取兩部分，為了讓系統(tǒng)能夠保證滿足一定的時(shí)效性，蜘蛛程序需要不斷的訪問目標(biāo)網(wǎng)頁來確認(rèn)是否有新的文章更新，而且每次訪問不一定能夠帶回來新的文章，大多數(shù)是重復(fù)的，這對(duì)帶寬

21、的消耗量其實(shí)是非常巨大的。要使系統(tǒng)即能滿足數(shù)據(jù)的全面性，又能達(dá)到一定時(shí)效性，僅僅依靠幾臺(tái)爬蟲服務(wù)器和幾十兆的帶寬資源是遠(yuǎn)遠(yuǎn)無法滿足需求的。九次方明易在國內(nèi)外多個(gè)地區(qū)的IDC機(jī)房部署了服務(wù)器集群，目前的服務(wù)器總數(shù)量已達(dá)到2000多臺(tái)，專門用于數(shù)據(jù)采集的服務(wù)器大約為1500臺(tái)，各機(jī)房擁有的總帶寬出口量大約在2G bit/s，充分保證了對(duì)互聯(lián)網(wǎng)海量數(shù)據(jù)的采集、存儲(chǔ)、分析能力。目前系統(tǒng)每天能夠采集到大約500萬條信息，每條信息能夠在20分鐘之內(nèi)完成存儲(chǔ)、索引和分析過程并呈現(xiàn)給用戶。安全中心可以在本地?cái)?shù)據(jù)中心部署一定量的服務(wù)器和帶寬資源，保證對(duì)幾家重點(diǎn)媒體的數(shù)據(jù)采集能力，其他媒體的數(shù)據(jù)采集可以由九次方的

22、服務(wù)器集群負(fù)責(zé)，采集過來的數(shù)據(jù)進(jìn)行簡(jiǎn)單過濾處理后傳送到安全中心的IDC，或者由客戶定時(shí)自取，九次方提供各類數(shù)據(jù)API，數(shù)據(jù)存儲(chǔ)和數(shù)據(jù)分析都在安全中心的IDC中處理。九次方為用戶提供的及時(shí)、全面的數(shù)據(jù)采集服務(wù)，安全中心無需自己搭設(shè)過多的數(shù)據(jù)采集點(diǎn)，只需要從九次方的數(shù)據(jù)通道獲得即可，這不但可以解決數(shù)據(jù)隱私的問題，而且可以大大降低了項(xiàng)目的實(shí)施成本。（三） 系統(tǒng)基礎(chǔ)組件結(jié)構(gòu)系統(tǒng)基礎(chǔ)組件選用九次方自主研發(fā)的關(guān)鍵組件，與成熟的開源技術(shù)相結(jié)合，最大程度的降低了系統(tǒng)通用中間件的成本。圖 3 系統(tǒng)基礎(chǔ)組件結(jié)構(gòu)示意圖（四） 系統(tǒng)技術(shù)架構(gòu)本工程采用主流成熟的開發(fā)框架和產(chǎn)品組件進(jìn)行開發(fā)，采用多層體系結(jié)構(gòu)來構(gòu)建符合標(biāo)準(zhǔn)

23、與管理規(guī)范體系、安全與運(yùn)行保障體系的高可用性系統(tǒng)。綜上，本項(xiàng)目開發(fā)的整體技術(shù)架構(gòu)如下：圖 4 大數(shù)據(jù)綜合應(yīng)用平臺(tái)總體技術(shù)架構(gòu)示意圖其中：針對(duì)數(shù)據(jù)源層的數(shù)據(jù)采集：需提供多種方式，以滿足吳中區(qū)政府各局級(jí)單位IT系統(tǒng)的特點(diǎn)，數(shù)據(jù)采集不限于數(shù)據(jù)文件的“推”與“拉”方式、web錄入與上傳方式、數(shù)據(jù)庫直接方式等；并滿足離線采集、實(shí)時(shí)采集等不同采集類型的需要；數(shù)據(jù)處理層：負(fù)責(zé)系統(tǒng)所有數(shù)據(jù)的處理工作，基于分布式服務(wù)框架，實(shí)現(xiàn)包括離線處理、實(shí)時(shí)處理、實(shí)時(shí)交互查詢、數(shù)據(jù)預(yù)處理等，完成數(shù)據(jù)的加工以及對(duì)外展現(xiàn)的服務(wù)；數(shù)據(jù)存儲(chǔ)層：負(fù)責(zé)結(jié)構(gòu)化和非結(jié)構(gòu)化的存儲(chǔ)，存儲(chǔ)方式包括不限于HDFS、ORACLE、MYSQL（或）、內(nèi)

24、存數(shù)據(jù)庫等，滿足不同的應(yīng)用場(chǎng)景需要；展現(xiàn)層：負(fù)責(zé)數(shù)據(jù)對(duì)外應(yīng)用的展現(xiàn)，由Web負(fù)載集群實(shí)現(xiàn)展現(xiàn)應(yīng)用。（五） 技術(shù)開發(fā)原則開放架構(gòu)新平臺(tái)要構(gòu)建開放架構(gòu)，系統(tǒng)將通過參數(shù)設(shè)置定制，形成新產(chǎn)品以適應(yīng)互聯(lián)網(wǎng)金融產(chǎn)品日新月異的發(fā)展，新產(chǎn)品上線將以插件化的方式，避免對(duì)老產(chǎn)品的影響。基礎(chǔ)平臺(tái)采用租用擴(kuò)展能力強(qiáng)、運(yùn)維能力強(qiáng)的云服務(wù)平臺(tái)模式，從而減少硬件設(shè)備投入，避免因容量擴(kuò)展迅速而頻繁進(jìn)行硬件設(shè)備的迭代。體驗(yàn)優(yōu)先用戶體驗(yàn)度將是平臺(tái)成敗之根本，將簡(jiǎn)潔清晰的用戶操作始終貫徹于平臺(tái)中的每個(gè)產(chǎn)品。移動(dòng)優(yōu)先開發(fā)執(zhí)行移動(dòng)優(yōu)先的策略，APP將覆蓋我們平臺(tái)的所有功能，但盡可能減少營(yíng)銷信息，確?？蛻趔w驗(yàn)。PC端主要是作為產(chǎn)品超市，

25、下載平臺(tái)，宣傳媒介，功能主要是服務(wù)企業(yè)客戶。安全獨(dú)立新平臺(tái)將釆取開發(fā)廠商和安全廠商相對(duì)獨(dú)立，以確定平臺(tái)能達(dá)到設(shè)計(jì)的安全水平，同時(shí)跟進(jìn)實(shí)時(shí)監(jiān)測(cè)，確保運(yùn)行安全。第五章 建設(shè)進(jìn)度一、 建設(shè)條件落實(shí)情況本項(xiàng)目聯(lián)合申報(bào)單位九次方，成立至今已經(jīng)成為中國最大的大數(shù)據(jù)資產(chǎn)運(yùn)營(yíng)商，擁有大數(shù)據(jù)挖掘、數(shù)據(jù)清洗、企業(yè)數(shù)據(jù)采集、數(shù)據(jù)建模、數(shù)據(jù)標(biāo)準(zhǔn)頂層設(shè)計(jì)、數(shù)據(jù)可視化等成熟技術(shù)和部分大數(shù)據(jù)相關(guān)項(xiàng)目建設(shè)運(yùn)營(yíng)、管理經(jīng)驗(yàn)、質(zhì)量控制、風(fēng)險(xiǎn)控制等經(jīng)驗(yàn)，而且公司的專業(yè)人才涉及大數(shù)據(jù)產(chǎn)業(yè)全產(chǎn)業(yè)鏈，同時(shí)公司融資能力在國內(nèi)大數(shù)據(jù)領(lǐng)域排名領(lǐng)先。因此，蘇州旅游服務(wù)大數(shù)據(jù)平臺(tái)的建設(shè)具備人才、技術(shù)、資金等諸多方面的扎實(shí)保障。本項(xiàng)目為新建項(xiàng)目，項(xiàng)目

26、總投資3000萬元人民幣，主要建設(shè)內(nèi)容：旅游路線信息、旅游信息查詢、旅游收入統(tǒng)計(jì)、旅游大數(shù)據(jù)預(yù)測(cè)等四大模塊等內(nèi)容。二、 建設(shè)工期和進(jìn)度安排本期旅游及商務(wù)工程實(shí)施主要工作有：制定旅游業(yè)務(wù)的信息化標(biāo)準(zhǔn)規(guī)范、各應(yīng)用子系統(tǒng)建設(shè)、設(shè)備采購、網(wǎng)絡(luò)、計(jì)算、存儲(chǔ)、安全等系統(tǒng)運(yùn)行環(huán)境建設(shè)、應(yīng)用系統(tǒng)安裝部署、組織測(cè)試、試運(yùn)行、驗(yàn)收。初步的工程進(jìn)度計(jì)劃如下表。雙月計(jì)算1234567891011121制定有關(guān)標(biāo)準(zhǔn)規(guī)范2數(shù)據(jù)中心及數(shù)據(jù)交換平臺(tái)建設(shè)3安裝部署應(yīng)用系統(tǒng)4組織測(cè)試5培訓(xùn)、試運(yùn)行、驗(yàn)收6竣工驗(yàn)收項(xiàng)目實(shí)施進(jìn)度計(jì)劃表第六章 項(xiàng)目實(shí)施管理一、 領(lǐng)導(dǎo)和管理機(jī)構(gòu)應(yīng)用平臺(tái)作為支撐大數(shù)據(jù)應(yīng)用的基礎(chǔ)平臺(tái)，由政府部門牽頭，完成各

27、委辦局應(yīng)用數(shù)據(jù)資源的梳理和目錄編制工作。為了保障應(yīng)用平臺(tái)的順利建設(shè)，成立項(xiàng)目建設(shè)領(lǐng)導(dǎo)小組。領(lǐng)導(dǎo)小組全權(quán)負(fù)責(zé)應(yīng)用平臺(tái)建設(shè)相關(guān)的規(guī)劃指導(dǎo)、統(tǒng)籌協(xié)調(diào)與建設(shè)管理工作。二、 項(xiàng)目實(shí)施機(jī)構(gòu)為保障項(xiàng)目順利實(shí)施，項(xiàng)目組織結(jié)構(gòu)采用項(xiàng)目領(lǐng)導(dǎo)層、項(xiàng)目管理層以及項(xiàng)目工程實(shí)施層的組織方式，采用分層次的協(xié)調(diào)管理和項(xiàng)目經(jīng)理負(fù)責(zé)制的管理體系來實(shí)現(xiàn)組織保證。明確各機(jī)構(gòu)職責(zé)，建立工程開發(fā)實(shí)施過程中的各項(xiàng)制度，確保工程圓滿完工。應(yīng)用平臺(tái)城市大數(shù)據(jù)綜合應(yīng)用平臺(tái)項(xiàng)目的組織機(jī)構(gòu)圖1、項(xiàng)目實(shí)施小組負(fù)責(zé)整個(gè)項(xiàng)目開發(fā)實(shí)施過程中的最高決策和總體協(xié)調(diào)工作。它的職責(zé)是：批準(zhǔn)該項(xiàng)目總體設(shè)計(jì)方案和實(shí)施進(jìn)度計(jì)劃；進(jìn)行重大投資決策；負(fù)責(zé)項(xiàng)目實(shí)施關(guān)鍵問題的戰(zhàn)

28、略指導(dǎo)；對(duì)項(xiàng)目管理層不能達(dá)到一致的意見進(jìn)行決策；批準(zhǔn)項(xiàng)目的重大變更；協(xié)調(diào)工程相關(guān)的外部環(huán)境。2、需求調(diào)研組負(fù)責(zé)整個(gè)項(xiàng)目前期的需求調(diào)研工作，對(duì)各政府部門業(yè)務(wù)及其計(jì)算機(jī)應(yīng)用現(xiàn)狀進(jìn)行全面調(diào)研，在反復(fù)研討的基礎(chǔ)上出具調(diào)研報(bào)告，為后續(xù)的設(shè)計(jì)開發(fā)工作奠定基礎(chǔ)。3、分析設(shè)計(jì)組負(fù)責(zé)整個(gè)項(xiàng)目的系統(tǒng)規(guī)劃、總體設(shè)計(jì)、總體技術(shù)方案的工作。它的職責(zé)是：根據(jù)工程建設(shè)的總體目標(biāo)、建設(shè)規(guī)模與內(nèi)容的要求，進(jìn)行總體方案的規(guī)劃與設(shè)計(jì)，編制工程開發(fā)實(shí)施的指導(dǎo)性文件，并在工程開發(fā)實(shí)施過程中，進(jìn)行必要的咨詢與支持。4、平臺(tái)建設(shè)組在項(xiàng)目實(shí)施小組的統(tǒng)一領(lǐng)導(dǎo)組織下，負(fù)責(zé)完成應(yīng)用平臺(tái)城市大數(shù)據(jù)綜合應(yīng)用平臺(tái)的開發(fā)任務(wù)。5、質(zhì)量保障組對(duì)于整個(gè)項(xiàng)目的

29、系統(tǒng)集成、軟件開發(fā)、系統(tǒng)實(shí)施等進(jìn)行質(zhì)量監(jiān)督、測(cè)試檢查、用戶測(cè)試、階段評(píng)審等工作，提交測(cè)試報(bào)告和評(píng)價(jià)報(bào)告；對(duì)工程進(jìn)度進(jìn)行控制，組織系統(tǒng)測(cè)試驗(yàn)收。6、技術(shù)咨詢與培訓(xùn)組將應(yīng)用軟件系統(tǒng)轉(zhuǎn)換成實(shí)際運(yùn)行的系統(tǒng)。開展有關(guān)業(yè)務(wù)規(guī)程、業(yè)務(wù)管理、應(yīng)用操作、系統(tǒng)操作、環(huán)境建設(shè)、應(yīng)用維護(hù)等方面的培訓(xùn)，輔助有關(guān)應(yīng)用安裝、系統(tǒng)調(diào)試、數(shù)據(jù)轉(zhuǎn)換、現(xiàn)場(chǎng)指導(dǎo)等方面的工作。人員組成：熟悉應(yīng)用軟件系統(tǒng)需求、功能和操作的業(yè)務(wù)人員或測(cè)試人員；對(duì)網(wǎng)絡(luò)計(jì)算機(jī)環(huán)境、應(yīng)用軟件系統(tǒng)、用戶培訓(xùn)有實(shí)際實(shí)施經(jīng)驗(yàn)的技術(shù)人員。7、運(yùn)維組負(fù)責(zé)對(duì)網(wǎng)絡(luò)平臺(tái)系統(tǒng)和應(yīng)用軟件系統(tǒng)，提供系統(tǒng)維護(hù)、系統(tǒng)升級(jí)、技術(shù)支持、咨詢答疑等售后服務(wù)。由相應(yīng)的系統(tǒng)集成商和應(yīng)用開發(fā)商承擔(dān)

30、。三、 項(xiàng)目管理模式1、項(xiàng)目會(huì)議制度項(xiàng)目組內(nèi)部例會(huì)：承建方項(xiàng)目組內(nèi)部定期按計(jì)劃舉行項(xiàng)目?jī)?nèi)部例會(huì)。由項(xiàng)目經(jīng)理召集，項(xiàng)目主要負(fù)責(zé)人員參加，視情況項(xiàng)目其他有關(guān)人員也可參加。內(nèi)部例會(huì)定期舉行。專題討論會(huì)：業(yè)主和承建方項(xiàng)目組主要負(fù)責(zé)人均可召集專題討論會(huì)，就某些專門問題進(jìn)行討論，取得一致。專題討論會(huì)不定期舉行。2、書面信息溝通制度承建方每周定期向業(yè)主、項(xiàng)目承擔(dān)方和項(xiàng)目監(jiān)理方提交正式項(xiàng)目進(jìn)展報(bào)告；承建方每周定期向公司領(lǐng)導(dǎo)以書面或正式會(huì)議的方式匯報(bào)項(xiàng)目進(jìn)展情況。承建方項(xiàng)目經(jīng)理根據(jù)項(xiàng)目建設(shè)過程中遇到的各種問題，隨時(shí)通過電話、傳真或電子郵件等方式與業(yè)主、監(jiān)理方、專家組進(jìn)行溝通和匯報(bào)。3、重大事項(xiàng)的決策項(xiàng)目重大事項(xiàng)

31、是指項(xiàng)目范圍的重大變更，或項(xiàng)目實(shí)施過程中的重大問題，比如項(xiàng)目重大延期、項(xiàng)目重大的商務(wù)問題等等。此類重大事項(xiàng)一般情況下可采用書面報(bào)告的形式進(jìn)行溝通和協(xié)調(diào)，必要的時(shí)候采取專題會(huì)議的形式進(jìn)行決策，會(huì)議由監(jiān)理方召集，參加人員包括：業(yè)主、項(xiàng)目承建方、監(jiān)理方，會(huì)議最終決定以三方書面簽字的方式確定。四、 運(yùn)行維護(hù)機(jī)構(gòu)1、運(yùn)維機(jī)構(gòu)系統(tǒng)建成投入運(yùn)行后，需要一支穩(wěn)定的技術(shù)隊(duì)伍進(jìn)行日常維護(hù)，保障系統(tǒng)的長(zhǎng)期正常運(yùn)行，與廠商技術(shù)部門互相配合，負(fù)責(zé)平臺(tái)系統(tǒng)的運(yùn)維、實(shí)施、配置以及新需求的響應(yīng)工作等。將從應(yīng)用平臺(tái)區(qū)的信息化技術(shù)隊(duì)伍中組建一支高素質(zhì)技術(shù)人員組成的系統(tǒng)維護(hù)隊(duì)伍，成立系統(tǒng)運(yùn)行維護(hù)機(jī)構(gòu)，專門負(fù)責(zé)各業(yè)務(wù)系統(tǒng)的日常維護(hù)。

32、2、運(yùn)維方案本項(xiàng)目的運(yùn)維管理系統(tǒng)建設(shè)是保障應(yīng)用平臺(tái)城市大數(shù)據(jù)綜合應(yīng)用平臺(tái)正常運(yùn)行和服務(wù)的基礎(chǔ)，為此，建立運(yùn)維管理以及多個(gè)專項(xiàng)執(zhí)行小組來負(fù)責(zé)應(yīng)用平臺(tái)城市大數(shù)據(jù)綜合應(yīng)用平臺(tái)的運(yùn)維，并制定了一系列運(yùn)維管理相關(guān)的制度來保障本項(xiàng)目的高效運(yùn)維。從具體運(yùn)維內(nèi)容來看，本項(xiàng)目中涉及的運(yùn)維內(nèi)容主要包括三種類型：Ø 托管運(yùn)維對(duì)于備份機(jī)房、網(wǎng)絡(luò)環(huán)境及其配套設(shè)施的運(yùn)維，采用托管方式運(yùn)維。Ø 代維方式軟件和網(wǎng)絡(luò)安全采用代維方式，通過選擇合適的專業(yè)服務(wù)公司來提高運(yùn)維服務(wù)的水平和效率。Ø 自維方式核心業(yè)務(wù)系統(tǒng)通過建立、培養(yǎng)自己的技術(shù)運(yùn)維團(tuán)隊(duì)來進(jìn)行自行維護(hù)。五、 相關(guān)管理制度應(yīng)用平臺(tái)區(qū)信息化部門應(yīng)

33、按照國家信息安全等級(jí)保護(hù)指南的要求進(jìn)行自身的資產(chǎn)界定歸類、安全域劃分、風(fēng)險(xiǎn)評(píng)估。制定數(shù)據(jù)更新制度、設(shè)備管理制度、安全保密制度、應(yīng)急管理制度、崗位責(zé)任制度和人員培訓(xùn)制度。1、數(shù)據(jù)更新制度應(yīng)用平臺(tái)的建設(shè)涉及多個(gè)部門,是一個(gè)長(zhǎng)期的過程，必需建立完善的數(shù)據(jù)更新制度以保證相關(guān)資源數(shù)據(jù)的有效性、及時(shí)性和完整性，通過政府領(lǐng)導(dǎo)的統(tǒng)籌協(xié)調(diào)，明確各個(gè)部門的職責(zé)，建立完整高效的數(shù)據(jù)更新制度。2、安全保密制度安全保密制度分計(jì)算機(jī)安全防護(hù)制度、日志記錄制度、密級(jí)管理制度、人員保密制度。計(jì)算機(jī)安全防護(hù)制度：計(jì)算機(jī)系統(tǒng)安全管理應(yīng)以防為主，從建立計(jì)算機(jī)病毒防范、強(qiáng)化密碼管理、嚴(yán)格管理用戶權(quán)限三個(gè)方面建立經(jīng)常性的安全管理制度。

34、日志記錄制度：運(yùn)行日志是貫穿于系統(tǒng)運(yùn)行全過程的最重要環(huán)節(jié)，實(shí)行記錄、監(jiān)控、檢查，及時(shí)發(fā)現(xiàn)、解決運(yùn)行過程中出現(xiàn)的問題，把風(fēng)險(xiǎn)降到最低限度。密級(jí)管理制度：建立屬于單位或系統(tǒng)的秘密文件、資料和其它物品的制作、收發(fā)、傳遞、使用、復(fù)制、摘抄、保存和銷毀制度，由單位總負(fù)責(zé)人或副負(fù)責(zé)人委托專人執(zhí)行，采用電腦技術(shù)存取、處理、傳遞的單位密級(jí)信息由電腦部門負(fù)責(zé)保密的制度。人員保密制度：不準(zhǔn)在私人交往和通信中泄露系統(tǒng)秘密和網(wǎng)絡(luò)使用口令，不準(zhǔn)在公共場(chǎng)所談?wù)摽赡芪＜跋到y(tǒng)安全的秘密，不準(zhǔn)通過其他方式傳遞或散播所發(fā)現(xiàn)的系統(tǒng)運(yùn)行中的漏洞；工作人員發(fā)現(xiàn)系統(tǒng)秘密或口令已經(jīng)泄露或者可能泄露時(shí)，應(yīng)當(dāng)立即采取補(bǔ)救措施并及時(shí)報(bào)告總負(fù)責(zé)人

35、，總負(fù)責(zé)人接到報(bào)告，應(yīng)立即做出處理；如果由于個(gè)人行為泄密導(dǎo)致的系統(tǒng)破壞，追究個(gè)人的責(zé)任直至法律責(zé)任。3、應(yīng)急管理制度為了應(yīng)對(duì)項(xiàng)目中重要系統(tǒng)突發(fā)的故障，必須建立一套行之有效的應(yīng)急管理機(jī)制。相關(guān)部門應(yīng)急管理制度中應(yīng)包括：制定應(yīng)急計(jì)劃、進(jìn)行應(yīng)急訓(xùn)練。制定應(yīng)急計(jì)劃：針對(duì)項(xiàng)目中某個(gè)重大系統(tǒng)可能發(fā)生的事故和故障，建設(shè)管理單位應(yīng)當(dāng)預(yù)先制定系統(tǒng)應(yīng)急計(jì)劃，內(nèi)容包括：局部事故應(yīng)急計(jì)劃、大范圍事故應(yīng)急計(jì)劃和系統(tǒng)整體應(yīng)急計(jì)劃。各應(yīng)急計(jì)劃應(yīng)相互銜接、協(xié)調(diào)一致。進(jìn)行應(yīng)急訓(xùn)練：應(yīng)組織應(yīng)急演練和培訓(xùn)，做好精神、物質(zhì)、技術(shù)等方面的準(zhǔn)備，同時(shí)提高員工的防范意識(shí)和自助能力。4、崗位責(zé)任制建立和健全技術(shù)崗位責(zé)任制，明確各個(gè)崗位的職責(zé)

36、，并建立相應(yīng)的考核制度，將對(duì)實(shí)現(xiàn)科學(xué)監(jiān)督、建立正常的監(jiān)督秩序、提高監(jiān)督效率、更好地為系統(tǒng)服務(wù)有著重要作用。5、人員培訓(xùn)制度高新技術(shù)的使用對(duì)運(yùn)行管理人員在管理水平和能力上提出了更高的要求，以保障操作人員按規(guī)定正常操作。當(dāng)新的系統(tǒng)投入使用時(shí)，應(yīng)確保操作人員接受系統(tǒng)的培訓(xùn)，在確認(rèn)操作人員充分了解和掌握之后，才能正式上崗作業(yè)。人員培訓(xùn)具體應(yīng)包括以下幾部分內(nèi)容：1）對(duì)于系統(tǒng)的運(yùn)行維護(hù)人員進(jìn)行系統(tǒng)培訓(xùn)，務(wù)必使系統(tǒng)操作人員熟悉系統(tǒng)，掌握系統(tǒng)運(yùn)行的關(guān)鍵技術(shù)。2）定期對(duì)系統(tǒng)維護(hù)和操作人員熟悉系統(tǒng)，掌握系統(tǒng)運(yùn)行的關(guān)鍵技術(shù)。3）系統(tǒng)進(jìn)行升級(jí)、改進(jìn)后要及時(shí)對(duì)有關(guān)人員就相關(guān)內(nèi)容進(jìn)行培訓(xùn)。4）對(duì)系統(tǒng)維護(hù)、操作人員的培訓(xùn)不

37、能僅局限于局部，在掌握與自己密切相關(guān)部門的同時(shí)也要對(duì)整個(gè)項(xiàng)目有個(gè)清楚的認(rèn)識(shí)。第七章 環(huán)境污染防治一、 適用標(biāo)準(zhǔn)根據(jù)中華人民共和國環(huán)境保護(hù)法等有關(guān)法規(guī)，在項(xiàng)目實(shí)施過程中對(duì)排出的污染物應(yīng)采取必要的措施，使之達(dá)到國家規(guī)定的標(biāo)準(zhǔn)。采用的環(huán)境保護(hù)標(biāo)準(zhǔn)為：1、中華人民共和國環(huán)境保護(hù)法（1989年12月）2、中華人民共和國環(huán)境評(píng)價(jià)法（2002年10月）3、中華人民共和國大氣污染法（2000年04月）4、中華人民共和國環(huán)境噪聲污染法（1996年10月）5、中華人民共和國清潔生產(chǎn)促進(jìn)法（2002年06月）6、中華人民共和國水法（1988年01月）7、中華人民共和國節(jié)約能源法（1997年11月）8、產(chǎn)業(yè)結(jié)構(gòu)調(diào)整指

38、導(dǎo)目錄(2011年本)2013（修訂版）9、建設(shè)項(xiàng)目環(huán)境保護(hù)條例（1988年11月）二、 建設(shè)期環(huán)境影響及治理措施該項(xiàng)目施工期只有少量噪音，不會(huì)給附近造成環(huán)境影響。1、噪聲環(huán)境影響分析和防治對(duì)策噪聲是施工過程中使用沖擊鉆、電錘等噪聲的產(chǎn)生源。為了減輕施工噪聲對(duì)周圍環(huán)境的影響，建議采取以下措施：加強(qiáng)施工管理，合理安排施工作業(yè)時(shí)間，嚴(yán)格按照施工噪聲管理的有關(guān)規(guī)定執(zhí)行，嚴(yán)禁夜間進(jìn)行噪聲施工作業(yè)。2、大氣環(huán)境影響分析和防治對(duì)策該工程在實(shí)施過程中，大氣污染物主要是廢氣，施工過程中廢氣主要來源于施工隊(duì)伍設(shè)備安裝焊接產(chǎn)生的廢氣。上述過程中產(chǎn)生的廢氣很少不會(huì)造成大氣環(huán)境污染。3、水環(huán)境影響分析和防治對(duì)策施工隊(duì)

39、伍的生活活動(dòng)會(huì)產(chǎn)生少量的生活污水，包括洗滌廢水和沖廁水。本項(xiàng)目廢污水水量極小，施工期廢水采取相應(yīng)措施有效控制污水中污染物的產(chǎn)生量。4、固體廢棄物環(huán)境影響分析和防治對(duì)策施工期間將有一定數(shù)量的廢棄材料，對(duì)施工現(xiàn)場(chǎng)要及時(shí)進(jìn)行清理，生活垃圾要及時(shí)清運(yùn)，防止其因堆放而產(chǎn)生污染。三、 運(yùn)營(yíng)期環(huán)境影響及治理措施1、主要污染物本項(xiàng)目投入使用后主要污染物為生活污水、生活垃圾。2、主要應(yīng)對(duì)措施（1）生活污水主要是衛(wèi)生間污水，本項(xiàng)目正常運(yùn)營(yíng)后將產(chǎn)生部分生活污水。生活污水排放量按給水量的80%計(jì)算，經(jīng)下水道，排入市政管網(wǎng)，達(dá)到三級(jí)排放要求。（2）生活垃圾定期處理，設(shè)置合理數(shù)量的垃圾收集器及時(shí)清運(yùn)。四、 環(huán)境影響評(píng)價(jià)結(jié)

40、論綜合以上分析，由于在本項(xiàng)目的建設(shè)和運(yùn)營(yíng)中，充分考慮了各類可能產(chǎn)生的環(huán)境污染，并采取了比較完善的防護(hù)措施，從整體上做到了預(yù)防與治理并重，能夠滿足環(huán)境保護(hù)和可持續(xù)發(fā)展的要求。第八章 投資估算及明細(xì)項(xiàng)目建設(shè)總投資預(yù)算為人民幣3000萬元。一、 分項(xiàng)投資估算項(xiàng)目名稱開發(fā)內(nèi)容估算（萬元）估算小計(jì)（萬元）大數(shù)據(jù)應(yīng)用平臺(tái)蘇州旅游大數(shù)據(jù)平臺(tái)旅游景點(diǎn)查詢平臺(tái)1001100旅行社查詢平臺(tái)100賓館酒店查詢平臺(tái)100精選旅游線路查詢平臺(tái)100旅游信息大數(shù)據(jù)平臺(tái)100國內(nèi)外旅游統(tǒng)計(jì)平臺(tái)100景區(qū)吞吐量大數(shù)據(jù)平臺(tái)100城市旅游大數(shù)據(jù)預(yù)測(cè)平臺(tái)100大數(shù)據(jù)旅游可視化平臺(tái)100平時(shí)應(yīng)急平臺(tái)100戰(zhàn)時(shí)應(yīng)急平臺(tái)100大數(shù)據(jù)接口

41、開發(fā)與共享交換平臺(tái)對(duì)接前置機(jī)/系統(tǒng)接口/web表單及上傳/數(shù)據(jù)庫直連15*20300大數(shù)據(jù)清洗費(fèi)用清洗10*10500轉(zhuǎn)換10*10映射10*10數(shù)據(jù)校驗(yàn)10*20大數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范總體標(biāo)準(zhǔn)標(biāo)準(zhǔn)化指南20500總體技術(shù)要求15應(yīng)用標(biāo)準(zhǔn)信息分類與代碼標(biāo)準(zhǔn)40元數(shù)據(jù)標(biāo)準(zhǔn)40數(shù)據(jù)字典40數(shù)據(jù)交換格式標(biāo)準(zhǔn)40數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)公開標(biāo)準(zhǔn)40數(shù)據(jù)交易標(biāo)準(zhǔn)50應(yīng)用支撐標(biāo)準(zhǔn)數(shù)據(jù)共享交換接口標(biāo)準(zhǔn)50信息安全標(biāo)準(zhǔn)數(shù)據(jù)共享交換平臺(tái)認(rèn)證、授權(quán)和訪問控制規(guī)范50管理標(biāo)準(zhǔn)數(shù)據(jù)質(zhì)量控制規(guī)范50運(yùn)行管理規(guī)范50數(shù)據(jù)采集管理規(guī)范15服務(wù)器主節(jié)點(diǎn)服務(wù)器、輔節(jié)點(diǎn)服務(wù)器、數(shù)據(jù)中心服務(wù)器、備份服務(wù)器、管理前端服務(wù)器、產(chǎn)品前端服務(wù)器、核心交換機(jī)、

42、存儲(chǔ)、防火墻200200操作系統(tǒng)windows_server_2008_r2 datacenter100100數(shù)據(jù)庫oracle 11g100100應(yīng)用示范蘇州旅游大數(shù)據(jù)網(wǎng)站按方案所述100200蘇州旅游大數(shù)據(jù)APP同上50蘇州旅游大數(shù)據(jù)終端同上50合計(jì)3000二、 分年度投資計(jì)劃 年份投資金額2016年1000萬2017年1000萬2018年1000萬總投資金額3000萬第九章 項(xiàng)目承擔(dān)單位概況江蘇太湖九次方大數(shù)據(jù)信息技術(shù)服務(wù)有限公司是江蘇省蘇州市吳中區(qū)與北京九次方大數(shù)據(jù)公司合作設(shè)立的國有參股合資企業(yè)。作為中國領(lǐng)先的大數(shù)據(jù)服務(wù)商，江蘇太湖九次方大數(shù)據(jù)公司秉承“貢獻(xiàn)數(shù)據(jù)智慧，釋放數(shù)據(jù)價(jià)值”的發(fā)

43、展理念，立足吳中與蘇州，輻射江蘇，致力于政府?dāng)?shù)據(jù)的資源整合及成果應(yīng)用。公司目前業(yè)務(wù)為負(fù)責(zé)政府公開數(shù)據(jù)的對(duì)接、清洗、建模、分析及應(yīng)用； 運(yùn)用數(shù)據(jù)及技術(shù)優(yōu)勢(shì)，協(xié)助政府搭建區(qū)域性征信管理平臺(tái)；開展征信等數(shù)據(jù)應(yīng)用服務(wù)。北京九次方大數(shù)據(jù)公司總部位于北京中關(guān)村，擁有大數(shù)據(jù)挖掘技術(shù)、數(shù)據(jù)清洗、企業(yè)數(shù)據(jù)采集、數(shù)據(jù)建模、數(shù)據(jù)標(biāo)準(zhǔn)頂層設(shè)計(jì)、數(shù)據(jù)可視化技術(shù)方面的大數(shù)據(jù)全產(chǎn)業(yè)鏈人才，公司大數(shù)據(jù)安全體系已經(jīng)達(dá)到公安部等級(jí)保護(hù)測(cè)試的應(yīng)用標(biāo)準(zhǔn)，目前專利及軟著等專業(yè)資質(zhì)已達(dá)30余項(xiàng)。第十章 經(jīng)濟(jì)效益和社會(huì)效益分析一、 經(jīng)濟(jì)效益分析現(xiàn)代市場(chǎng)營(yíng)銷觀念認(rèn)為,以往僅以滿足顧客需求為目標(biāo)的市場(chǎng)經(jīng)營(yíng)模式,已不能適應(yīng)并推動(dòng)當(dāng)代經(jīng)濟(jì)高速發(fā)展

44、的需求,應(yīng)逐步將經(jīng)營(yíng)重點(diǎn)從“尋覓需求”轉(zhuǎn)向“創(chuàng)造需求”,主動(dòng)引導(dǎo)顧客的消費(fèi)取向,開辟新的市場(chǎng)需求。這其中一個(gè)重要方面就是在旅游發(fā)展中借助文化因子,進(jìn)行文化營(yíng)銷,創(chuàng)造新的市場(chǎng)需求,為旅游業(yè)的發(fā)展開創(chuàng)新格局。利用旅游服務(wù)大數(shù)據(jù)平臺(tái)在旅游文化開發(fā)中,緊扣當(dāng)?shù)氐纳铄渑c博大,加強(qiáng)對(duì)其文化底蘊(yùn)的正確認(rèn)識(shí)與合理開發(fā), 旅游服務(wù)大數(shù)據(jù)平臺(tái)不僅將文化作為旅游的營(yíng)銷媒介與包裝手段,也將文化滲透到旅游活動(dòng)項(xiàng)目、服務(wù)、設(shè)施、線路設(shè)計(jì)等方方面面,以文化為營(yíng)銷主體,引領(lǐng)當(dāng)?shù)芈糜蔚男滦枨?，同時(shí),也將帶動(dòng)周邊地區(qū)旅游業(yè)的發(fā)展。二、 社會(huì)效益分析旅游業(yè)具有文化性與經(jīng)濟(jì)性的雙重屬性。這一特征要求在發(fā)展旅游業(yè)的過程中,既要發(fā)展旅游

45、經(jīng)濟(jì),創(chuàng)造經(jīng)濟(jì)效益,也要重視旅游文化的開發(fā)建設(shè),以促進(jìn)旅游經(jīng)濟(jì)與文化的協(xié)調(diào)發(fā)展。然而隨著旅游業(yè)在其國民經(jīng)濟(jì)中支柱地位的逐步確立,一些市、州、地區(qū)為迎合經(jīng)濟(jì)發(fā)展和市場(chǎng)需求,大力興辦諸如旅游節(jié)慶、宗教祭祀、民俗歌舞、人造景觀等項(xiàng)目。固然,其旅游收入有所增長(zhǎng),但其旅游活動(dòng)被商品化,內(nèi)容單調(diào)、貧乏甚至粗略,使旅游資源失去其應(yīng)有的文化品位。長(zhǎng)此以往,旅游活動(dòng)的文化屬性逐步被經(jīng)濟(jì)屬性誤導(dǎo)并掩蓋,致使旅游資源的文化價(jià)值被降低甚至忽略,繼而導(dǎo)致資源吸引力下降,客源減少,極大阻礙了旅游業(yè)更大的發(fā)展。通過蘇州旅游服務(wù)大數(shù)據(jù)平臺(tái)對(duì)蘇州旅游文化價(jià)值開發(fā),通過文化旅游的方式,原汁原味的展示文化積淀,充分發(fā)揮當(dāng)?shù)匚幕膬?yōu)

46、勢(shì)和魅力,避免只強(qiáng)調(diào)經(jīng)濟(jì)效益而忽視旅游文化的開發(fā)傾向。同時(shí),也科學(xué)、準(zhǔn)確地引導(dǎo)新的市場(chǎng)需求,避免重視其文化性而忽視其經(jīng)濟(jì)性的營(yíng)銷偏差。這樣,將旅游的文化性和經(jīng)濟(jì)性合理協(xié)調(diào),全面開發(fā)其文化內(nèi)涵。三、 社會(huì)影響分析縱觀目前的旅游大數(shù)據(jù)建設(shè)，智慧旅游景區(qū)遍地開花，各自為政。由于做決策的領(lǐng)導(dǎo)對(duì)互聯(lián)網(wǎng)或移動(dòng)互聯(lián)網(wǎng)的認(rèn)識(shí)還不夠，對(duì)大數(shù)據(jù)的概念了解的不夠深度，出現(xiàn)很多盲目的決策，技術(shù)上的一些投入反而起不到很好的效果，這樣就會(huì)導(dǎo)致客戶端死了一大批，大量的人力、物力、財(cái)力投入進(jìn)去，卻起不了傳播和營(yíng)銷的效果；第二個(gè)問題，開發(fā)者并沒有考慮站在一個(gè)真正的旅行者的人的角度上去考慮，只是想到了盈利如何推送廣告，但是并沒有

47、滿足游客的要求，因而走進(jìn)了一個(gè)誤區(qū)，其實(shí)游客才是真正實(shí)現(xiàn)大數(shù)據(jù)旅游的核心價(jià)值。蘇州旅游大數(shù)據(jù)服務(wù)是最有帶動(dòng)性和說服性的，將來會(huì)成為一個(gè)城市宣傳的主要名片，以旅游作為一個(gè)先行者，而且旅游大數(shù)據(jù)分析這塊的發(fā)展，會(huì)影響到所有行業(yè)對(duì)數(shù)據(jù)分析的應(yīng)用。在這個(gè)方面運(yùn)用好了，在很多行業(yè)的普及會(huì)變的更多，也會(huì)帶動(dòng)整個(gè)移動(dòng)端的一些軟件開發(fā)和市場(chǎng)的普及，對(duì)它從市場(chǎng)的角度可能有這兩方面的發(fā)展。對(duì)政府決策來講，最大的轉(zhuǎn)變就是通過這種手段和一定的時(shí)間，會(huì)發(fā)現(xiàn)，通過科學(xué)的決策，能夠給所有的政府管理機(jī)構(gòu)帶來更多的東西。第十一章 項(xiàng)目風(fēng)險(xiǎn)分析一、 技術(shù)風(fēng)險(xiǎn)技術(shù)風(fēng)險(xiǎn)是指蘇州旅游服務(wù)大數(shù)據(jù)平臺(tái)技術(shù)受到病毒或黑客的攻擊對(duì)平臺(tái)的節(jié)點(diǎn)、

48、應(yīng)用、信息構(gòu)成安全威脅的風(fēng)險(xiǎn)。首先，蘇州旅游大數(shù)據(jù)平臺(tái)是由無數(shù)節(jié)點(diǎn)相關(guān)聯(lián)構(gòu)成的信息交互網(wǎng)，節(jié)電設(shè)備的安全是借貸業(yè)務(wù)正常網(wǎng)絡(luò)化的保證；其次，應(yīng)用安全，主要指平臺(tái)提供的各種共享資源的安全保證，據(jù)統(tǒng)計(jì)，有15%的平臺(tái)共享文件是偽造的；最后，技術(shù)安全還涉及到現(xiàn)有的數(shù)據(jù)庫內(nèi)部操作不透明，無法通過外部的任何安全工具(比如防火墻、IDS、IPS等)來阻止來自內(nèi)部用戶的惡意操作、濫用資源和泄露企業(yè)機(jī)密信息等行為。二、 安全風(fēng)險(xiǎn)針對(duì)蘇州旅游服務(wù)大數(shù)據(jù)平臺(tái)安全方面所面臨的主要威脅是信息泄漏特別是數(shù)據(jù)庫泄密，大數(shù)據(jù)平臺(tái)的用戶數(shù)據(jù)，做為企業(yè)所有者的信息資產(chǎn)，涉及到網(wǎng)站及關(guān)聯(lián)信息系統(tǒng)的實(shí)質(zhì)業(yè)務(wù)，對(duì)其保密性的要求強(qiáng)度不言

49、而喻。蘇州旅游大數(shù)據(jù)平臺(tái)信息資產(chǎn)面臨嚴(yán)峻的安全挑戰(zhàn)，主要表現(xiàn)在以下兩個(gè)層面。管理層面：主要表現(xiàn)為人員職責(zé)、工作流程架構(gòu)有待完善，內(nèi)部員工的日常操作有待規(guī)范，第三方維護(hù)人員的操作監(jiān)控不足，致使安全事件發(fā)生時(shí)，無法追溯并定位真實(shí)的操作者。審計(jì)層面：現(xiàn)有的依賴于數(shù)據(jù)庫日志文件的審計(jì)方法，存在諸多的弊端。比如，數(shù)據(jù)庫審計(jì)功能的開啟會(huì)影響數(shù)據(jù)庫本身的性能;數(shù)據(jù)庫日志文件本身存在被篡改的風(fēng)險(xiǎn)，難以體現(xiàn)審計(jì)信息的真實(shí)性。三、 數(shù)據(jù)質(zhì)量風(fēng)險(xiǎn)對(duì)于蘇州旅游服務(wù)大數(shù)據(jù)平臺(tái)來講，可以從流程視角來分析大數(shù)據(jù)質(zhì)量風(fēng)險(xiǎn)，主要存在以下幾方面：首先在數(shù)據(jù)收集方面，大數(shù)據(jù)的多樣性決定了數(shù)據(jù)來源的復(fù)雜性。大數(shù)據(jù)的數(shù)據(jù)來源眾多，數(shù)據(jù)

50、結(jié)構(gòu)隨著數(shù)據(jù)來源的不同而各異，企業(yè)要想保證從多個(gè)數(shù)據(jù)源獲取的結(jié)構(gòu)復(fù)雜的大數(shù)據(jù)的質(zhì)量并有效地對(duì)數(shù)據(jù)進(jìn)行整合，是一項(xiàng)異常艱巨的任務(wù)。來自于大量不同數(shù)據(jù)源的數(shù)據(jù)之間存在著沖突、不一致或相互矛盾的現(xiàn)象，在數(shù)據(jù)量較小的情形下，通過編寫簡(jiǎn)單的匹配程序，甚至是人工查找，即可實(shí)現(xiàn)多數(shù)據(jù)源中不一致數(shù)據(jù)的檢測(cè)和定位，然而這種方法在大數(shù)據(jù)情形下卻顯得力不從心。在數(shù)據(jù)獲取階段保證數(shù)據(jù)定義的一致性、元數(shù)據(jù)定義的統(tǒng)一性及數(shù)據(jù)質(zhì)量是大數(shù)據(jù)平臺(tái)提出的挑戰(zhàn)。另外，由于大數(shù)據(jù)的變化速度較快，有些數(shù)據(jù)的“有效期”非常之短，如果企業(yè)沒有實(shí)時(shí)地收集所需的數(shù)據(jù)，有可能收集到的就是“過期的”、無效的數(shù)據(jù)，在一定程度上會(huì)影響大數(shù)據(jù)的質(zhì)量。數(shù)

51、據(jù)收集階段是整個(gè)數(shù)據(jù)生命周期的開始，這個(gè)階段的數(shù)據(jù)質(zhì)量對(duì)后續(xù)階段的數(shù)據(jù)質(zhì)量起著直接的決定性的影響。因此，企業(yè)應(yīng)該重視源頭上的大數(shù)據(jù)質(zhì)量問題，為大數(shù)據(jù)的分析和應(yīng)用提供高質(zhì)量的數(shù)據(jù)基礎(chǔ)。其次在數(shù)據(jù)存儲(chǔ)階段，由于大數(shù)據(jù)的多樣性，單一的數(shù)據(jù)結(jié)構(gòu)(如關(guān)系型數(shù)據(jù)庫中的二維表結(jié)構(gòu))已經(jīng)遠(yuǎn)遠(yuǎn)不能滿足大數(shù)據(jù)存儲(chǔ)的需要，企業(yè)應(yīng)該使用專門的數(shù)據(jù)庫技術(shù)和專用的數(shù)據(jù)存儲(chǔ)設(shè)備進(jìn)行大數(shù)據(jù)的存儲(chǔ)，保證數(shù)據(jù)存儲(chǔ)的有效性。據(jù)調(diào)查，目前國內(nèi)大部分企業(yè)的業(yè)務(wù)運(yùn)營(yíng)數(shù)據(jù)仍以結(jié)構(gòu)化數(shù)據(jù)為主，相應(yīng)地主要采用傳統(tǒng)的數(shù)據(jù)存儲(chǔ)架構(gòu)，如采用關(guān)系型數(shù)據(jù)庫進(jìn)行數(shù)據(jù)的存儲(chǔ)，對(duì)于非結(jié)構(gòu)化數(shù)據(jù)，則是先將其轉(zhuǎn)化為大數(shù)據(jù)環(huán)境下，同時(shí)還應(yīng)配備專業(yè)、高端的數(shù)據(jù)庫設(shè)計(jì)

52、和開發(fā)人員、程序員、數(shù)學(xué)和統(tǒng)計(jì)學(xué)家，在全面保證大數(shù)據(jù)質(zhì)量的同時(shí)，充分挖掘大數(shù)據(jù)潛在的商業(yè)價(jià)值。四、 實(shí)施風(fēng)險(xiǎn)在大數(shù)據(jù)平臺(tái)實(shí)施階段，由于大數(shù)據(jù)的多樣性，單一的數(shù)據(jù)結(jié)構(gòu)(如關(guān)系型數(shù)據(jù)庫中的二維表結(jié)構(gòu))已經(jīng)遠(yuǎn)遠(yuǎn)不能滿足大數(shù)據(jù)存儲(chǔ)的需要，企業(yè)應(yīng)該使用專門的數(shù)據(jù)庫技術(shù)和專用的數(shù)據(jù)存儲(chǔ)設(shè)備進(jìn)行大數(shù)據(jù)的存儲(chǔ)，保證數(shù)據(jù)存儲(chǔ)的有效性。據(jù)調(diào)查，目前國內(nèi)大部分企業(yè)的業(yè)務(wù)運(yùn)營(yíng)數(shù)據(jù)仍以結(jié)構(gòu)化數(shù)據(jù)為主，相應(yīng)地主要采用傳統(tǒng)的數(shù)據(jù)存儲(chǔ)架構(gòu)，如采用關(guān)系型數(shù)據(jù)庫進(jìn)行數(shù)據(jù)的存儲(chǔ)，對(duì)于非結(jié)構(gòu)化數(shù)據(jù)，則是先將其轉(zhuǎn)化為結(jié)構(gòu)化數(shù)據(jù)后再進(jìn)行存儲(chǔ)、處理及分析。這種數(shù)據(jù)存儲(chǔ)處理方式不僅無法應(yīng)對(duì)大數(shù)據(jù)數(shù)量龐大、數(shù)據(jù)結(jié)構(gòu)復(fù)雜、變化速度快等特點(diǎn)，而且

53、一旦轉(zhuǎn)化方式不當(dāng)，將會(huì)直接影響到數(shù)據(jù)的完整性、有效性與準(zhǔn)確性等。而北京市科學(xué)技術(shù)委員會(huì)委員陳力工曾指出這種結(jié)構(gòu)化的數(shù)據(jù)只占到互聯(lián)網(wǎng)整體流動(dòng)數(shù)據(jù)的10%，剩余90%都為視頻、圖片、音頻等非結(jié)構(gòu)化的數(shù)據(jù)，這就對(duì)傳統(tǒng)數(shù)據(jù)存儲(chǔ)架構(gòu)的可靠性及有效性構(gòu)成了挑戰(zhàn)。數(shù)據(jù)存儲(chǔ)是實(shí)現(xiàn)高水平數(shù)據(jù)質(zhì)量的基本保障，如果數(shù)據(jù)不能被一致、完整、有效的存儲(chǔ)，數(shù)據(jù)質(zhì)量將無從談起。因此，企業(yè)要想充分挖掘大數(shù)據(jù)的核心價(jià)值，首先必須完成傳統(tǒng)的結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)處理方式向同時(shí)兼具結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)處理方式的轉(zhuǎn)變，不斷完善大數(shù)據(jù)環(huán)境下企業(yè)數(shù)據(jù)庫的建設(shè)，為保證大數(shù)據(jù)質(zhì)量提供基礎(chǔ)保障。五、 管理風(fēng)險(xiǎn)在數(shù)據(jù)規(guī)模較小的情況下，關(guān)系型數(shù)據(jù)庫就能

54、滿足企業(yè)數(shù)據(jù)存儲(chǔ)的需要，一般企業(yè)信息系統(tǒng)數(shù)據(jù)庫中的記錄通常會(huì)達(dá)到幾千條或上萬條，規(guī)模稍大的企業(yè)，其數(shù)據(jù)記錄能達(dá)到幾十萬條，在這種情況下，檢測(cè)數(shù)據(jù)庫中錯(cuò)誤、缺失、無效、延遲的數(shù)據(jù)非常容易，幾分鐘甚至幾秒鐘就能完成對(duì)所有記錄的掃描和檢測(cè)。然而在大數(shù)據(jù)時(shí)代，企業(yè)的數(shù)據(jù)量不僅巨大，而且數(shù)據(jù)結(jié)構(gòu)種類繁多，不僅僅有簡(jiǎn)單的、結(jié)構(gòu)化的數(shù)據(jù)，更多的則是復(fù)雜的、非結(jié)構(gòu)化的數(shù)據(jù)，而且數(shù)據(jù)之間的關(guān)系較為復(fù)雜，若要識(shí)別、檢測(cè)大數(shù)據(jù)中錯(cuò)誤、缺失、無效、延遲的數(shù)據(jù)，往往需要遍歷數(shù)百萬甚至數(shù)億條記錄或語句，傳統(tǒng)的技術(shù)和方法常常需要幾小時(shí)甚至幾天的時(shí)間才能完成對(duì)所有數(shù)據(jù)的掃描與檢測(cè)，因此，從這個(gè)角度來講，大數(shù)據(jù)環(huán)境為數(shù)據(jù)質(zhì)量的

55、監(jiān)測(cè)和管理帶來了巨大的挑戰(zhàn)。這種情況下，傳統(tǒng)的數(shù)據(jù)庫技術(shù)、數(shù)據(jù)挖掘工具和數(shù)據(jù)清洗技術(shù)在處理速度和分析能力上已經(jīng)無法應(yīng)對(duì)大數(shù)據(jù)時(shí)代所帶來的挑戰(zhàn)，處理小規(guī)模數(shù)據(jù)質(zhì)量問題的檢測(cè)工具已經(jīng)不能勝任大數(shù)據(jù)環(huán)境下數(shù)據(jù)質(zhì)量問題的檢測(cè)和識(shí)別任務(wù)，這就要求企業(yè)應(yīng)根據(jù)實(shí)際業(yè)務(wù)的需要，在配備高端的數(shù)據(jù)存儲(chǔ)設(shè)備的同時(shí)，開發(fā)、設(shè)計(jì)或引進(jìn)先進(jìn)的、智能化的、專業(yè)的大數(shù)據(jù)分析技術(shù)和方法，以實(shí)現(xiàn)大數(shù)據(jù)中數(shù)據(jù)質(zhì)量問題的檢測(cè)與識(shí)別，以及對(duì)大數(shù)據(jù)的整合、分析、可視化等操作，充分地提取、挖掘大數(shù)據(jù)潛在的應(yīng)用價(jià)值。六、 需求變更風(fēng)險(xiǎn)數(shù)據(jù)價(jià)值的發(fā)揮在于對(duì)數(shù)據(jù)的有效分析和應(yīng)用，大數(shù)據(jù)涉及的使用人員眾多，很多時(shí)候是同步地、不斷地對(duì)數(shù)據(jù)進(jìn)行提取、分析、更新和使用，任何一