網(wǎng)絡(luò)與新媒體應(yīng)用模式課件第一章第四五節(jié)

1《網(wǎng)絡(luò)與新媒體應(yīng)用模式》——?jiǎng)?chuàng)新設(shè)計(jì)及運(yùn)營戰(zhàn)略視角1《網(wǎng)絡(luò)與新媒體應(yīng)用模式》——?jiǎng)?chuàng)新設(shè)計(jì)及運(yùn)營戰(zhàn)略視角2第一章網(wǎng)絡(luò)與新媒體概述2第一章“網(wǎng)絡(luò)與新媒體”的概念辨析和層次模型1網(wǎng)絡(luò)與新媒體的應(yīng)用載體——萬維網(wǎng)2網(wǎng)絡(luò)與新媒體的基礎(chǔ)設(shè)施3網(wǎng)絡(luò)與新媒體應(yīng)用的計(jì)算模式——云計(jì)算4網(wǎng)絡(luò)與新媒體應(yīng)用的數(shù)據(jù)環(huán)境——大數(shù)據(jù)目

錄53“網(wǎng)絡(luò)與新媒體”的概念辨析和層次模型1網(wǎng)絡(luò)與新媒體的應(yīng)用載體4謝謝！THEEND!4謝謝！THEEND!5Chapter4第四節(jié)網(wǎng)絡(luò)與新媒體應(yīng)用的計(jì)算模式——云計(jì)算5Chapter4第四節(jié)網(wǎng)絡(luò)與新媒體應(yīng)用的計(jì)算6如何實(shí)現(xiàn)資源和計(jì)算能力的分布式共享，是目前互聯(lián)網(wǎng)界亟待解決的問題，云計(jì)算在這樣的背景下應(yīng)運(yùn)而生。

云計(jì)算（CloudComputing）作為一種新型的計(jì)算模式，是信息技術(shù)發(fā)展歷程中最具革命性的重大進(jìn)展，將對(duì)網(wǎng)絡(luò)應(yīng)用模式的發(fā)展產(chǎn)生重要影響。6如何實(shí)現(xiàn)資源和計(jì)算能力的分布式共享，是目前互聯(lián)7一、云計(jì)算的基本原理云計(jì)算是一個(gè)根本性轉(zhuǎn)變，應(yīng)用可利用、可管理的、優(yōu)化的分布式計(jì)算資源，以及基于業(yè)務(wù)優(yōu)先級(jí)實(shí)時(shí)驅(qū)動(dòng)的存儲(chǔ)資源，能構(gòu)建全球服務(wù)協(xié)作網(wǎng)絡(luò)。7一、云計(jì)算的基本原理云計(jì)算是一個(gè)根本性轉(zhuǎn)變，應(yīng)8其基本原理可從以下幾個(gè)方面把握：

1、云計(jì)算具有強(qiáng)大的功能。

2、云計(jì)算具有明顯的優(yōu)勢(shì)。

3、云計(jì)算的服務(wù)類型。

4、云計(jì)算的部署類型。

5、云計(jì)算平臺(tái)的邏輯層次。8其基本原理可從以下幾個(gè)方面把握：9二、云計(jì)算的變革性改變首先，云計(jì)算將賦予互聯(lián)網(wǎng)更大的內(nèi)涵并改變互聯(lián)網(wǎng)企業(yè)的運(yùn)營模式。其次，云計(jì)算模式將給移動(dòng)應(yīng)用帶來前所未有的變革。最后，云計(jì)算將改變信息化的模式。9二、云計(jì)算的變革性改變首先，云計(jì)算將賦予互聯(lián)網(wǎng)10Chapter4第五節(jié)網(wǎng)絡(luò)與新媒體應(yīng)用的數(shù)據(jù)環(huán)境——大數(shù)據(jù)10Chapter4第五節(jié)網(wǎng)絡(luò)與新媒體應(yīng)用的數(shù)據(jù)環(huán)11

目前，信息海洋已經(jīng)將我們團(tuán)團(tuán)圍住，單一數(shù)據(jù)集容量超過幾十TB甚至數(shù)PB已不罕見，其規(guī)模大到無法在容許的時(shí)間內(nèi)用常規(guī)軟件工具對(duì)其內(nèi)容進(jìn)行抓取、管理和處理，人類已經(jīng)從小數(shù)據(jù)時(shí)代進(jìn)入大數(shù)據(jù)時(shí)代。11目前，信息海洋已經(jīng)將我們團(tuán)團(tuán)圍住，單一數(shù)據(jù)集容量超12一、大數(shù)據(jù)概述所謂大數(shù)據(jù)是指那些大小已經(jīng)超出傳統(tǒng)意義上的尺度，已有的一般軟件難以捕捉、存儲(chǔ)、管理和分析的數(shù)據(jù)。一般意義上，大數(shù)據(jù)是指無法在可容忍的時(shí)間內(nèi)用傳統(tǒng)IT技術(shù)和軟硬件工具對(duì)其進(jìn)行感知、獲取、管理、處理和服務(wù)的數(shù)據(jù)集合。但不同的研究機(jī)構(gòu)和學(xué)者對(duì)大數(shù)據(jù)的定義不盡相同。12一、大數(shù)據(jù)概述所謂大數(shù)據(jù)是指那些大小已經(jīng)超出13歸納起來，大數(shù)據(jù)的概念和內(nèi)涵可以從廣義和狹義兩個(gè)方面進(jìn)行詮釋：

廣義的大數(shù)據(jù)概念，除了大數(shù)據(jù)技術(shù)及其應(yīng)用之外，還包括大數(shù)據(jù)工程和大數(shù)據(jù)科學(xué)。

狹義的大數(shù)據(jù)概念，主要是指大數(shù)據(jù)技術(shù)及其應(yīng)用，是指從各種各樣類型的數(shù)據(jù)中，快速獲得有價(jià)值信息的能力。13歸納起來，大數(shù)據(jù)的概念和內(nèi)涵可以從廣義和狹義14大數(shù)據(jù)的特點(diǎn)可以總結(jié)為4個(gè)“V”，即體量浩大（Volume）、模態(tài)繁多（Variety）、生成快速（Velocity）、密度很低（Value）。14大數(shù)據(jù)的特點(diǎn)可以總結(jié)為4個(gè)“V”，即體量浩15二、大數(shù)據(jù)的關(guān)鍵技術(shù)

具體來說，大數(shù)據(jù)的關(guān)鍵技術(shù)主要包括兩個(gè)方面：非關(guān)系數(shù)據(jù)管理技術(shù)和云計(jì)算技術(shù)。關(guān)系數(shù)據(jù)庫技術(shù)（RDBMS）經(jīng)過了將近40年的發(fā)展,成為一門成熟的、同時(shí)仍在不斷演進(jìn)的主流數(shù)據(jù)管理和分析技術(shù)。15二、大數(shù)據(jù)的關(guān)鍵技術(shù)具體來說，大數(shù)據(jù)的關(guān)鍵技術(shù)主要16但是,關(guān)系數(shù)據(jù)管理技術(shù)在大數(shù)據(jù)時(shí)代喪失了互聯(lián)網(wǎng)搜索這個(gè)機(jī)會(huì),其主要原因是關(guān)系數(shù)據(jù)管理系統(tǒng)（并行據(jù)庫）的擴(kuò)展性遇到了前所未有的障礙,不能勝任大數(shù)據(jù)分析的要求。在這種情況下，非關(guān)系數(shù)據(jù)管理技術(shù)應(yīng)運(yùn)而生。

代表性的技術(shù)主要包括“映射歸約”（MapReduce）技術(shù)、“海杜普”（Hadoop）技術(shù)、華為“SmartVision”技術(shù)和非關(guān)系型數(shù)據(jù)庫（NoSQL）技術(shù)。16但是,關(guān)系數(shù)據(jù)管理技術(shù)在大數(shù)據(jù)時(shí)代喪失了互聯(lián)17據(jù)統(tǒng)計(jì)，云計(jì)算與大數(shù)據(jù)的深度融合位列2013年大數(shù)據(jù)發(fā)展趨勢(shì)的第三名，大數(shù)據(jù)能為云計(jì)算大規(guī)模和分布式的計(jì)算能力提供廣闊的應(yīng)用空間，云計(jì)算正在進(jìn)入以“分析即服務(wù)(AaaS)”為主要標(biāo)志的Cloud2.0時(shí)代。17據(jù)統(tǒng)計(jì)，云計(jì)算與大數(shù)據(jù)的深度融合位列201318一是云計(jì)算基礎(chǔ)設(shè)施可以作為有效平臺(tái)來處理大數(shù)據(jù)分析應(yīng)用的計(jì)算和數(shù)據(jù)存儲(chǔ)需求。二是開發(fā)人員和研究人員可以采用軟件即服務(wù)（SaaS）、平臺(tái)即服務(wù)（PaaS）和基礎(chǔ)設(shè)施即服務(wù)（IaaS）的架構(gòu)模型來實(shí)現(xiàn)在云中的大數(shù)據(jù)分析解決方案。18一是云計(jì)算基礎(chǔ)設(shè)施可以作為有效平臺(tái)來處理大數(shù)19三、大數(shù)據(jù)帶來的主要挑戰(zhàn)

總之，收集、保存、維護(hù)、管理、分析和共享正在呈指數(shù)級(jí)增長的數(shù)據(jù)是人類必須共同面臨的挑戰(zhàn)。具體來說，主要包括三個(gè)方面。

首先，大數(shù)據(jù)中劣質(zhì)數(shù)據(jù)帶來的挑戰(zhàn)。隨著大數(shù)據(jù)的爆炸性增長，劣質(zhì)數(shù)據(jù)也隨之而來，導(dǎo)致數(shù)據(jù)質(zhì)量低劣，能極大地降低數(shù)據(jù)的可用性。19三、大數(shù)據(jù)帶來的主要挑戰(zhàn)總之，收集、保存、維護(hù)、管20二是大數(shù)據(jù)對(duì)信息安全的挑戰(zhàn)。大數(shù)據(jù)對(duì)信息安全的挑戰(zhàn)主要包括兩個(gè)方面。（1）如何防止數(shù)據(jù)被竊取或篡改。（2）如何防止個(gè)人信息泄漏。三是大數(shù)據(jù)的復(fù)雜性、不確定性和涌現(xiàn)性所帶來的挑戰(zhàn)。（1）復(fù)雜性造成網(wǎng)絡(luò)大數(shù)據(jù)存儲(chǔ)、分析、挖掘等多個(gè)環(huán)節(jié)的困難。（2）網(wǎng)絡(luò)大數(shù)據(jù)的不確定性不確定性使得網(wǎng)絡(luò)數(shù)據(jù)難以被建模和學(xué)習(xí)，從而難以有效利用其價(jià)值。（3）網(wǎng)絡(luò)大數(shù)據(jù)的涌現(xiàn)性是網(wǎng)絡(luò)數(shù)據(jù)有別于其它數(shù)據(jù)的關(guān)鍵特性。20二是大數(shù)據(jù)對(duì)信息安全的挑戰(zhàn)。大數(shù)據(jù)對(duì)信息安全21總之，為了有效應(yīng)對(duì)上述挑戰(zhàn)，大數(shù)據(jù)的挖掘與利用應(yīng)當(dāng)有法可依，應(yīng)當(dāng)既鼓勵(lì)面向群體、服務(wù)社會(huì)的數(shù)據(jù)挖掘，又要防止侵犯?jìng)€(gè)體隱私；既提倡數(shù)據(jù)共享，又要防止數(shù)據(jù)被濫用；需要界定數(shù)據(jù)挖掘、利用的權(quán)限和范圍；大數(shù)據(jù)系統(tǒng)本身的安全性也是值得特別關(guān)注的，要注意技術(shù)安全性和管理制度安全性并重，防止信息被損壞、篡改、泄露或被竊，保護(hù)公民和國家的信息安全。21總之，為了有效應(yīng)對(duì)上述挑戰(zhàn)，大數(shù)據(jù)的挖掘與利22四、發(fā)展現(xiàn)狀大數(shù)據(jù)在美國的研究和應(yīng)用起步較早。2011年，F(xiàn)acebook首次公開新數(shù)據(jù)處理分析平臺(tái)（PUMA），相比之前單純采用“海杜普”（Hadoop）和“Hive”進(jìn)行處理的技術(shù)，效率提高數(shù)萬倍。近幾年大數(shù)據(jù)的研究和應(yīng)用在中國蓬勃發(fā)展。2012年6月9日，中國計(jì)算機(jī)學(xué)會(huì)常務(wù)理事會(huì)決定成立大數(shù)據(jù)專家委員會(huì)。22四、發(fā)展現(xiàn)狀大數(shù)據(jù)在美國的研究和應(yīng)用起步較早23《網(wǎng)絡(luò)與新媒體應(yīng)用模式》——?jiǎng)?chuàng)新設(shè)計(jì)及運(yùn)營戰(zhàn)略視角1《網(wǎng)絡(luò)與新媒體應(yīng)用模式》——?jiǎng)?chuàng)新設(shè)計(jì)及運(yùn)營戰(zhàn)略視角24第一章網(wǎng)絡(luò)與新媒體概述2第一章“網(wǎng)絡(luò)與新媒體”的概念辨析和層次模型1網(wǎng)絡(luò)與新媒體的應(yīng)用載體——萬維網(wǎng)2網(wǎng)絡(luò)與新媒體的基礎(chǔ)設(shè)施3網(wǎng)絡(luò)與新媒體應(yīng)用的計(jì)算模式——云計(jì)算4網(wǎng)絡(luò)與新媒體應(yīng)用的數(shù)據(jù)環(huán)境——大數(shù)據(jù)目

錄525“網(wǎng)絡(luò)與新媒體”的概念辨析和層次模型1網(wǎng)絡(luò)與新媒體的應(yīng)用載體26謝謝！THEEND!4謝謝！THEEND!27Chapter4第四節(jié)網(wǎng)絡(luò)與新媒體應(yīng)用的計(jì)算模式——云計(jì)算5Chapter4第四節(jié)網(wǎng)絡(luò)與新媒體應(yīng)用的計(jì)算28如何實(shí)現(xiàn)資源和計(jì)算能力的分布式共享，是目前互聯(lián)網(wǎng)界亟待解決的問題，云計(jì)算在這樣的背景下應(yīng)運(yùn)而生。

云計(jì)算（CloudComputing）作為一種新型的計(jì)算模式，是信息技術(shù)發(fā)展歷程中最具革命性的重大進(jìn)展，將對(duì)網(wǎng)絡(luò)應(yīng)用模式的發(fā)展產(chǎn)生重要影響。6如何實(shí)現(xiàn)資源和計(jì)算能力的分布式共享，是目前互聯(lián)29一、云計(jì)算的基本原理云計(jì)算是一個(gè)根本性轉(zhuǎn)變，應(yīng)用可利用、可管理的、優(yōu)化的分布式計(jì)算資源，以及基于業(yè)務(wù)優(yōu)先級(jí)實(shí)時(shí)驅(qū)動(dòng)的存儲(chǔ)資源，能構(gòu)建全球服務(wù)協(xié)作網(wǎng)絡(luò)。7一、云計(jì)算的基本原理云計(jì)算是一個(gè)根本性轉(zhuǎn)變，應(yīng)30其基本原理可從以下幾個(gè)方面把握：

1、云計(jì)算具有強(qiáng)大的功能。

2、云計(jì)算具有明顯的優(yōu)勢(shì)。

3、云計(jì)算的服務(wù)類型。

4、云計(jì)算的部署類型。

5、云計(jì)算平臺(tái)的邏輯層次。8其基本原理可從以下幾個(gè)方面把握：31二、云計(jì)算的變革性改變首先，云計(jì)算將賦予互聯(lián)網(wǎng)更大的內(nèi)涵并改變互聯(lián)網(wǎng)企業(yè)的運(yùn)營模式。其次，云計(jì)算模式將給移動(dòng)應(yīng)用帶來前所未有的變革。最后，云計(jì)算將改變信息化的模式。9二、云計(jì)算的變革性改變首先，云計(jì)算將賦予互聯(lián)網(wǎng)32Chapter4第五節(jié)網(wǎng)絡(luò)與新媒體應(yīng)用的數(shù)據(jù)環(huán)境——大數(shù)據(jù)10Chapter4第五節(jié)網(wǎng)絡(luò)與新媒體應(yīng)用的數(shù)據(jù)環(huán)33

目前，信息海洋已經(jīng)將我們團(tuán)團(tuán)圍住，單一數(shù)據(jù)集容量超過幾十TB甚至數(shù)PB已不罕見，其規(guī)模大到無法在容許的時(shí)間內(nèi)用常規(guī)軟件工具對(duì)其內(nèi)容進(jìn)行抓取、管理和處理，人類已經(jīng)從小數(shù)據(jù)時(shí)代進(jìn)入大數(shù)據(jù)時(shí)代。11目前，信息海洋已經(jīng)將我們團(tuán)團(tuán)圍住，單一數(shù)據(jù)集容量超34一、大數(shù)據(jù)概述所謂大數(shù)據(jù)是指那些大小已經(jīng)超出傳統(tǒng)意義上的尺度，已有的一般軟件難以捕捉、存儲(chǔ)、管理和分析的數(shù)據(jù)。一般意義上，大數(shù)據(jù)是指無法在可容忍的時(shí)間內(nèi)用傳統(tǒng)IT技術(shù)和軟硬件工具對(duì)其進(jìn)行感知、獲取、管理、處理和服務(wù)的數(shù)據(jù)集合。但不同的研究機(jī)構(gòu)和學(xué)者對(duì)大數(shù)據(jù)的定義不盡相同。12一、大數(shù)據(jù)概述所謂大數(shù)據(jù)是指那些大小已經(jīng)超出35歸納起來，大數(shù)據(jù)的概念和內(nèi)涵可以從廣義和狹義兩個(gè)方面進(jìn)行詮釋：

廣義的大數(shù)據(jù)概念，除了大數(shù)據(jù)技術(shù)及其應(yīng)用之外，還包括大數(shù)據(jù)工程和大數(shù)據(jù)科學(xué)。

狹義的大數(shù)據(jù)概念，主要是指大數(shù)據(jù)技術(shù)及其應(yīng)用，是指從各種各樣類型的數(shù)據(jù)中，快速獲得有價(jià)值信息的能力。13歸納起來，大數(shù)據(jù)的概念和內(nèi)涵可以從廣義和狹義36大數(shù)據(jù)的特點(diǎn)可以總結(jié)為4個(gè)“V”，即體量浩大（Volume）、模態(tài)繁多（Variety）、生成快速（Velocity）、密度很低（Value）。14大數(shù)據(jù)的特點(diǎn)可以總結(jié)為4個(gè)“V”，即體量浩37二、大數(shù)據(jù)的關(guān)鍵技術(shù)

具體來說，大數(shù)據(jù)的關(guān)鍵技術(shù)主要包括兩個(gè)方面：非關(guān)系數(shù)據(jù)管理技術(shù)和云計(jì)算技術(shù)。關(guān)系數(shù)據(jù)庫技術(shù)（RDBMS）經(jīng)過了將近40年的發(fā)展,成為一門成熟的、同時(shí)仍在不斷演進(jìn)的主流數(shù)據(jù)管理和分析技術(shù)。15二、大數(shù)據(jù)的關(guān)鍵技術(shù)具體來說，大數(shù)據(jù)的關(guān)鍵技術(shù)主要38但是,關(guān)系數(shù)據(jù)管理技術(shù)在大數(shù)據(jù)時(shí)代喪失了互聯(lián)網(wǎng)搜索這個(gè)機(jī)會(huì),其主要原因是關(guān)系數(shù)據(jù)管理系統(tǒng)（并行據(jù)庫）的擴(kuò)展性遇到了前所未有的障礙,不能勝任大數(shù)據(jù)分析的要求。在這種情況下，非關(guān)系數(shù)據(jù)管理技術(shù)應(yīng)運(yùn)而生。

代表性的技術(shù)主要包括“映射歸約”（MapReduce）技術(shù)、“海杜普”（Hadoop）技術(shù)、華為“SmartVision”技術(shù)和非關(guān)系型數(shù)據(jù)庫（NoSQL）技術(shù)。16但是,關(guān)系數(shù)據(jù)管理技術(shù)在大數(shù)據(jù)時(shí)代喪失了互聯(lián)39據(jù)統(tǒng)計(jì)，云計(jì)算與大數(shù)據(jù)的深度融合位列2013年大數(shù)據(jù)發(fā)展趨勢(shì)的第三名，大數(shù)據(jù)能為云計(jì)算大規(guī)模和分布式的計(jì)算能力提供廣闊的應(yīng)用空間，云計(jì)算正在進(jìn)入以“分析即服務(wù)(AaaS)”為主要標(biāo)志的Cloud2.0時(shí)代。17據(jù)統(tǒng)計(jì)，云計(jì)算與大數(shù)據(jù)的深度融合位列201340一是云計(jì)算基礎(chǔ)設(shè)施可以作為有效平臺(tái)來處理大數(shù)據(jù)分析應(yīng)用的計(jì)算和數(shù)據(jù)存儲(chǔ)需求。二是開發(fā)人員和研究人員可以采用軟件即服務(wù)（SaaS）、平臺(tái)即服務(wù)（PaaS）和基礎(chǔ)設(shè)施即服務(wù)（IaaS）的架構(gòu)模型來實(shí)現(xiàn)在云中的大數(shù)據(jù)分析解決方案。18一是云計(jì)算基礎(chǔ)設(shè)施可以作為有效平臺(tái)來處理大數(shù)41三、大數(shù)據(jù)帶來的主要挑戰(zhàn)

總之，收集、保存、維護(hù)、管理、分析和共享正在呈指數(shù)級(jí)增長的數(shù)據(jù)是人類必須共同面臨的挑戰(zhàn)。具體來說，主要包括三個(gè)方面。

首先，大數(shù)據(jù)中劣質(zhì)數(shù)據(jù)帶來的挑戰(zhàn)。隨著大數(shù)據(jù)的爆炸性增長，劣質(zhì)數(shù)據(jù)也隨之而來，導(dǎo)致數(shù)據(jù)質(zhì)量低劣，能極大地降低數(shù)據(jù)的可用性。19三、大數(shù)據(jù)帶來的主要挑戰(zhàn)總之，收集、保存、維護(hù)、管42二是大數(shù)據(jù)對(duì)信息安全的挑戰(zhàn)。大數(shù)據(jù)對(duì)信息安全的挑戰(zhàn)主要包括兩個(gè)方面。（1