《大數(shù)據(jù)存儲技術(shù)與應(yīng)用》 課件 項(xiàng)目五-任務(wù)三 解析Elasticsearch存儲技術(shù)

《大數(shù)據(jù)存儲技術(shù)與應(yīng)用》大數(shù)據(jù)存儲技術(shù)與應(yīng)用項(xiàng)目五深入半結(jié)構(gòu)化存儲任務(wù)三解析ElasticSearch存儲技術(shù)什么是Redis？Redis的數(shù)據(jù)類型有哪些？Redis的get和set操作？Redis的應(yīng)用場景？回顧任務(wù)引入-Elasticsearch原型環(huán)境和生產(chǎn)環(huán)境可無縫切換；無論Elasticsearch是在一個節(jié)點(diǎn)上運(yùn)行，還是在一個包含300個節(jié)點(diǎn)的集群上運(yùn)行，您都能夠以相同的方式與Elasticsearch進(jìn)行通信。它能夠水平擴(kuò)展，每秒鐘可處理海量事件，同時能夠自動管理索引和查詢在集群中的分布方式，以實(shí)現(xiàn)極其流暢的操作。任務(wù)描述:本節(jié)主要講解ElasticSearch存儲技術(shù)，包括：ElasticSearch存儲的概念、特點(diǎn)；安裝配置與操作，并結(jié)合實(shí)際案例詮釋ElasticSearch技術(shù)在半結(jié)構(gòu)化大數(shù)據(jù)方面的應(yīng)用。任務(wù)教學(xué)目標(biāo)：理解Elasticsearch概念、特點(diǎn)。掌握Elasticsearch安裝部署。掌握Elasticsearch操作、應(yīng)用。任務(wù)概要教學(xué)內(nèi)容Elasticsearch概述Elasticsearch安裝部署一二Elasticsearch應(yīng)用案例三ElasticSearch概述知識點(diǎn)一ElasticSearch概述ElasticSearch是一個基于Lucene的搜索服務(wù)器，Elasticsearch是一個分布式、可擴(kuò)展、實(shí)時的搜索與數(shù)據(jù)分析引擎。基于Java程序語言開發(fā)，并作為Apache許可條款下的開放源碼發(fā)布，是當(dāng)前流行的企業(yè)級搜索引擎，能夠在不同的平臺上運(yùn)行。

安裝依賴（53&54）ElasticSearch支持RESTfulWeb接口，應(yīng)用系統(tǒng)可以通過Java、.NET（C#）、PHP、Python、ApacheGroovy、Ruby等程序語言訪問ElasticSearch服務(wù)。ElasticSearch概述

安裝依賴（53&54）ElasticSearch典型應(yīng)用場景包括：全文檢索、結(jié)構(gòu)化搜索、數(shù)據(jù)分析以及這三個功能應(yīng)用的組合。維基百科使用ElasticSearch提供帶有高亮片段的全文搜索；GitHub使用ElasticSearch對海量程序代碼進(jìn)行搜索。ElasticSearch概述

安裝依賴（53&54）開源的分布式、可擴(kuò)展和高可用的實(shí)時文檔存儲；實(shí)時搜索和分析能力；功能多樣的RESTfulAPI；橫向擴(kuò)展的簡易性和云基礎(chǔ)設(shè)施的易集成性。ElasticSearch概述

安裝依賴（53&54）ElasticSearch可以安裝部署在個人電腦上，也可以擴(kuò)展到數(shù)百臺服務(wù)器的服務(wù)集群，以支撐PB級別的海量數(shù)據(jù)搜索服務(wù)。ElasticSearch概述ElasticSearch安裝部署知識點(diǎn)二

安裝依賴（53&54）ElasticSearch安裝配置

安裝依賴（53&54）ElasticSearch安裝配置

安裝依賴（53&54）ElasticSearch安裝配置ElasticSearch應(yīng)用案例知識點(diǎn)三

安裝依賴（53&54）Cayman是基于GO語言實(shí)現(xiàn)的服務(wù)層和接口層。技術(shù)框架上基于Elasticsearch（caymaneagles）模擬對象和桶的概念，實(shí)現(xiàn)對象存儲管理系統(tǒng)（上傳下載、統(tǒng)一管理、分析搜索、監(jiān)控運(yùn)維等）。底層對文件存儲系統(tǒng)的兼容性高，可對接文件存儲系統(tǒng)（fastdfs），對象存儲系統(tǒng)（ceph），云存儲（阿里oss、亞馬遜S3）、infinity等。ElasticSearch應(yīng)用案例任務(wù)小結(jié)本次任務(wù)以理論與實(shí)踐相結(jié)合的方式，對Elasticsearch存儲技術(shù)進(jìn)行了系統(tǒng)的學(xué)習(xí)，第一小節(jié)詳細(xì)的介紹了Elasticsearch技術(shù)，第二小節(jié)闡述了Elasticsearch的安裝和部署，第三小節(jié)引入了應(yīng)用案例。擴(kuò)展訓(xùn)練Redis獨(dú)立學(xué)習(xí)Redis是一個開源（BSD許可）的，內(nèi)存中的數(shù)據(jù)結(jié)構(gòu)存儲系統(tǒng)，它可以用作數(shù)據(jù)庫、緩存和消息中間件。它支持多種類型的數(shù)據(jù)結(jié)構(gòu)，如：字符串（strings），散列（hashes），列表（lists），集合（sets），有序集合（sortedsets）與范圍查詢，bitmaps，hyperloglogs和地理空間（geospatial）索引半徑查詢。Redis內(nèi)置了復(fù)制（replication），LUA腳本（Luascripting），LRU驅(qū)動事件（LRUeviction），事務(wù)（transactions）和不同級別的磁盤持久化（persistence），并通過Redis哨兵（Sentinel）和自動分區(qū)（Cluster）提供高可用性（highavailabil