大數據應用基礎-圖像數據課件

圖像數據大數據應用基礎魏煒1圖像數據大數據應用基礎1計算機視覺的重要性圖像是信息的重要載體。人類獲取外界信息中，80%左右來自視覺。2計算機視覺的重要性圖像是信息的重要載體。2計算機視覺的基本原理首先，從圖片中提取出特征。這個特征不僅是每個像素的顏色，更重要的是更高級的特征，例如形狀、甚至圖片中物體的名稱。進而，可以對大量圖片進行聚類、分類、搜索。3計算機視覺的基本原理首先，從圖片中提取出特征。3計算機視覺的主要輔助技術圖像壓縮：可以減少描述圖像所用的數據量。圖像增強和復原：這是一種圖像預處理。目的是提高圖像質量，使圖像更加清晰。圖像分割：把圖像中有意義的部分提取出來，例如邊緣、區(qū)域等。圖像融合：把幾個關于某一場景的圖像合并，最大限度地利用多個圖像來源之間的互補信息，生成一個新圖像。4計算機視覺的主要輔助技術圖像壓縮：可以減少描述圖像所用的數據如何對韓國美女進行人臉識別2013年韓國選美競賽的20名參賽美女。對參賽選手進行人臉識別頗有難度。發(fā)型識別呢？5如何對韓國美女進行人臉識別2013年韓國選美競賽的20名參賽重點：人臉拍攝人臉，就能識別出這個人的表情：Emotient、Affectiva拍攝人臉，就能在人臉數據庫找出與其相似的人臉：百度魔圖、北京曠視科技的Face++。人臉數據庫可以是明星臉數據庫（百度）、也可以是社交媒體上的全部頭像（Face++）、也可以是罪犯人臉數據庫（MorphoTrust）從視頻中識別出含有某明星的片段：Orbeus身份識別——例如，Face++的云臉應用鎖、灝瀧智能科技的FaceEID人臉身份實證、杭州熱和科技檢測駕駛員疲勞駕駛精神狀態(tài)，并進行預警：灝瀧智能科技6重點：人臉拍攝人臉，就能識別出這個人的表情：Emotient人臉：識別表情、性別、年齡、種族曠視科技：目前只能識別微笑程度不能識別其他情緒7人臉：識別表情、性別、年齡、種族曠視科技：7人臉驗證8人臉驗證8重點：物品拍攝任意一個物品，就能給出物品的名稱：Camfind、百度輕拍拍攝紙媒內容（例如廣告、海報），就能鏈接到這個商品的零售網頁，或者得到商家優(yōu)惠券：Target公司的InaSnap手機應用、騰訊、基美文化傳媒的基美耀拍APP（與亮風臺合作開發(fā)）、億拍天下拍攝一件衣服，就能在零售商數據庫中找到這件衣服，或者相似的衣服：SnapFashion、Style-Eyes、Slyce、搜鞋客、圖圖搜衣、亮風臺9重點：物品拍攝任意一個物品，就能給出物品的名稱：Camfin重點：物品拍攝一個商品，就能在零售商數據庫中找出這件商品及同款商品的介紹、評論，并進行比價，而且能進行購買：Viscovery、北京同創(chuàng)網訊、百度與唯品會的合作拍攝一個景點，就能給出這個景點的名稱、介紹：亮風臺拍攝一件展品，就能在數據庫中找出這件展品的介紹：Guidico10重點：物品拍攝一個商品，就能在零售商數據庫中找出這件商品及同1111物品拍攝葡萄酒酒標，就能給出商品信息、并進行比價、購買：佛山市咔嚓購的酒咔嚓APP。12物品拍攝葡萄酒酒標，就能給出商品信息、并進行比價、購買：佛山物品拍攝一組食物，就能給出這些食物的營養(yǎng)含量：芯草莓科技的微營養(yǎng)App。13物品拍攝一組食物，就能給出這些食物的營養(yǎng)含量：芯草莓科技的微物品拍一個應用圖標，能識別出這是什么APP：亮風臺的應用拍拍APP14物品拍一個應用圖標，能識別出這是什么APP：亮風臺的應用拍拍文字拍攝外語文字，就能給出翻譯：Viscovery、曠視科技拍攝一個數學題，就能給出答案和解析：學習寶15文字拍攝外語文字，就能給出翻譯：Viscovery、曠視科技有一些公司采用了深度學習百度Orbeus曠視科技DNNresearchIQEnginesLooknowClarifaiJetpac16有一些公司采用了深度學習百度16重點：基礎服務：基于深度學習的圖片搜索以圖搜圖：百度、谷歌百度能識別出圖片中的元素，例如河流、倒影、建筑、樹木、白云、藍天等。拍攝圖片，就能根據圖中包含的元素生成一首詩：百度為你寫詩識別出畫作中的視覺概念，例如鴨子、走路、死尸，進而根據描述性詞匯組成的向量，用自然語言處理比較不同畫作之間的相似度：達特茅斯學院和微軟劍橋研究院17重點：基礎服務：基于深度學習的圖片搜索以圖搜圖：百度、谷歌1重點：基礎服務：基于深度學習的圖片自動分類給照片自動加標簽、歸類，進而可以用關鍵詞搜索圖片：Orbeus、Madbits、百度云18重點：基礎服務：基于深度學習的圖片自動分類給照片自動加標簽、和互聯網廣告結合根據網頁上的圖片，判斷應該給這個網頁的訪問者展示什么廣告：Cortica以往的互聯網廣告都是基于用戶訪問的網頁中的文本內容了解用戶的興趣，而沒有考慮到圖片內容。19和互聯網廣告結合根據網頁上的圖片，判斷應該給這個網頁的訪問者重點：圖像輸入的來源手機攝像頭谷歌眼鏡、百度眼鏡20重點：圖像輸入的來源手機攝像頭20重點：物品識別準確率的挑戰(zhàn)物品形變會影響某些物品的識別。例如：同一件服裝隨著人的姿勢不同，會發(fā)生很多形狀上的變化。相比之下，建筑物的識別要容易很多。拍攝角度也會影響人臉、服裝等的識別燈光明暗、物體反光也會影響物體識別。拍攝焦距也會影響物體識別。化妝也會影響人臉識別干擾圖像的遮擋會影響對商品圖片的識別21重點：物品識別準確率的挑戰(zhàn)物品形變會影響某些物品的識別。例如一種加強人臉識別率的策略把所有人臉圖形都調整到正面照角度，然后生成給每個人臉正面照生成一個3D模型。在這些3D模型之間進行比較，就更加準確。22一種加強人臉識別率的策略把所有人臉圖形都調整到正面照角度，然如何降低對于隱私的擔憂盡量少把圖像存儲在云端先不把技術用于涉及隱私的行業(yè)23如何降低對于隱私的擔憂盡量少把圖像存儲在云端23重點：圖像識別底層技術的開放一些公司通過以下方式，把底層的技術開放給廣大的、成千上萬的開發(fā)者，由他們來設計各種各樣的應用。云端API離線SDK開發(fā)包例如：騰訊、Face++24重點：圖像識別底層技術的開放一些公司通過以下方式，把底層的技語音識別技術也一樣有些公司側重于底層技術，把API和SDK開放給廣大的應用開發(fā)者：例如，云知聲另一些公司在別的公司提供的底層技術基礎上，開發(fā)具體的應用app。還有些公司不僅做底層，也做應用：例如羽扇智公司。25語音識別技術也一樣有些公司側重于底層技術，把API和SDK開圖像數據大數據應用基礎魏煒26圖像數據大數據應用基礎1計算機視覺的重要性圖像是信息的重要載體。人類獲取外界信息中，80%左右來自視覺。27計算機視覺的重要性圖像是信息的重要載體。2計算機視覺的基本原理首先，從圖片中提取出特征。這個特征不僅是每個像素的顏色，更重要的是更高級的特征，例如形狀、甚至圖片中物體的名稱。進而，可以對大量圖片進行聚類、分類、搜索。28計算機視覺的基本原理首先，從圖片中提取出特征。3計算機視覺的主要輔助技術圖像壓縮：可以減少描述圖像所用的數據量。圖像增強和復原：這是一種圖像預處理。目的是提高圖像質量，使圖像更加清晰。圖像分割：把圖像中有意義的部分提取出來，例如邊緣、區(qū)域等。圖像融合：把幾個關于某一場景的圖像合并，最大限度地利用多個圖像來源之間的互補信息，生成一個新圖像。29計算機視覺的主要輔助技術圖像壓縮：可以減少描述圖像所用的數據如何對韓國美女進行人臉識別2013年韓國選美競賽的20名參賽美女。對參賽選手進行人臉識別頗有難度。發(fā)型識別呢？30如何對韓國美女進行人臉識別2013年韓國選美競賽的20名參賽重點：人臉拍攝人臉，就能識別出這個人的表情：Emotient、Affectiva拍攝人臉，就能在人臉數據庫找出與其相似的人臉：百度魔圖、北京曠視科技的Face++。人臉數據庫可以是明星臉數據庫（百度）、也可以是社交媒體上的全部頭像（Face++）、也可以是罪犯人臉數據庫（MorphoTrust）從視頻中識別出含有某明星的片段：Orbeus身份識別——例如，Face++的云臉應用鎖、灝瀧智能科技的FaceEID人臉身份實證、杭州熱和科技檢測駕駛員疲勞駕駛精神狀態(tài)，并進行預警：灝瀧智能科技31重點：人臉拍攝人臉，就能識別出這個人的表情：Emotient人臉：識別表情、性別、年齡、種族曠視科技：目前只能識別微笑程度不能識別其他情緒32人臉：識別表情、性別、年齡、種族曠視科技：7人臉驗證33人臉驗證8重點：物品拍攝任意一個物品，就能給出物品的名稱：Camfind、百度輕拍拍攝紙媒內容（例如廣告、海報），就能鏈接到這個商品的零售網頁，或者得到商家優(yōu)惠券：Target公司的InaSnap手機應用、騰訊、基美文化傳媒的基美耀拍APP（與亮風臺合作開發(fā)）、億拍天下拍攝一件衣服，就能在零售商數據庫中找到這件衣服，或者相似的衣服：SnapFashion、Style-Eyes、Slyce、搜鞋客、圖圖搜衣、亮風臺34重點：物品拍攝任意一個物品，就能給出物品的名稱：Camfin重點：物品拍攝一個商品，就能在零售商數據庫中找出這件商品及同款商品的介紹、評論，并進行比價，而且能進行購買：Viscovery、北京同創(chuàng)網訊、百度與唯品會的合作拍攝一個景點，就能給出這個景點的名稱、介紹：亮風臺拍攝一件展品，就能在數據庫中找出這件展品的介紹：Guidico35重點：物品拍攝一個商品，就能在零售商數據庫中找出這件商品及同3611物品拍攝葡萄酒酒標，就能給出商品信息、并進行比價、購買：佛山市咔嚓購的酒咔嚓APP。37物品拍攝葡萄酒酒標，就能給出商品信息、并進行比價、購買：佛山物品拍攝一組食物，就能給出這些食物的營養(yǎng)含量：芯草莓科技的微營養(yǎng)App。38物品拍攝一組食物，就能給出這些食物的營養(yǎng)含量：芯草莓科技的微物品拍一個應用圖標，能識別出這是什么APP：亮風臺的應用拍拍APP39物品拍一個應用圖標，能識別出這是什么APP：亮風臺的應用拍拍文字拍攝外語文字，就能給出翻譯：Viscovery、曠視科技拍攝一個數學題，就能給出答案和解析：學習寶40文字拍攝外語文字，就能給出翻譯：Viscovery、曠視科技有一些公司采用了深度學習百度Orbeus曠視科技DNNresearchIQEnginesLooknowClarifaiJetpac41有一些公司采用了深度學習百度16重點：基礎服務：基于深度學習的圖片搜索以圖搜圖：百度、谷歌百度能識別出圖片中的元素，例如河流、倒影、建筑、樹木、白云、藍天等。拍攝圖片，就能根據圖中包含的元素生成一首詩：百度為你寫詩識別出畫作中的視覺概念，例如鴨子、走路、死尸，進而根據描述性詞匯組成的向量，用自然語言處理比較不同畫作之間的相似度：達特茅斯學院和微軟劍橋研究院42重點：基礎服務：基于深度學習的圖片搜索以圖搜圖：百度、谷歌1重點：基礎服務：基于深度學習的圖片自動分類給照片自動加標簽、歸類，進而可以用關鍵詞搜索圖片：Orbeus、Madbits、百度云43重點：基礎服務：基于深度學習的圖片自動分類給照片自動加標簽、和互聯網廣告結合根據網頁上的圖片，判斷應該給這個網頁的訪問者展示什么廣告：Cortica以往的互聯網廣告都是基于用戶訪問的網頁中的文本內容了解用戶的興趣，而沒有考慮到圖片內容。44和互聯網廣告結合根據網頁上的圖片，判斷應該給這個網頁的訪問者重點：圖像輸入的來源手機攝像頭谷歌眼鏡、百度眼鏡45重點：圖像輸入的來源手機攝像頭20重點：物品識別準確率的挑戰(zhàn)物品形變會影響某些物品的識別。例如：同一件服裝隨著人的姿勢不同，會發(fā)生很多形狀上的變化。相比之下，建筑物的識別要容易很多。拍攝角度也會影響人臉、服裝等的識別燈光明暗、物體反光也會影響物體識別。拍攝焦距也會影響物體識別?；瘖y也會影響人臉識別干擾圖像的遮擋會影響對商品圖片的識別46重點：物品識別準確率的挑戰(zhàn)物品形變會影響某些物品的識別。例如一種加強人臉識別率的策略把所有人臉圖形都調整到正面照角度，然后生成給每個人臉正面照生成一個3D模型。在這些3D模型之間進行比較，就更加準確。47一種加強人臉識別率的策略把所有人臉圖形都調整到正面照角度，然如何降低對于隱私的擔憂盡量少把圖像存儲在云端先不把技術用于涉及隱私的行業(yè)48如何降低對于隱私的擔憂盡量少把