視頻大數(shù)據(jù)技術(shù)趨勢及實(shí)踐

視頻大數(shù)據(jù)技術(shù)趨勢及實(shí)踐第1頁/共26頁目錄現(xiàn)場疑問解答技術(shù)發(fā)展概述01020304常規(guī)處理框架具體實(shí)踐說明第2頁/共26頁三元空間視頻資源分類現(xiàn)實(shí)世界物理空間網(wǎng)絡(luò)世界信息空間人類認(rèn)知社會空間網(wǎng)絡(luò)層面社會層面政府、企事業(yè)、平面媒體物理層面?zhèn)鞲衅?、條碼、二維碼三元數(shù)據(jù)富媒體數(shù)據(jù)基礎(chǔ)網(wǎng)絡(luò)數(shù)據(jù)自媒體 日志數(shù)據(jù) 數(shù)據(jù)社交網(wǎng)絡(luò)、 搜索引擎、網(wǎng)博客、微博 購、金融支付文本、音視頻、

信令、定位、圖片、照片 計費(fèi)網(wǎng)上視頻數(shù)據(jù)，除了有節(jié)目內(nèi)容外，還包括個人身份信息、位置信息、通信錄、應(yīng)用偏好信息，可能還有賬號信息等。來源：鄔賀銓，視頻大數(shù)據(jù)的發(fā)展與應(yīng)用，2016年03月第3頁/共26頁視頻數(shù)據(jù)的常規(guī)處理視頻關(guān)聯(lián)分析文件信息標(biāo)題關(guān)鍵詞用戶名IP地址采集日期視頻時長時空信息運(yùn)行時間監(jiān)控編號視頻內(nèi)容挖掘參考幀圖像識別圖像描述圖像定位圖像生成特征轉(zhuǎn)換語音轉(zhuǎn)文本字幕分離OCR來源：Microsoft，HAL，NBA，Karen's.etc第4頁/共26頁深度學(xué)習(xí)用于圖像描述來源：Google，2014；Microsoft，2015Google和Microsoft的工程師開發(fā)的機(jī)器學(xué)習(xí)算法，能自動生成圖片題注說明，準(zhǔn)確地描述圖像的內(nèi)容第5頁/共26頁深度學(xué)習(xí)用于視頻分析來源：TranslatingVideostoNaturalLanguageUsingDeepRecurrentNeuralNetworks,2015.04第6頁/共26頁深度學(xué)習(xí)用于視頻分析來源：BidirectionalLong-ShortTermMemoryforVideoDescription,2016.06第7頁/共26頁深度學(xué)習(xí)技術(shù)趨勢ArchitecturesmorecomplexandsophisticatedAllthecoolkidsareusingLSTMsAttentionmodelsareshowingupNeuralTuringMachinesremaininterestingDeeplearningforCVandNLParecross-hybridizingeachotherSymbolicdifferentiationisbecomingevenmoreimportantSurprisingresultsarehappeningTheintersectionofdeepandreinforcementlearningcontinuesIfyouaren'tusingbatchnormalizationyoushouldNeuralnetworkresearchandproductionisationgohandinhand來源：BradNeuberg,10DeepLearningTrendsatNIPS2015,2015.12第8頁/共26頁目錄現(xiàn)場疑問解答技術(shù)發(fā)展概述01020304常規(guī)處理框架具體實(shí)踐說明第9頁/共26頁平臺整體框架人臉建庫人臉識別圖像文件文本文件音頻特征語音識別圖像標(biāo)注圖像識別視頻指紋視頻識別全媒體內(nèi)容管理語音全文檢索圖像瀏覽檢索視頻/片段瀏覽檢索音頻文件深度學(xué)習(xí)平臺全媒體聚合云平臺統(tǒng)一檢索門戶API/WebService視頻文件話題聚類字幕匹配物體追蹤以圖搜圖以圖搜視頻局部圖像搜索其他融合架構(gòu)基礎(chǔ)設(shè)施第10頁/共26頁文本挖掘第11頁/共26頁語音識別第12頁/共26頁圖像識別第13頁/共26頁內(nèi)容審核第14頁/共26頁以圖搜圖第15頁/共26頁以圖搜視頻第16頁/共26頁目錄現(xiàn)場疑問解答技術(shù)發(fā)展概述01020304常規(guī)處理框架具體實(shí)踐說明第17頁/共26頁案例：某市云計算中心公安云2012年8月開通，市電子政務(wù)外網(wǎng)整體遷移至云計算中心，并建設(shè)數(shù)據(jù)共享服務(wù)平臺和地理信息服務(wù)平臺，打造政務(wù)云依托政務(wù)云，在青山區(qū)試點(diǎn)社會管理和服務(wù)創(chuàng)新，得到各級領(lǐng)導(dǎo)廣泛認(rèn)可目前，部署各類服務(wù)器、存儲及網(wǎng)絡(luò)設(shè)備400余臺，并達(dá)到三級等保要求市公安云依托云計算中心建設(shè)，是公安行業(yè)首個采用云計算方式構(gòu)建信息系統(tǒng)的地區(qū)第18頁/共26頁案例：某市云計算中心公安云視頻結(jié)構(gòu)化分析智能目標(biāo)搜索視頻圖像大數(shù)據(jù)人臉識別搜索車型車牌識別車主、車輛信息身份證、實(shí)名信息飛機(jī)、高鐵票信息交通卡口數(shù)據(jù)手機(jī)號、通話信息實(shí)名管理大數(shù)據(jù)社交賬號、網(wǎng)絡(luò)信息公共安全視頻偵查應(yīng)急指揮執(zhí)法查驗(yàn)緝私情報信用管理國家反恐第19頁/共26頁案例：某市云計算中心公安云視頻結(jié)構(gòu)化分析智能目標(biāo)搜索第20頁/共26頁案例：某市云計算中心公安云第21頁/共26頁案例：某市云計算中心公安云車牌號、車牌顏色、車型、車身顏色、車標(biāo)、車型、年代、人臉數(shù)、人臉圖