(高清版)GBT 43862-2024 智能電視交互應(yīng)用接口技術(shù)要求

智能電視交互應(yīng)用接口技術(shù)要求2024-04-25發(fā)布2024-11-01實(shí)施國(guó)家市場(chǎng)監(jiān)督管理總局國(guó)家標(biāo)準(zhǔn)化管理委員會(huì)I前言 l2規(guī)范性引用文件 13術(shù)語(yǔ)和定義 14縮略語(yǔ) 15交互應(yīng)用接口描述 16交互應(yīng)用接口模型 26.1多媒體內(nèi)容交互接口模型 26.2控制交互接口模型 57交互應(yīng)用流程要求 57.1多媒體內(nèi)容交互 57.2控制交互 參考文獻(xiàn) ⅢGB/T43862—2024本文件按照GB/T1.1—2020《標(biāo)準(zhǔn)化工作導(dǎo)則第1部分：標(biāo)準(zhǔn)化文件的結(jié)構(gòu)和起草規(guī)則》的規(guī)定起草。請(qǐng)注意本文件的某些內(nèi)容可能涉及專(zhuān)利。本文件的發(fā)布機(jī)構(gòu)不承擔(dān)識(shí)別專(zhuān)利的責(zé)任。本文件由中華人民共和國(guó)工業(yè)和信息化部提出。本文件由全國(guó)音頻、視頻及多媒體系統(tǒng)與設(shè)備標(biāo)準(zhǔn)化技術(shù)委員會(huì)(SAC/TC242)歸口。本文件起草單位：中國(guó)電子技術(shù)標(biāo)準(zhǔn)化研究院、浙江大華技術(shù)股份有限公司、京東方科技集團(tuán)股份有限公司、北京牡丹視源電子有限責(zé)任公司、海信視像科技股份有限公司、工業(yè)和信息化部電子第五研究所、深圳創(chuàng)維-RGB電子有限公司、中山大學(xué)、深圳康佳電子科技有限公司、康佳集團(tuán)股份有限公司、四川長(zhǎng)虹電子控股集團(tuán)有限公司、北京小米電子產(chǎn)品有限公司、廈門(mén)視誠(chéng)科技有限公司、夏普電子研發(fā)(南京)有限公司、深圳光峰科技股份有限公司、樂(lè)金電子(中國(guó))研究開(kāi)發(fā)中心有限公司、東莞理工學(xué)院、上海索廣映像有限公司、天津大學(xué)、桂林電子科技大學(xué)、中國(guó)科學(xué)院信息工程研究所、廣東省華中萊格標(biāo)準(zhǔn)事務(wù)所有限公司、廈門(mén)廈華科技有限公司、華為終端有限公司、三星電子(中國(guó))研發(fā)中心。本文件主要起草人：李婧欣、曹策、曹霖、鐘花多、頓勝堡、徐暉、陳益軍、于清曉、景洪恩、張曼華、1智能電視交互應(yīng)用接口技術(shù)要求本文件規(guī)定了智能電視與移動(dòng)智能終端、個(gè)人計(jì)算機(jī)等設(shè)備之間交互應(yīng)用接口的邏輯架構(gòu)和交互應(yīng)用流程。本文件適用于智能電視與其他設(shè)備之間交互應(yīng)用接口的設(shè)計(jì)。2規(guī)范性引用文件本文件沒(méi)有規(guī)范性引用文件。3術(shù)語(yǔ)和定義下列術(shù)語(yǔ)和定義適用于本文件。智能電視smarttelevision具有操作系統(tǒng)、能安裝和卸載應(yīng)用軟件、具備一種或多種人機(jī)交互方式、接入互聯(lián)網(wǎng)或其他網(wǎng)絡(luò)并實(shí)現(xiàn)網(wǎng)絡(luò)服務(wù)、可擴(kuò)展其他應(yīng)用或業(yè)務(wù)的電視終端。在不同的終端設(shè)備之間實(shí)現(xiàn)多媒體內(nèi)容、控制信息等傳輸、共享、解析、展示、控制等一系列操作的應(yīng)用接口。第三方設(shè)備thirdpartydevice能與智能電視進(jìn)行交互的設(shè)備。4縮略語(yǔ)下列縮略語(yǔ)適用于本文件。IP:互聯(lián)網(wǎng)協(xié)議(InternetProtocol)TS:傳輸流(TransportStream)5交互應(yīng)用接口描述智能電視應(yīng)具備一個(gè)或多個(gè)交互應(yīng)用接口，用于實(shí)現(xiàn)智能電視與不同終端之間的多媒體內(nèi)容交互與控制交互，相關(guān)接口功能應(yīng)符合表1的規(guī)定。2表1智能電視交互應(yīng)用接口功能要求接口類(lèi)型接口名稱(chēng)功能要求多媒體內(nèi)容交互多媒體內(nèi)容播放多媒體內(nèi)容點(diǎn)播接口控制第三方設(shè)備上的多媒體內(nèi)容的播放、暫停、播放速度、快進(jìn)、快退、跳到指定播放時(shí)間、聲道切換；顯示正在播放的內(nèi)容名稱(chēng)、分辨率、編碼格式、文件大小、總時(shí)間長(zhǎng)度、已播放長(zhǎng)度、剩余播放長(zhǎng)度、播放速度、音軌等信息多媒體內(nèi)容推送接口響應(yīng)第三方設(shè)備上的多媒體內(nèi)容的播放、暫停、播放速度、快進(jìn)、快退、跳到指定播放時(shí)間、聲道切換等控制指令；顯示正在播放的內(nèi)容名稱(chēng)、分辨率、編碼格式、文件大小、總時(shí)間長(zhǎng)度、已播放長(zhǎng)度、剩余播放長(zhǎng)度、播放速度、音軌等信息第三方控制的多接口響應(yīng)第三方設(shè)備上的多媒體內(nèi)容的播放、暫停、播放速度、快進(jìn)、快退、跳到指定播放時(shí)間、聲道切換等控制指令；顯示正在播放的內(nèi)容名稱(chēng)、分辨率、編碼格式、文件大小、總時(shí)間長(zhǎng)度、已播放長(zhǎng)度、剩余播放長(zhǎng)度、播放速度、音軌等信息傳屏智能電視向第三方設(shè)備傳輸數(shù)據(jù)接口正播放的畫(huà)面不受交互的影響；向第三方設(shè)備傳輸數(shù)據(jù)終止前，智能電視的界面或應(yīng)用切換實(shí)時(shí)傳送至第三方設(shè)備智能電視接收第三方設(shè)備傳輸數(shù)據(jù)接口正播放的畫(huà)面不受交互的影響；接收第三方設(shè)備傳輸數(shù)據(jù)終止前，第三方設(shè)備的界面或應(yīng)用切換實(shí)時(shí)傳送至智能電視多端互動(dòng)獨(dú)立公共屏接口處理多臺(tái)第三方設(shè)備發(fā)送的控制信息并顯示處理后的畫(huà)面；將畫(huà)面?zhèn)骰亟o所有第三方設(shè)備多分屏接口從多臺(tái)第三方設(shè)備中選擇指定的設(shè)備，接收控制信息并顯示處理后的畫(huà)面；將畫(huà)面?zhèn)骰亟o指定的第三方設(shè)備控制交互遙控器控制接口接收第三方設(shè)備(遙控器及類(lèi)似功能設(shè)備)的指令信息(紅外按鍵信號(hào))鼠標(biāo)控制接口接收第三方設(shè)備(鼠標(biāo)及類(lèi)似功能設(shè)備)的指令信息(移動(dòng)軌跡坐標(biāo)信號(hào))傳感器控制接口接收第三方設(shè)備(傳感器及類(lèi)似功能設(shè)備)的指令信息(光電傳感器信號(hào))語(yǔ)音交互設(shè)備控制接口接收第三方設(shè)備(語(yǔ)音交互設(shè)備及類(lèi)似功能設(shè)備)的指令信息(音頻信號(hào))6交互應(yīng)用接口模型6.1多媒體內(nèi)容交互接口模型6.1.1多媒體內(nèi)容播放接口模型6.1.1.1多媒體內(nèi)容點(diǎn)播接口模型用戶通過(guò)智能電視在第三方設(shè)備上選擇多媒體內(nèi)容，由第三方設(shè)備將可播放的內(nèi)容推送至智能電3視本地播放。多媒體內(nèi)容點(diǎn)播交互應(yīng)用接口模型如圖1所示。點(diǎn)播信息多媒體內(nèi)容第二方設(shè)備點(diǎn)播信息多媒體內(nèi)容智能電視多媒體內(nèi)容圖1多媒體內(nèi)容點(diǎn)播交互應(yīng)用接口模型6.1.1.2多媒體內(nèi)容推送接口模型用戶通過(guò)第三方設(shè)備選擇存儲(chǔ)在本地的多媒體內(nèi)容并推送到指定的智能電視進(jìn)行播放。多媒體內(nèi)容推送交互應(yīng)用接口模型如圖2所示。推送多媒體內(nèi)容第二方設(shè)備推送多媒體內(nèi)容智能電視多媒體內(nèi)容圖2多媒體內(nèi)容推送交互應(yīng)用接口模型6.1.1.3第三方控制的多媒體內(nèi)容播放接口模型用戶通過(guò)第三方設(shè)備瀏覽局域網(wǎng)或互聯(lián)網(wǎng)內(nèi)容平臺(tái)上的多媒體內(nèi)容，選定多媒體內(nèi)容并在選定的智能電視進(jìn)行播放。第三方控制的多媒體內(nèi)容播放交互應(yīng)用接口模型如圖3所示。多煤體內(nèi)容多煤體內(nèi)容智能電視多媒體內(nèi)容多媒體內(nèi)容控制信息瀏覽、選擇多媒體內(nèi)容第三方設(shè)備局域網(wǎng)/互聯(lián)網(wǎng)內(nèi)容平臺(tái)圖3第三方控制的多媒體內(nèi)容播放交互應(yīng)用接口模型6.1.2傳屏接口模型6.1.2.1智能電視向第三方設(shè)備傳輸數(shù)據(jù)接口模型用戶在第三方設(shè)備上實(shí)時(shí)觀看智能電視畫(huà)面的同時(shí)，通過(guò)對(duì)設(shè)備屏幕的觸摸、點(diǎn)擊、滑動(dòng)或者使用提供的按鍵等方式發(fā)送控制信息給智能電視，實(shí)時(shí)操控智能電視。智能電視向第三方設(shè)備傳輸數(shù)據(jù)交互應(yīng)用接口模型如圖4所示。4多媒體信息第三方設(shè)備智能電視第三方設(shè)備控制信息圖4智能電視向第三方設(shè)備傳輸數(shù)據(jù)交互應(yīng)用接口模型6.1.2.2智能電視接收第三方設(shè)備傳輸數(shù)據(jù)接口模型用戶通過(guò)對(duì)第三方設(shè)備屏幕的觸摸、點(diǎn)擊、滑動(dòng)或者使用提供的按鍵等方式發(fā)送控制信息給智能電視，實(shí)時(shí)操控智能電視。智能電視接收第三方設(shè)備傳輸數(shù)據(jù)交互應(yīng)用接口模型如圖5所示。多媒體信息第三方設(shè)備智能電視第三方設(shè)備控制信息圖5智能電視接收第三方設(shè)備傳輸數(shù)據(jù)交互應(yīng)用接口模型6.1.3多端互動(dòng)接口模型6.1.3.1獨(dú)立公共屏接口模型獨(dú)立公共屏交互應(yīng)用接口模型如圖6所示，多個(gè)第三方設(shè)備采用一個(gè)公共屏幕作為內(nèi)容顯示端。智能電視粉粉第三方設(shè)備1第三方設(shè)備N(xiāo)第三方設(shè)備1圖6獨(dú)立公共屏交互應(yīng)用接口模型智能電視作為獨(dú)立公共屏?xí)r，僅為第三方設(shè)備產(chǎn)生的控制指令和數(shù)據(jù)提供同步顯示服務(wù)，所有第三方設(shè)備把控制指令和數(shù)據(jù)分別發(fā)送給智能電視，由智能電視匯總顯示所有第三方設(shè)備的控制指令和數(shù)據(jù)執(zhí)行產(chǎn)生的最終畫(huà)面。智能電視將這個(gè)最終畫(huà)面?zhèn)骰亟o第三方設(shè)備。第三方設(shè)備實(shí)現(xiàn)與智能電視的畫(huà)面同步。到智能電視上顯示。智能電視把匯總顯示的屏幕內(nèi)容傳回到各個(gè)第三方設(shè)備端，使得各個(gè)第三方設(shè)備端顯示所有第三方設(shè)備操作結(jié)果匯總的畫(huà)面。6.1.3.2多分屏接口模型多分屏由智能電視對(duì)第三方設(shè)備以廣播形式發(fā)送的信息根據(jù)應(yīng)用需要，選擇性地對(duì)內(nèi)容信息進(jìn)行顯示。多分屏交互應(yīng)用接口模型如圖7所示。5控制折令控制指令數(shù)據(jù)控制指令第三方設(shè)備4智能電視數(shù)據(jù)圖7多分屏交互應(yīng)用接口模型6.2控制交互接口模型控制交互通過(guò)第三方設(shè)備的多種人機(jī)交互模塊，對(duì)智能電視進(jìn)行非接觸式控制。第三方設(shè)備人機(jī)交互模塊與智能電視控制交互應(yīng)用接口模型如圖8所示。智能電視第三方設(shè)備人機(jī)交互模塊圖8第三方設(shè)備人機(jī)交互模塊與智能電視控制交互應(yīng)用接口模型第三方設(shè)備的人機(jī)交互模塊應(yīng)包括但不限于遙控器、鼠標(biāo)、傳感器、語(yǔ)音交互設(shè)備等。a)遙控器控制：第三方設(shè)備的遙控器模擬紅外遙控界面，將界面的點(diǎn)擊事件轉(zhuǎn)換為遙控器紅外按鍵信號(hào)，發(fā)送至智能電視。智能電視根據(jù)接收到紅外按鍵信號(hào)做出響應(yīng)。b)鼠標(biāo)控制：第三方設(shè)備模擬鼠標(biāo)功能，采集移動(dòng)軌跡坐標(biāo)，發(fā)送至智能電視。智能電視將軌跡坐標(biāo)轉(zhuǎn)換為相對(duì)位移并將屏幕上的光標(biāo)做出相應(yīng)的移動(dòng)。c)傳感器控制：第三方設(shè)備采集自身傳感器數(shù)據(jù)，發(fā)送至智能電視。智能電視根據(jù)傳感器數(shù)據(jù)做出響應(yīng)。d)語(yǔ)音交互設(shè)備控制：第三方設(shè)備采集音頻內(nèi)容，識(shí)別并解析為控制指令，發(fā)送至智能電視。智能電視根據(jù)控制指令做出相應(yīng)操作。7交互應(yīng)用流程要求7.1多媒體內(nèi)容交互7.1.1多媒體內(nèi)容播放多媒體內(nèi)容點(diǎn)播交互應(yīng)用流程如圖9所示，應(yīng)包括：6a)用戶通過(guò)智能電視請(qǐng)求瀏覽第三方設(shè)備的多媒體內(nèi)容列表并選擇需要播放的多媒體內(nèi)容，該步驟調(diào)用了內(nèi)容目錄服務(wù)下的瀏覽操作；b)用戶通過(guò)智能電視向第三方設(shè)備請(qǐng)求獲取其多媒體內(nèi)容；c)第三方設(shè)備響應(yīng)請(qǐng)求并向智能電視傳輸多媒體內(nèi)容。第二方設(shè)備智能電視a)請(qǐng)求瀏覽，選擇多媒體內(nèi)容列表b)請(qǐng)求獲取多媒體內(nèi)容c)傳輸多媒體內(nèi)容圖9多媒體內(nèi)容點(diǎn)播交互應(yīng)用流程圖7.1.1.2多媒體內(nèi)容推送多媒體內(nèi)容推送交互應(yīng)用流程如圖10所示，應(yīng)包括：a)第三方設(shè)備與智能電視相互發(fā)現(xiàn)；b)第三方設(shè)備顯示多媒體內(nèi)容列表，智能電視上可選顯示多媒體內(nèi)容列表；c)第三方設(shè)備選擇多媒體內(nèi)容，指定智能電視進(jìn)行播放；d)第三方設(shè)備向智能電視推送多媒體數(shù)據(jù)；e)智能電視進(jìn)行多媒體播放；f)第三方設(shè)備隨時(shí)對(duì)多媒體播放進(jìn)行控制。第三方設(shè)備智能電視a)設(shè)備發(fā)現(xiàn)b)顯示多媒體內(nèi)容列表c)選擇多媒體內(nèi)容，指定智能電視d)推送多媒體數(shù)據(jù)e)播放r)播放控制圖10智能電視多媒體內(nèi)容推送交互應(yīng)用流程圖77.1.1.3第三方控制的多媒體內(nèi)容播放第三方控制的多媒體內(nèi)容播放交互應(yīng)用流程如圖11所示，應(yīng)包括：a)第三方設(shè)備與智能電視相互發(fā)現(xiàn)；b)第三方設(shè)備向多媒體內(nèi)容請(qǐng)求多媒體內(nèi)容列表；c)多媒體內(nèi)容向第三方設(shè)備返回多媒體內(nèi)容列表；d)第三方設(shè)備顯示多媒體內(nèi)容列表，智能電視上可選顯示多媒體內(nèi)容列表；e)第三方設(shè)備選擇多媒體內(nèi)容，指定智能電視進(jìn)行播放；f)智能電視向多媒體內(nèi)容請(qǐng)求多媒體數(shù)據(jù)；g)多媒體內(nèi)容向智能電視返回多媒體數(shù)據(jù)；h)智能電視進(jìn)行多媒體播放；i)第三方設(shè)備隨時(shí)對(duì)多媒體播放進(jìn)行控制。第三方設(shè)備料能電視多媒體內(nèi)容a)設(shè)備發(fā)現(xiàn)b)請(qǐng)求多媒體內(nèi)容列表c)返回多媒體內(nèi)容列表d)顯示多媒體內(nèi)容列表c)選擇多媒體內(nèi)容，指定智能電視f)請(qǐng)求多媒體數(shù)據(jù)g)返川多媒體數(shù)據(jù)h)播放i)播放控制圖11第三方控制的多媒體內(nèi)容播放交互應(yīng)用流程圖7.1.2.1智能電視向第三方設(shè)備傳輸數(shù)據(jù)智能電視向第三方設(shè)備傳輸數(shù)據(jù)交互應(yīng)用流程如圖12所示，應(yīng)包括：a)第三方設(shè)備向局域網(wǎng)內(nèi)所有具備接收廣播信息功能的智能電視發(fā)送查找消息，等待反饋；b)智能電視收到第三方設(shè)備發(fā)送的廣播消息后發(fā)送確認(rèn)消息；c)第三方設(shè)備接收到智能電視響應(yīng)確認(rèn)消息后，按照約定的格式解析智能電視的IP地址及其他信息，在第三方設(shè)備本地顯示智能電視名稱(chēng)或圖標(biāo)；8d)建立第三方設(shè)備與智能電視的命令通道；e)建立第三方設(shè)備與智能電視的數(shù)據(jù)連接通道；f)智能電視抓屏合成TS并發(fā)送：g)第三方設(shè)備對(duì)智能電視發(fā)送過(guò)來(lái)的TS進(jìn)行播放注：為實(shí)現(xiàn)第三方設(shè)備和智能電視兩端的延遲時(shí)間較短，第三方設(shè)備的播放器緩沖區(qū)域大小需要根據(jù)實(shí)際開(kāi)發(fā)情況進(jìn)行調(diào)整。第三方設(shè)備第三方設(shè)備等待設(shè)備查找廣播a)發(fā)送設(shè)備查找廣播c)解析設(shè)備信息選擇設(shè)備e)建立數(shù)據(jù)連接通道f)抓屏合成TS并發(fā)送g)播放等待連接圖12智能電視向第三方設(shè)備傳輸數(shù)據(jù)交互應(yīng)用流程圖7.1.2.2智能電視接收第三方設(shè)備傳輸數(shù)據(jù)智能電視接收第三方設(shè)備傳輸數(shù)據(jù)交互應(yīng)用流程如圖13所示，應(yīng)包括：a)第三方設(shè)備向局域網(wǎng)內(nèi)所有具備接收廣播信息功能的智能電視發(fā)送查找消息，等待反饋；b)智能電視收到第三方設(shè)備發(fā)送的廣播消息后發(fā)送確認(rèn)消息；c)第三方設(shè)備解析智能電視的IP地址及其他信息；d)建立第三方設(shè)備與智能電視的命令通道；e)建立第三方設(shè)備與智能電視的數(shù)據(jù)連接通道；f)第三方設(shè)備向智能電視發(fā)送多媒體內(nèi)容；g)智能電視對(duì)第三方設(shè)備發(fā)送過(guò)來(lái)的TS進(jìn)行播放。9第三方設(shè)備第三方設(shè)備等符設(shè)備查找廣播a)發(fā)送設(shè)備查找廣播b)反饋設(shè)備在線信息c)解析設(shè)備信息選擇設(shè)備等待連接d)建立命令通道c)建立數(shù)據(jù)連接通道r)發(fā)送多媒體內(nèi)容g)播放智能電視圖13智能電視接收第三方設(shè)備傳輸數(shù)據(jù)交互應(yīng)用流程圖獨(dú)立公共屏交互應(yīng)用流程如圖14所示，應(yīng)包括：a)創(chuàng)建會(huì)話：開(kāi)始時(shí)由信息發(fā)送設(shè)備向智能電視創(chuàng)建一個(gè)會(huì)話，其中包含一個(gè)會(huì)話名；b)尋找會(huì)話：第三方設(shè)備按照會(huì)話名尋找會(huì)話；c)廣播會(huì)話名：智能電視將會(huì)話的會(huì)話名在局域網(wǎng)內(nèi)廣播；d)加入會(huì)話：收到廣播的會(huì)話名與尋找的會(huì)話名匹配時(shí)，第三方設(shè)備向智能電視發(fā)送加入會(huì)話的e)確認(rèn)：智能電視收到加入會(huì)話的申請(qǐng)之后，向第三方設(shè)備返回申請(qǐng)確認(rèn)的消息并把第三方設(shè)備加入會(huì)話中；f)發(fā)送數(shù)據(jù)：第三方設(shè)備將自身產(chǎn)生的數(shù)據(jù)發(fā)送給智能電視；g)匯總數(shù)據(jù)：智能電視將從各個(gè)第三方設(shè)備收集的數(shù)據(jù)匯總處理后顯示最后的結(jié)果；h)將匯總過(guò)的屏幕畫(huà)面?zhèn)骰兀褐悄茈娨晫⒆詈蟮玫降钠聊划?huà)面?zhèn)骰馗鱾€(gè)第三方設(shè)備端，實(shí)現(xiàn)畫(huà)面同步。智能電視智能電視第三方設(shè)備1第三方設(shè)備N(xiāo)a)創(chuàng)建會(huì)話b)尋找會(huì)話c)廣播會(huì)話名c)廣播會(huì)話名d)加入會(huì)話d)加入會(huì)話e)確認(rèn)f)發(fā)送數(shù)據(jù)f)發(fā)送數(shù)據(jù)g)匯總數(shù)據(jù)h)將匯總過(guò)的畫(huà)面?zhèn)骰豩)將匯總過(guò)的畫(huà)面?zhèn)骰豣)尋找會(huì)話圖14獨(dú)立公共屏交互應(yīng)用流程圖多分屏交互應(yīng)用流程如圖15所示，應(yīng)包括：a)創(chuàng)建會(huì)話：開(kāi)始時(shí)由信息發(fā)送設(shè)備向智能電視創(chuàng)建一個(gè)會(huì)話，其中包含一個(gè)會(huì)話名；b)尋找會(huì)話：第三方設(shè)備按照會(huì)話名尋找會(huì)話；c)廣播會(huì)話名：智能電視將會(huì)話的會(huì)話名在局域網(wǎng)內(nèi)廣播；d)加入會(huì)話：收到廣播的會(huì)話名與尋找的會(huì)話名匹配時(shí)，第三方設(shè)備向智能電視發(fā)送加入會(huì)話的e)確認(rèn)：智能電視收到加入會(huì)話的申請(qǐng)之后，向第三方設(shè)備返回申請(qǐng)確認(rèn)的消息并把第三方設(shè)備加入會(huì)話中；f)發(fā)送數(shù)據(jù)：各個(gè)第三方設(shè)備在需要時(shí)分別向其他所有第三方設(shè)備廣播數(shù)據(jù)；g)篩選處理：各個(gè)第三方設(shè)備將按需篩選出的信息各自進(jìn)行處理和顯示。智能電視智能電視第三方?jīng)]備1a)創(chuàng)建會(huì)話b)尋找會(huì)話c)廣播會(huì)話名c)廣播會(huì)話名d)加入會(huì)話e)確認(rèn)c)確認(rèn)f)發(fā)送數(shù)據(jù)f)發(fā)送數(shù)據(jù)f)發(fā)送數(shù)據(jù)f)發(fā)送數(shù)據(jù)f)發(fā)送數(shù)據(jù)f)發(fā)送數(shù)據(jù)g)篩選處理g)篩選處理b)尋我會(huì)話g)篩選處理第三方設(shè)備N(xiāo)圖15多分屏交互應(yīng)用流程圖7.2控制交互7.2.1第三方設(shè)備遙控器對(duì)智能電視控制第三方設(shè)備遙控器對(duì)智能電視控制的交互應(yīng)用流程如圖16所示，應(yīng)包括：a)第三方設(shè)備遙控器發(fā)送設(shè)備發(fā)現(xiàn)的指令；b)接收到設(shè)備發(fā)現(xiàn)指令的智能電視向第三方設(shè)備反饋相關(guān)信息；c)第三方設(shè)備選擇智能電視建立連接；d)第三方設(shè)備采集本地保存的智能電視的遙控信息；e)第三方設(shè)備遙控器向智能電視發(fā)送遙控信息；f)智能電視執(zhí)行接收到的遙控信息；g)智能電視響應(yīng)執(zhí)行結(jié)果；h)根據(jù)需要智能電視反饋執(zhí)行結(jié)果給第三方設(shè)備。第三方設(shè)備遙控器c)選擇智能電視建立連接料能電視a)設(shè)備發(fā)現(xiàn)h)反饋設(shè)備在線信息c)發(fā)送遙控信息f)執(zhí)行遙控信息g)響應(yīng)執(zhí)行結(jié)果h)反饋執(zhí)行結(jié)果圖16第三方設(shè)備遙控器對(duì)智能電視控制交互應(yīng)用流程圖7.2.2第三方設(shè)備鼠標(biāo)對(duì)智能電視控制第三方設(shè)備鼠標(biāo)對(duì)智能電視控制交互應(yīng)用流程如圖17所示，應(yīng)包括：a)第三方設(shè)備鼠標(biāo)發(fā)送設(shè)備發(fā)現(xiàn)的指令；b)接收到設(shè)備發(fā)現(xiàn)指令的智能電視向第三方設(shè)備反饋相關(guān)信息；c)第三方設(shè)備選擇智能電視建立連接；d)第三方設(shè)備收集鼠標(biāo)的按鍵和移動(dòng)軌跡信息；e)第三方設(shè)備鼠標(biāo)向智能電視發(fā)送鼠標(biāo)操作數(shù)據(jù)；f)智能電視執(zhí)行接收到的鼠標(biāo)操作數(shù)據(jù)；g)智能電視響應(yīng)執(zhí)行結(jié)果。第三方設(shè)備鼠標(biāo)c)選擇智能電視建立連接智能電視a)設(shè)備發(fā)現(xiàn)b)反饋設(shè)備在線信息d)采集鼠標(biāo)操作數(shù)據(jù)c)發(fā)送鼠標(biāo)操作數(shù)據(jù)f)執(zhí)行鼠標(biāo)操作數(shù)據(jù)g)響應(yīng)執(zhí)行結(jié)果圖17第三方設(shè)備鼠標(biāo)對(duì)智能電視控制交互應(yīng)用流程圖7.2.3第三方設(shè)備傳感器對(duì)智能電視控制第三方設(shè)備傳感器對(duì)智能電視控制交互應(yīng)用流程如圖18所示，應(yīng)包括；a)第三方設(shè)備傳感器發(fā)送設(shè)備發(fā)現(xiàn)的指令；b)接收到設(shè)備發(fā)現(xiàn)指令的智能電視向第三方設(shè)備反饋相關(guān)信息；c)第三方設(shè)備選擇智能電視建立連接；d)第三方設(shè)備采集傳感器數(shù)據(jù)；e)第三方設(shè)備傳感器向智能電視發(fā)送傳感器數(shù)據(jù)；f)智能電視執(zhí)行接收到的傳感器數(shù)據(jù)；g)智能電視響應(yīng)執(zhí)行結(jié)果。智能電視智能電視a)設(shè)備發(fā)現(xiàn)b)反饋設(shè)備在線信息c)選擇智能電視建立連接數(shù)據(jù)c)發(fā)送傳感器數(shù)據(jù)|t)執(zhí)行傳感器數(shù)據(jù)g)響應(yīng)執(zhí)行結(jié)果第三方?jīng)]備傳感器圖18第三方設(shè)備傳感器對(duì)智能電視控制交互應(yīng)用流程圖7.2.4第三方設(shè)備對(duì)智能電視語(yǔ)音控制第三方設(shè)備對(duì)智能電視語(yǔ)音控制交互應(yīng)用流程如圖19和圖20所示。其中，語(yǔ)音識(shí)別的過(guò)程應(yīng)通過(guò)智能電視或帶有語(yǔ)音模塊的第三方設(shè)備實(shí)現(xiàn)。通過(guò)智能電視語(yǔ)音模塊語(yǔ)音識(shí)別的交互應(yīng)用具體應(yīng)包括：a)智能電視語(yǔ)音模塊發(fā)送設(shè)備發(fā)現(xiàn)的指令；b)接收到設(shè)備發(fā)現(xiàn)指令的智能電視向智能電視語(yǔ)音模塊反饋相關(guān)信息；c)智能電視語(yǔ)音模塊選擇智能電視建立連接；d)智能電視語(yǔ)音模塊采集語(yǔ)音；e)智能電視語(yǔ)音模塊向智能電視發(fā)送語(yǔ)音；f)智能電視本地識(shí)別語(yǔ)音內(nèi)容(也可將語(yǔ)音內(nèi)容發(fā)送到云服務(wù)器識(shí)別，云服務(wù)器識(shí)別后將結(jié)果返回智能電視);g)智能電視執(zhí)行識(shí)別后的語(yǔ)音信息；h)智能電視響應(yīng)執(zhí)行結(jié)果；i)根據(jù)需要智能電視反饋執(zhí)行結(jié)果給智能電視語(yǔ)音模塊。智能電視智能電視語(yǔ)音模塊a)設(shè)備發(fā)現(xiàn)b)反饋設(shè)備在線信息c)選擇料能電視建立連接d)采集語(yǔ)音e)發(fā)送語(yǔ)音f)識(shí)別語(yǔ)音內(nèi)容智能電視通過(guò)云服務(wù)器識(shí)別語(yǔ)音內(nèi)容g)執(zhí)行識(shí)別后的語(yǔ)音信息h)響應(yīng)執(zhí)行結(jié)果i)反饋執(zhí)行結(jié)果云服務(wù)器智能電視圖19通過(guò)智能電視語(yǔ)音模塊語(yǔ)音識(shí)別的交互應(yīng)用流程圖通過(guò)帶有語(yǔ)音模塊的第三方設(shè)備語(yǔ)音識(shí)別的交互應(yīng)用具體應(yīng)包括：a)第三方設(shè)備語(yǔ)音模塊發(fā)送設(shè)備發(fā)現(xiàn)的指令；b)接收到設(shè)備發(fā)現(xiàn)指令的智能電視向第三方設(shè)備反饋相關(guān)信息；c)第三方設(shè)備選擇智能電視建立連接；d)第三方設(shè)備語(yǔ)音模塊采集語(yǔ)音；e)第三方設(shè)備語(yǔ)音模塊本地識(shí)別語(yǔ)音內(nèi)容(也可將語(yǔ)音內(nèi)容發(fā)送到云服務(wù)器識(shí)別，云服務(wù)器識(shí)別后將結(jié)果返回第三方設(shè)備);f)第三方設(shè)備語(yǔ)音模塊向智能電視發(fā)送識(shí)別后的語(yǔ)音內(nèi)容；g)智能電視執(zhí)行識(shí)別后的語(yǔ)音信息；h)智能電視響應(yīng)執(zhí)行結(jié)果；i)根據(jù)需要智能電視反饋執(zhí)行結(jié)果給第三方設(shè)備。云服務(wù)器第三方設(shè)備語(yǔ)音模塊智能電視a)設(shè)備發(fā)現(xiàn)b)反饋設(shè)備在線信息c:)選擇智能電視建立連接d)采集語(yǔ)音e)識(shí)別語(yǔ)音內(nèi)容第三方設(shè)備通過(guò)云服務(wù)器識(shí)別語(yǔ)音內(nèi)容f)發(fā)送識(shí)別后的語(yǔ)音內(nèi)容g)執(zhí)行識(shí)別后的語(yǔ)音信息h)響應(yīng)執(zhí)行結(jié)果i)反饋執(zhí)行結(jié)果圖20通過(guò)帶有