Sobey遷移系統(tǒng)產品培訓

1、主要內容主要內容一、數(shù)字媒體資料遷移系統(tǒng)簡介二、常用的磁帶庫介紹三、安裝前的準備四、運行前的配置五、主要功能操作六、與索貝媒資的聯(lián)調七、問題與解答一、數(shù)字媒體資料遷移系統(tǒng)簡介一、數(shù)字媒體資料遷移系統(tǒng)簡介 產品簡介 設計目標 產品特色 組成模塊產品簡介索貝數(shù)字媒體資料遷移系統(tǒng)Sobey Digital Media Archive System (DMA) 原稱SobeyArchive，是索貝數(shù)碼開發(fā)的媒體資產管理系統(tǒng)和網(wǎng)絡系統(tǒng)中的核心組件之一。系統(tǒng)支持在線、近線、離線等存儲方式結合的多級存儲體系，支持硬盤、磁帶庫等各種存儲源之間靈活的數(shù)據(jù)遷移，支持廣播電視行業(yè)的視音頻數(shù)據(jù)歸檔和回調的應用，以通用

2、中間件的方式為實際的應用業(yè)務系統(tǒng)提供穩(wěn)定、可靠和高效的數(shù)據(jù)遷移管理平臺。作為基礎平臺模塊，DMA可以支撐索貝公司的其它系統(tǒng)模塊，如：SobeyMAM、SobeyNet、SobeyAir等。設計目標 全面支持各種存儲源之間靈活的數(shù)據(jù)遷移 支持廣播電視行業(yè)的視音頻數(shù)據(jù)歸檔和回調的應用 以通用中間件的方式為實際的應用業(yè)務系統(tǒng)提供穩(wěn)定、可靠和高效的數(shù)據(jù)遷移管理平臺。產品特色 與SobeyMAM媒資系統(tǒng)、SobeyNet非編網(wǎng)、SobeyAir自動播出系統(tǒng)的無縫結合 采用優(yōu)化的分布式軟件架構 靈活完善的多級存儲體系 面向對象的數(shù)據(jù)遷移 結合視音頻應用的部分恢復功能 多版本支持不同的應用 完備的遷移管理策

3、略 完整的數(shù)據(jù)保護機制 兼顧效率和開放性的格式DMA系統(tǒng)組成模塊二、常用的磁帶庫介紹二、常用的磁帶庫介紹 Sony PetaSite 系列 StorageTek 系列（STK） IBM 3584Sony PetaSite 系列常用的Sony磁帶庫 PetaSite CSM-200BF PetaSite CSM-100BF PetaSite CSM-60BFPetaSite CSM-200BF/BSI/O PortI/O PortIN USEI/O PortI/O PortIN USEI/O PortI/O PortIN USEIN USEPetaSiteXMMB DriveMB DriveMB

4、 DriveHUB12V24V12V24VDVI/FB BAC ACI/O PortI/O Port12V12VMAC IN24VBSony PetaSite 系列磁帶庫容量磁帶庫容量磁帶機數(shù)磁帶機數(shù)磁帶個數(shù)磁帶個數(shù)最大總容量最大總容量前面前面后面后面總計總計CSM-200BF/BS9 - 126013219296TB5 - 872132204102TB2 - 484132216108TBCSM-100BF/BS2 - 12604810854TBCSM-60BF/BS2 - 126006030TBStorageTek 系列常用StorageTek磁帶庫 L700e L180 L80/L40/L

5、20StorageTek磁帶庫 StorageTek磁帶庫通常的接口方式為FC或SCSI，庫內配置的磁帶機接口方式通常為FC接口 安裝中需要服務器安裝磁帶庫驅動以及SCSI接口通訊協(xié)議ASPI三、安裝前的準備三、安裝前的準備 理解系統(tǒng)的運行方式 系統(tǒng)部署規(guī)劃 設備與運行環(huán)境準備遷移系統(tǒng)運行方式遷移控制臺遷移控制臺API接口接口遷移管理模塊遷移管理模塊遷移模塊遷移模塊設備管理模塊設備管理模塊磁帶庫設備磁帶庫設備近線存儲（磁帶機）近線存儲（磁帶機）離線存儲離線存儲緩沖池緩沖池在線存儲在線存儲(硬盤塔硬盤塔)第三方應用第三方應用遷移控制臺發(fā)出遷移任務遷移管理器根據(jù)任務優(yōu)先級排隊，并在有遷移器空閑時，

6、向該遷移器，發(fā)出遷移指令。遷移器收到指令后，向設備管理器申請設備。設備管理器在控制磁帶機加載磁帶，所有設備準備就緒后，返回就緒狀態(tài)。遷移器在設備準備就緒后，開始執(zhí)行數(shù)據(jù)任務。第三方應用，如媒資系統(tǒng)，也可以通過API接口向遷移系統(tǒng)發(fā)出遷移任務。遷移系統(tǒng)部署與擴展遷移模塊遷移模塊磁帶庫設備磁帶庫設備近線存儲（磁帶機）近線存儲（磁帶機）在線存儲（硬盤塔）在線存儲（硬盤塔）遷移控制臺遷移控制臺API接口接口遷移管理模塊遷移管理模塊設備管理模塊設備管理模塊遷移系統(tǒng)部署方便、靈活、可擴展隨著業(yè)務的發(fā)展、可以增加額外的遷移服務器，承擔日益繁重的遷移任務。同時也提高了系統(tǒng)運行的安全性系統(tǒng)還可以增加遷移管理服務

7、器，進一步提高系統(tǒng)的安全性和可靠性。設備與運行環(huán)境準備組件模塊組件模塊硬件要求硬件要求操作系統(tǒng)及軟件環(huán)境操作系統(tǒng)及軟件環(huán)境數(shù)據(jù)庫服務器Pentium 4 2.4G / 512MB RAM / 2 x 36GB Windows 2k server或其他Oracle數(shù)據(jù)庫支持的平臺Oracle .0服務端、客戶端設備管理器Pentium 4 2.4G / 512MB RAM / 36GB / 2100M NICWindows 2000 server + SP3Oracle .0客戶端MDAC 2.7遷移管理器Pentium 4 2.4G / 512MB RAM / 36

8、GB / 100M NICWindows 2000 server + SP3Oracle .0客戶端MDAC 2.7遷移控制臺Pentium 4 2.4G / 512MB RAM / 36GB / 100M NICWindows 2000 server + SP3Oracle .0客戶端MDAC 2.7配置工具Pentium 4 2.4G / 512MB RAM / 36GB / 100M NICWindows 2000 server + SP3Oracle .0客戶端MDAC 2.7遷移服務器Pentium 4 2.4G / 1GB RAM / 36

9、GB / 100M NIC / 2LP8000 FC BoardWindows 2000 Server + SP3Oracle .0客戶端SANergy 3.1四、運行前的配置四、運行前的配置 理解遷移中相關的術語 配置的流程 舉例詳述如何配置理解遷移中相關的術語 介質：包括光盤、磁帶，這里通常指磁帶。 介質集：指一組介質，這里通常指多盤磁帶組成的一個邏輯集合。 歸檔組：歸檔組由組名唯一確定，一個歸檔組描述了一塊特定的存儲空間，它與一個介質集一一對應，而一個介質集則指定了一個具體的介質，如：磁帶庫、光盤庫、硬盤塔等，本系統(tǒng)目前僅支持對磁帶庫的存儲。當指定了一個歸檔組，也就明確了一

10、塊物理上的存儲池；歸檔組由若干實例組成，每個實例相互唯一，且又是多個媒體文件的集合，一個實例占用一塊特定存儲空間的一部分。 理解遷移中相關的術語介質：磁帶、光盤介質：磁帶、光盤介質集介質集B介質集介質集A歸檔組歸檔組1歸檔組歸檔組2歸檔組歸檔組3介質集中的介質可以分配到歸檔組中歸檔組中的介質不能再分配到其他歸檔組理解遷移中相關的術語對象對象：每一次數(shù)據(jù)遷移所處理的文件的邏輯集合實例實例：對象的實際內容。文件文件1文件文件2文件文件1文件文件2文件文件3文件文件4文件文件1文件文件3文件文件1文件文件2實例復制實例復制：單一實例的完全拷貝關聯(lián)復制關聯(lián)復制 ：多個實例內的文件重新組合，形成新的對象

11、實例數(shù)據(jù)遷入數(shù)據(jù)遷入：數(shù)據(jù)寫入磁帶文件文件3文件文件4數(shù)據(jù)回遷數(shù)據(jù)回遷：從磁帶讀取數(shù)據(jù)形成形成“對象對象A”及其實例及其實例“A1”形成形成“對象對象A”的實例的實例“A2”形成形成“對象對象C”及其實例及其實例“C1”安裝配置流程 安裝數(shù)據(jù)庫 安裝程序軟件 啟動帶庫 運行設備管理器連接帶庫，同步數(shù)據(jù)到SobeyAK的數(shù)據(jù)庫 用SobeyAK系統(tǒng)配置模塊來配置遷移環(huán)境(主要配置系統(tǒng)管理器、設備控制器、遷移器) 配置媒資的遷移接口五、主要功能操作五、主要功能操作 啟動過程 功能概述 數(shù)據(jù)遷入 數(shù)據(jù)回遷 實例復制 關聯(lián)復制 磁帶復制 碎片整理 實例刪除 磁帶入庫 磁帶離線 信息查詢啟動過程 啟動磁

12、帶庫 啟動遷移設備管理器 啟動數(shù)據(jù)遷移器 啟動遷移管理器 啟動遷移控制臺數(shù)據(jù)遷入 支持多種數(shù)據(jù)源路徑（如硬盤、FTP） 支持任務優(yōu)先級 對于媒體資料可生成文件索引信息，以支持媒體數(shù)據(jù)的片段回遷（目前主要支持的媒體資料類型為MPEG 2、WAVE、MPEG4、MAV70、MP3）文件文件1文件文件2文件文件1文件文件2硬盤或硬盤或FTP磁帶庫中的磁帶磁帶庫中的磁帶數(shù)據(jù)回遷 支持多種回遷路徑（如：硬盤與FTP） 支持回遷文件重命名 支持媒體資料的片段回遷 支持任意文件的片段回遷（注：以字節(jié)方式簡單切分）文件文件1文件文件2文件文件1文件文件2硬盤或硬盤或FTP磁帶庫中的磁帶磁帶庫中的磁帶實例復制

13、支持單一實例的復制。使用中需要注意的關鍵點復制到不同磁帶同一遷移器與多個磁帶機關聯(lián)文件文件1文件文件2文件文件1文件文件2磁帶庫中的磁帶磁帶庫中的磁帶2磁帶庫中的磁帶磁帶庫中的磁帶1關聯(lián)復制 多個實例內的文件重新組合打包。使用中需要注意的關鍵點源磁帶與目標磁帶不同同一遷移器與多個磁帶機關聯(lián)文件文件1文件文件2文件文件3文件文件4文件文件1文件文件3磁帶庫中的磁帶磁帶庫中的磁帶2磁帶庫中的磁帶磁帶庫中的磁帶1實例刪除 磁帶內容邏輯刪除 磁帶空間暫時不會再次使用 進行碎片整理或磁帶復制后，空間方可再利用磁帶磁帶1實例實例A實例實例B實例實例C實例實例D實例實例E磁帶磁帶1實例實例A實例實例C實例實

14、例D實例實例E刪除磁帶刪除磁帶1上的實例上的實例B磁帶復制 整盤磁帶復制 包括碎片的整理使用中需要注意的關鍵點同一遷移器與多個磁帶機關聯(lián)目標磁帶為新磁帶磁帶庫中的磁帶磁帶庫中的磁帶2磁帶庫中的磁帶磁帶庫中的磁帶1碎片整理 整盤磁帶復制及碎片的整理 同一遷移器與多個磁帶機關聯(lián) 目標磁帶為新磁帶 原磁帶內容刪除磁帶磁帶1實例實例A實例實例B實例實例C實例實例D實例實例E磁帶磁帶2實例實例A實例實例C實例實例E磁帶入庫操作要點： 系統(tǒng)管理器、遷移器要關閉 磁帶放入帶庫后，磁帶要放入帶機中識別類型 磁帶三種入庫方式：新磁帶、舊磁帶（SobeyAK）、舊磁帶（MTF） 入庫后磁帶的分組磁帶出庫操作要點：

15、 系統(tǒng)管理器、遷移器可不關閉 對磁帶進行準備離線 再進行磁帶出庫信息查詢 支持歸檔文件的查詢 支持遷移對象的查詢 支持請求信息的查詢 支持磁帶內容的查詢六、與索貝媒資的聯(lián)調六、與索貝媒資的聯(lián)調媒資環(huán)境設備部署索貝媒資中相關的設置理解媒資中設置的含義媒資中相關的組件主要功能操作常見錯誤信息與提示注：本教程中所涉及的索貝媒體資產管理系統(tǒng)版本為V2.1.0媒資環(huán)境設備部署圖媒資中遷移的工作流程遷移控制臺遷移控制臺API接口接口遷移管理模塊遷移管理模塊遷移模塊遷移模塊設備管理模塊設備管理模塊第三方應用第三方應用索貝遷移系統(tǒng)在索貝媒體資產管理系統(tǒng)中做為中間件軟件，是媒資中視音頻資料遷移中的一個環(huán)節(jié)用戶通

16、過媒資的客戶端，如檢索工作站或非編工作站，人工發(fā)出遷移指令，任務分發(fā)服務將磁帶遷移的任務分發(fā)到磁帶調度服務，磁帶調度服務，將任務轉發(fā)到索貝遷移系統(tǒng)中媒資系統(tǒng)中也可以設置策略，指定在素材上載入庫后的某個時間，由系統(tǒng)自動發(fā)出遷移任務。策略檢查服務定時檢查系統(tǒng)中的視音頻資料，當有符合策略設置的資料文件時，自動向任務分發(fā)服務發(fā)出遷移指令。媒資中的遷移策略設置靈活，可針對不同的用戶、不同的視音頻文件，設置不同的策略。并且遷移的執(zhí)行還可受到用戶權限的限制。媒資系統(tǒng)通過磁帶調度服務支持向近線存儲的遷移，也可由磁盤遷移服務支持在線存儲或準在線存儲的遷移。媒資客戶端媒資客戶端任務分發(fā)服務任務分發(fā)服務磁盤調度服務

17、磁盤調度服務磁帶調度服務磁帶調度服務策略檢查服務策略檢查服務索貝媒資中相關的設置 存儲池管理 遷移策略管理 權限模板管理 用戶信息管理 用戶權限管理存儲池管理 在線存儲池，通常對應FC盤塔目錄下的長文件路徑。 近線存儲池，通常對應磁帶庫中的組遷移策略管理 遷移策略為預定義的策略，用戶所產生的素材將會具有策略中所設定的操作。 策略的設定靈活多樣，可滿足各種需求。 可由用戶手動發(fā)出遷移指令，也可由系統(tǒng)檢測，入庫后一定時期后，系統(tǒng)自動發(fā)出遷移指令遷移策略中可執(zhí)行的操作權限模板管理 權限模板為預定義的權限，控制訪問用戶所產生的素材。 訪問的權限級別，由低到高，分別有：無權、可見、可讀、可改、可刪、超級

18、權限。設置其它組用戶對應用此權限模板的素材可進行的操作用戶信息管理 用戶需要分配遷移策略以及權限模板按歸屬組的級別分次增加策略到可選列表中對用戶策略和權限模板設置用戶權限管理 對于手動執(zhí)行遷移的情況，相關的用戶還需要擁有命令遷移的權限媒資中遷移相關的程序 媒資系統(tǒng)中要完成遷移任務必須執(zhí)行以下程序： 磁盤調度服務 磁帶調度服務 任務分發(fā)服務 策略檢查服務主要功能操作媒資中可完成的主要遷移功能操作： 手動任務 從素材盤到磁帶庫遷移 從磁帶庫到素材盤的回遷 素材盤的素材在線刪除 自動任務 由策略設定自動遷移常見錯誤信息與提示 向磁帶遷移的任務執(zhí)行失敗，報錯：對象范疇內已存在 原因：素材已執(zhí)行過向磁帶

19、遷移的操作并已成功完成。 在線刪除后，素材圖標無變化 原因：存儲池的狀態(tài)設置為在線或近線七、問題與解答七、問題與解答怎樣實現(xiàn)自動定時遷移 檢測素材的入庫時間，在一定時期后，執(zhí)行指定的遷移操作 在指定的時間段進行 在策略設置中添加按策略啟動的操作如何配置準近線的遷移 在線存儲或準近線存儲，如FC盤塔、SCSI磁盤陣列、光盤庫，存儲讀寫機制類似。 在線存儲或準近線存儲的遷移，是通過媒資的磁盤遷移部件來實現(xiàn)。 不需要配置DMA遷移系統(tǒng)。如何進行節(jié)目的遷移 在媒資應用層，目前暫時是對素材文件級別的遷移。 解決方法： 遷移全部素材，保留節(jié)目文件 在非編中將節(jié)目生成AVI，再進行遷移 通過非編合成工作站，再進行遷移。（合成工作站已到了a測試階段）是否支持水位管理 水位管理是根據(jù)存儲空間是否達到某一警戒值，系統(tǒng)自動將部分文件遷移到磁帶庫中；如果空間不足某一數(shù)值，則將一部分數(shù)據(jù)從磁帶中回遷。 由于是對所有類型的文件進行監(jiān)控，通常適合普通的文件備份，但對于媒體資料遷移的應用場景意義不大 目前的版本暫不支持謝謝設計目標 全面支持各種存儲源之間靈活的數(shù)據(jù)遷移 支持廣播電視行業(yè)的視音頻數(shù)據(jù)歸檔和回調的應用 以通用中間件的方式為實際的應用業(yè)務系統(tǒng)提供穩(wěn)