Sobey遷移系統(tǒng)產(chǎn)品培訓(xùn)

1、主要內(nèi)容主要內(nèi)容一、數(shù)字媒體資料遷移系統(tǒng)簡介二、常用的磁帶庫介紹三、安裝前的準(zhǔn)備四、運(yùn)行前的配置五、主要功能操作六、與索貝媒資的聯(lián)調(diào)七、問題與解答一、數(shù)字媒體資料遷移系統(tǒng)簡介一、數(shù)字媒體資料遷移系統(tǒng)簡介 產(chǎn)品簡介 設(shè)計目標(biāo) 產(chǎn)品特色 組成模塊產(chǎn)品簡介索貝數(shù)字媒體資料遷移系統(tǒng)Sobey Digital Media Archive System (DMA) 原稱SobeyArchive，是索貝數(shù)碼開發(fā)的媒體資產(chǎn)管理系統(tǒng)和網(wǎng)絡(luò)系統(tǒng)中的核心組件之一。系統(tǒng)支持在線、近線、離線等存儲方式結(jié)合的多級存儲體系，支持硬盤、磁帶庫等各種存儲源之間靈活的數(shù)據(jù)遷移，支持廣播電視行業(yè)的視音頻數(shù)據(jù)歸檔和回調(diào)的應(yīng)用，以通用

2、中間件的方式為實(shí)際的應(yīng)用業(yè)務(wù)系統(tǒng)提供穩(wěn)定、可靠和高效的數(shù)據(jù)遷移管理平臺。作為基礎(chǔ)平臺模塊，DMA可以支撐索貝公司的其它系統(tǒng)模塊，如：SobeyMAM、SobeyNet、SobeyAir等。設(shè)計目標(biāo) 全面支持各種存儲源之間靈活的數(shù)據(jù)遷移 支持廣播電視行業(yè)的視音頻數(shù)據(jù)歸檔和回調(diào)的應(yīng)用 以通用中間件的方式為實(shí)際的應(yīng)用業(yè)務(wù)系統(tǒng)提供穩(wěn)定、可靠和高效的數(shù)據(jù)遷移管理平臺。產(chǎn)品特色 與SobeyMAM媒資系統(tǒng)、SobeyNet非編網(wǎng)、SobeyAir自動播出系統(tǒng)的無縫結(jié)合 采用優(yōu)化的分布式軟件架構(gòu) 靈活完善的多級存儲體系 面向?qū)ο蟮臄?shù)據(jù)遷移 結(jié)合視音頻應(yīng)用的部分恢復(fù)功能 多版本支持不同的應(yīng)用 完備的遷移管理策

3、略 完整的數(shù)據(jù)保護(hù)機(jī)制 兼顧效率和開放性的格式DMA系統(tǒng)組成模塊二、常用的磁帶庫介紹二、常用的磁帶庫介紹 Sony PetaSite 系列 StorageTek 系列（STK） IBM 3584Sony PetaSite 系列常用的Sony磁帶庫 PetaSite CSM-200BF PetaSite CSM-100BF PetaSite CSM-60BFPetaSite CSM-200BF/BSI/O PortI/O PortIN USEI/O PortI/O PortIN USEI/O PortI/O PortIN USEIN USEPetaSiteXMMB DriveMB DriveMB

4、 DriveHUB12V24V12V24VDVI/FB BAC ACI/O PortI/O Port12V12VMAC IN24VBSony PetaSite 系列磁帶庫容量磁帶庫容量磁帶機(jī)數(shù)磁帶機(jī)數(shù)磁帶個數(shù)磁帶個數(shù)最大總?cè)萘孔畲罂側(cè)萘壳懊媲懊婧竺婧竺婵傆嬁傆婥SM-200BF/BS9 - 126013219296TB5 - 872132204102TB2 - 484132216108TBCSM-100BF/BS2 - 12604810854TBCSM-60BF/BS2 - 126006030TBStorageTek 系列常用StorageTek磁帶庫 L700e L180 L80/L40/L

5、20StorageTek磁帶庫 StorageTek磁帶庫通常的接口方式為FC或SCSI，庫內(nèi)配置的磁帶機(jī)接口方式通常為FC接口 安裝中需要服務(wù)器安裝磁帶庫驅(qū)動以及SCSI接口通訊協(xié)議ASPI三、安裝前的準(zhǔn)備三、安裝前的準(zhǔn)備 理解系統(tǒng)的運(yùn)行方式 系統(tǒng)部署規(guī)劃 設(shè)備與運(yùn)行環(huán)境準(zhǔn)備遷移系統(tǒng)運(yùn)行方式遷移控制臺遷移控制臺API接口接口遷移管理模塊遷移管理模塊遷移模塊遷移模塊設(shè)備管理模塊設(shè)備管理模塊磁帶庫設(shè)備磁帶庫設(shè)備近線存儲（磁帶機(jī)）近線存儲（磁帶機(jī)）離線存儲離線存儲緩沖池緩沖池在線存儲在線存儲(硬盤塔硬盤塔)第三方應(yīng)用第三方應(yīng)用遷移控制臺發(fā)出遷移任務(wù)遷移管理器根據(jù)任務(wù)優(yōu)先級排隊，并在有遷移器空閑時，

6、向該遷移器，發(fā)出遷移指令。遷移器收到指令后，向設(shè)備管理器申請設(shè)備。設(shè)備管理器在控制磁帶機(jī)加載磁帶，所有設(shè)備準(zhǔn)備就緒后，返回就緒狀態(tài)。遷移器在設(shè)備準(zhǔn)備就緒后，開始執(zhí)行數(shù)據(jù)任務(wù)。第三方應(yīng)用，如媒資系統(tǒng)，也可以通過API接口向遷移系統(tǒng)發(fā)出遷移任務(wù)。遷移系統(tǒng)部署與擴(kuò)展遷移模塊遷移模塊磁帶庫設(shè)備磁帶庫設(shè)備近線存儲（磁帶機(jī)）近線存儲（磁帶機(jī)）在線存儲（硬盤塔）在線存儲（硬盤塔）遷移控制臺遷移控制臺API接口接口遷移管理模塊遷移管理模塊設(shè)備管理模塊設(shè)備管理模塊遷移系統(tǒng)部署方便、靈活、可擴(kuò)展隨著業(yè)務(wù)的發(fā)展、可以增加額外的遷移服務(wù)器，承擔(dān)日益繁重的遷移任務(wù)。同時也提高了系統(tǒng)運(yùn)行的安全性系統(tǒng)還可以增加遷移管理服務(wù)

7、器，進(jìn)一步提高系統(tǒng)的安全性和可靠性。設(shè)備與運(yùn)行環(huán)境準(zhǔn)備組件模塊組件模塊硬件要求硬件要求操作系統(tǒng)及軟件環(huán)境操作系統(tǒng)及軟件環(huán)境數(shù)據(jù)庫服務(wù)器Pentium 4 2.4G / 512MB RAM / 2 x 36GB Windows 2k server或其他Oracle數(shù)據(jù)庫支持的平臺Oracle .0服務(wù)端、客戶端設(shè)備管理器Pentium 4 2.4G / 512MB RAM / 36GB / 2100M NICWindows 2000 server + SP3Oracle .0客戶端MDAC 2.7遷移管理器Pentium 4 2.4G / 512MB RAM / 36

8、GB / 100M NICWindows 2000 server + SP3Oracle .0客戶端MDAC 2.7遷移控制臺Pentium 4 2.4G / 512MB RAM / 36GB / 100M NICWindows 2000 server + SP3Oracle .0客戶端MDAC 2.7配置工具Pentium 4 2.4G / 512MB RAM / 36GB / 100M NICWindows 2000 server + SP3Oracle .0客戶端MDAC 2.7遷移服務(wù)器Pentium 4 2.4G / 1GB RAM / 36

9、GB / 100M NIC / 2LP8000 FC BoardWindows 2000 Server + SP3Oracle .0客戶端SANergy 3.1四、運(yùn)行前的配置四、運(yùn)行前的配置 理解遷移中相關(guān)的術(shù)語 配置的流程 舉例詳述如何配置理解遷移中相關(guān)的術(shù)語 介質(zhì)：包括光盤、磁帶，這里通常指磁帶。 介質(zhì)集：指一組介質(zhì)，這里通常指多盤磁帶組成的一個邏輯集合。 歸檔組：歸檔組由組名唯一確定，一個歸檔組描述了一塊特定的存儲空間，它與一個介質(zhì)集一一對應(yīng)，而一個介質(zhì)集則指定了一個具體的介質(zhì)，如：磁帶庫、光盤庫、硬盤塔等，本系統(tǒng)目前僅支持對磁帶庫的存儲。當(dāng)指定了一個歸檔組，也就明確了一

10、塊物理上的存儲池；歸檔組由若干實(shí)例組成，每個實(shí)例相互唯一，且又是多個媒體文件的集合，一個實(shí)例占用一塊特定存儲空間的一部分。 理解遷移中相關(guān)的術(shù)語介質(zhì)：磁帶、光盤介質(zhì)：磁帶、光盤介質(zhì)集介質(zhì)集B介質(zhì)集介質(zhì)集A歸檔組歸檔組1歸檔組歸檔組2歸檔組歸檔組3介質(zhì)集中的介質(zhì)可以分配到歸檔組中歸檔組中的介質(zhì)不能再分配到其他歸檔組理解遷移中相關(guān)的術(shù)語對象對象：每一次數(shù)據(jù)遷移所處理的文件的邏輯集合實(shí)例實(shí)例：對象的實(shí)際內(nèi)容。文件文件1文件文件2文件文件1文件文件2文件文件3文件文件4文件文件1文件文件3文件文件1文件文件2實(shí)例復(fù)制實(shí)例復(fù)制：單一實(shí)例的完全拷貝關(guān)聯(lián)復(fù)制關(guān)聯(lián)復(fù)制 ：多個實(shí)例內(nèi)的文件重新組合，形成新的對象

11、實(shí)例數(shù)據(jù)遷入數(shù)據(jù)遷入：數(shù)據(jù)寫入磁帶文件文件3文件文件4數(shù)據(jù)回遷數(shù)據(jù)回遷：從磁帶讀取數(shù)據(jù)形成形成“對象對象A”及其實(shí)例及其實(shí)例“A1”形成形成“對象對象A”的實(shí)例的實(shí)例“A2”形成形成“對象對象C”及其實(shí)例及其實(shí)例“C1”安裝配置流程 安裝數(shù)據(jù)庫 安裝程序軟件 啟動帶庫 運(yùn)行設(shè)備管理器連接帶庫，同步數(shù)據(jù)到SobeyAK的數(shù)據(jù)庫 用SobeyAK系統(tǒng)配置模塊來配置遷移環(huán)境(主要配置系統(tǒng)管理器、設(shè)備控制器、遷移器) 配置媒資的遷移接口五、主要功能操作五、主要功能操作 啟動過程 功能概述 數(shù)據(jù)遷入 數(shù)據(jù)回遷 實(shí)例復(fù)制 關(guān)聯(lián)復(fù)制 磁帶復(fù)制 碎片整理 實(shí)例刪除 磁帶入庫 磁帶離線 信息查詢啟動過程 啟動磁

12、帶庫 啟動遷移設(shè)備管理器 啟動數(shù)據(jù)遷移器 啟動遷移管理器 啟動遷移控制臺數(shù)據(jù)遷入 支持多種數(shù)據(jù)源路徑（如硬盤、FTP） 支持任務(wù)優(yōu)先級 對于媒體資料可生成文件索引信息，以支持媒體數(shù)據(jù)的片段回遷（目前主要支持的媒體資料類型為MPEG 2、WAVE、MPEG4、MAV70、MP3）文件文件1文件文件2文件文件1文件文件2硬盤或硬盤或FTP磁帶庫中的磁帶磁帶庫中的磁帶數(shù)據(jù)回遷 支持多種回遷路徑（如：硬盤與FTP） 支持回遷文件重命名 支持媒體資料的片段回遷 支持任意文件的片段回遷（注：以字節(jié)方式簡單切分）文件文件1文件文件2文件文件1文件文件2硬盤或硬盤或FTP磁帶庫中的磁帶磁帶庫中的磁帶實(shí)例復(fù)制

13、支持單一實(shí)例的復(fù)制。使用中需要注意的關(guān)鍵點(diǎn)復(fù)制到不同磁帶同一遷移器與多個磁帶機(jī)關(guān)聯(lián)文件文件1文件文件2文件文件1文件文件2磁帶庫中的磁帶磁帶庫中的磁帶2磁帶庫中的磁帶磁帶庫中的磁帶1關(guān)聯(lián)復(fù)制 多個實(shí)例內(nèi)的文件重新組合打包。使用中需要注意的關(guān)鍵點(diǎn)源磁帶與目標(biāo)磁帶不同同一遷移器與多個磁帶機(jī)關(guān)聯(lián)文件文件1文件文件2文件文件3文件文件4文件文件1文件文件3磁帶庫中的磁帶磁帶庫中的磁帶2磁帶庫中的磁帶磁帶庫中的磁帶1實(shí)例刪除 磁帶內(nèi)容邏輯刪除 磁帶空間暫時不會再次使用 進(jìn)行碎片整理或磁帶復(fù)制后，空間方可再利用磁帶磁帶1實(shí)例實(shí)例A實(shí)例實(shí)例B實(shí)例實(shí)例C實(shí)例實(shí)例D實(shí)例實(shí)例E磁帶磁帶1實(shí)例實(shí)例A實(shí)例實(shí)例C實(shí)例實(shí)

14、例D實(shí)例實(shí)例E刪除磁帶刪除磁帶1上的實(shí)例上的實(shí)例B磁帶復(fù)制 整盤磁帶復(fù)制 包括碎片的整理使用中需要注意的關(guān)鍵點(diǎn)同一遷移器與多個磁帶機(jī)關(guān)聯(lián)目標(biāo)磁帶為新磁帶磁帶庫中的磁帶磁帶庫中的磁帶2磁帶庫中的磁帶磁帶庫中的磁帶1碎片整理 整盤磁帶復(fù)制及碎片的整理 同一遷移器與多個磁帶機(jī)關(guān)聯(lián) 目標(biāo)磁帶為新磁帶 原磁帶內(nèi)容刪除磁帶磁帶1實(shí)例實(shí)例A實(shí)例實(shí)例B實(shí)例實(shí)例C實(shí)例實(shí)例D實(shí)例實(shí)例E磁帶磁帶2實(shí)例實(shí)例A實(shí)例實(shí)例C實(shí)例實(shí)例E磁帶入庫操作要點(diǎn)： 系統(tǒng)管理器、遷移器要關(guān)閉 磁帶放入帶庫后，磁帶要放入帶機(jī)中識別類型 磁帶三種入庫方式：新磁帶、舊磁帶（SobeyAK）、舊磁帶（MTF） 入庫后磁帶的分組磁帶出庫操作要點(diǎn)：

15、 系統(tǒng)管理器、遷移器可不關(guān)閉 對磁帶進(jìn)行準(zhǔn)備離線 再進(jìn)行磁帶出庫信息查詢 支持歸檔文件的查詢 支持遷移對象的查詢 支持請求信息的查詢 支持磁帶內(nèi)容的查詢六、與索貝媒資的聯(lián)調(diào)六、與索貝媒資的聯(lián)調(diào)媒資環(huán)境設(shè)備部署索貝媒資中相關(guān)的設(shè)置理解媒資中設(shè)置的含義媒資中相關(guān)的組件主要功能操作常見錯誤信息與提示注：本教程中所涉及的索貝媒體資產(chǎn)管理系統(tǒng)版本為V2.1.0媒資環(huán)境設(shè)備部署圖媒資中遷移的工作流程遷移控制臺遷移控制臺API接口接口遷移管理模塊遷移管理模塊遷移模塊遷移模塊設(shè)備管理模塊設(shè)備管理模塊第三方應(yīng)用第三方應(yīng)用索貝遷移系統(tǒng)在索貝媒體資產(chǎn)管理系統(tǒng)中做為中間件軟件，是媒資中視音頻資料遷移中的一個環(huán)節(jié)用戶通

16、過媒資的客戶端，如檢索工作站或非編工作站，人工發(fā)出遷移指令，任務(wù)分發(fā)服務(wù)將磁帶遷移的任務(wù)分發(fā)到磁帶調(diào)度服務(wù)，磁帶調(diào)度服務(wù)，將任務(wù)轉(zhuǎn)發(fā)到索貝遷移系統(tǒng)中媒資系統(tǒng)中也可以設(shè)置策略，指定在素材上載入庫后的某個時間，由系統(tǒng)自動發(fā)出遷移任務(wù)。策略檢查服務(wù)定時檢查系統(tǒng)中的視音頻資料，當(dāng)有符合策略設(shè)置的資料文件時，自動向任務(wù)分發(fā)服務(wù)發(fā)出遷移指令。媒資中的遷移策略設(shè)置靈活，可針對不同的用戶、不同的視音頻文件，設(shè)置不同的策略。并且遷移的執(zhí)行還可受到用戶權(quán)限的限制。媒資系統(tǒng)通過磁帶調(diào)度服務(wù)支持向近線存儲的遷移，也可由磁盤遷移服務(wù)支持在線存儲或準(zhǔn)在線存儲的遷移。媒資客戶端媒資客戶端任務(wù)分發(fā)服務(wù)任務(wù)分發(fā)服務(wù)磁盤調(diào)度服務(wù)

17、磁盤調(diào)度服務(wù)磁帶調(diào)度服務(wù)磁帶調(diào)度服務(wù)策略檢查服務(wù)策略檢查服務(wù)索貝媒資中相關(guān)的設(shè)置 存儲池管理 遷移策略管理 權(quán)限模板管理 用戶信息管理 用戶權(quán)限管理存儲池管理 在線存儲池，通常對應(yīng)FC盤塔目錄下的長文件路徑。 近線存儲池，通常對應(yīng)磁帶庫中的組遷移策略管理 遷移策略為預(yù)定義的策略，用戶所產(chǎn)生的素材將會具有策略中所設(shè)定的操作。 策略的設(shè)定靈活多樣，可滿足各種需求。 可由用戶手動發(fā)出遷移指令，也可由系統(tǒng)檢測，入庫后一定時期后，系統(tǒng)自動發(fā)出遷移指令遷移策略中可執(zhí)行的操作權(quán)限模板管理 權(quán)限模板為預(yù)定義的權(quán)限，控制訪問用戶所產(chǎn)生的素材。 訪問的權(quán)限級別，由低到高，分別有：無權(quán)、可見、可讀、可改、可刪、超級

18、權(quán)限。設(shè)置其它組用戶對應(yīng)用此權(quán)限模板的素材可進(jìn)行的操作用戶信息管理 用戶需要分配遷移策略以及權(quán)限模板按歸屬組的級別分次增加策略到可選列表中對用戶策略和權(quán)限模板設(shè)置用戶權(quán)限管理 對于手動執(zhí)行遷移的情況，相關(guān)的用戶還需要擁有命令遷移的權(quán)限媒資中遷移相關(guān)的程序 媒資系統(tǒng)中要完成遷移任務(wù)必須執(zhí)行以下程序： 磁盤調(diào)度服務(wù) 磁帶調(diào)度服務(wù) 任務(wù)分發(fā)服務(wù) 策略檢查服務(wù)主要功能操作媒資中可完成的主要遷移功能操作： 手動任務(wù) 從素材盤到磁帶庫遷移 從磁帶庫到素材盤的回遷 素材盤的素材在線刪除 自動任務(wù) 由策略設(shè)定自動遷移常見錯誤信息與提示 向磁帶遷移的任務(wù)執(zhí)行失敗，報錯：對象范疇內(nèi)已存在 原因：素材已執(zhí)行過向磁帶

19、遷移的操作并已成功完成。 在線刪除后，素材圖標(biāo)無變化 原因：存儲池的狀態(tài)設(shè)置為在線或近線七、問題與解答七、問題與解答怎樣實(shí)現(xiàn)自動定時遷移 檢測素材的入庫時間，在一定時期后，執(zhí)行指定的遷移操作 在指定的時間段進(jìn)行 在策略設(shè)置中添加按策略啟動的操作如何配置準(zhǔn)近線的遷移 在線存儲或準(zhǔn)近線存儲，如FC盤塔、SCSI磁盤陣列、光盤庫，存儲讀寫機(jī)制類似。 在線存儲或準(zhǔn)近線存儲的遷移，是通過媒資的磁盤遷移部件來實(shí)現(xiàn)。 不需要配置DMA遷移系統(tǒng)。如何進(jìn)行節(jié)目的遷移 在媒資應(yīng)用層，目前暫時是對素材文件級別的遷移。 解決方法： 遷移全部素材，保留節(jié)目文件 在非編中將節(jié)目生成AVI，再進(jìn)行遷移 通過非編合成工作站，再進(jìn)行遷移。（合成工作站已到了a測試階段）是否支持水位管理 水位管理是根據(jù)存儲空間是否達(dá)到某一警戒值，系統(tǒng)自動將部分文件遷移到磁帶庫中；如果空間不足某一數(shù)值，則將一部分?jǐn)?shù)據(jù)從磁帶中回遷。 由于是對所有類型的文件進(jìn)行監(jiān)控，通常適合普通的文件備份，但對于媒體資料遷移的應(yīng)用場景意義不大 目前的版本暫不支持謝謝設(shè)計目標(biāo) 全面支持各種存儲源之間靈活的數(shù)據(jù)遷移 支持廣播電視行業(yè)的視音頻數(shù)據(jù)歸檔和回調(diào)的應(yīng)用 以通用中間件的方式為實(shí)際的應(yīng)用業(yè)務(wù)系統(tǒng)提供穩(wěn)