Sobey遷移系統(tǒng)產(chǎn)品培訓(xùn)PPT參考課件

1、1,索貝數(shù)字媒體資料遷移系統(tǒng),Sobey DMA 培訓(xùn)教程,2005年2月,文檔版本: V0.3,網(wǎng)絡(luò)技術(shù)部：黃培鋒,2,主要內(nèi)容,一、數(shù)字媒體資料遷移系統(tǒng)簡(jiǎn)介 二、常用的磁帶庫(kù)介紹 三、安裝前的準(zhǔn)備 四、運(yùn)行前的配置 五、主要功能操作 六、與索貝媒資的聯(lián)調(diào) 七、問(wèn)題與解答,3,一、數(shù)字媒體資料遷移系統(tǒng)簡(jiǎn)介,產(chǎn)品簡(jiǎn)介 設(shè)計(jì)目標(biāo) 產(chǎn)品特色 組成模塊,4,產(chǎn)品簡(jiǎn)介,索貝數(shù)字媒體資料遷移系統(tǒng) Sobey Digital Media Archive System (DMA) 原稱SobeyArchive，是索貝數(shù)碼開發(fā)的媒體資產(chǎn)管理系統(tǒng)和網(wǎng)絡(luò)系統(tǒng)中的核心組件之一。系統(tǒng)支持在線、近線、離線等存儲(chǔ)方式結(jié)合

2、的多級(jí)存儲(chǔ)體系，支持硬盤、磁帶庫(kù)等各種存儲(chǔ)源之間靈活的數(shù)據(jù)遷移，支持廣播電視行業(yè)的視音頻數(shù)據(jù)歸檔和回調(diào)的應(yīng)用，以通用中間件的方式為實(shí)際的應(yīng)用業(yè)務(wù)系統(tǒng)提供穩(wěn)定、可靠和高效的數(shù)據(jù)遷移管理平臺(tái)。 作為基礎(chǔ)平臺(tái)模塊，DMA可以支撐索貝公司的其它系統(tǒng)模塊，如：SobeyMAM、SobeyNet、SobeyAir等。,5,設(shè)計(jì)目標(biāo),全面支持各種存儲(chǔ)源之間靈活的數(shù)據(jù)遷移 支持廣播電視行業(yè)的視音頻數(shù)據(jù)歸檔和回調(diào)的應(yīng)用 以通用中間件的方式為實(shí)際的應(yīng)用業(yè)務(wù)系統(tǒng)提供穩(wěn)定、可靠和高效的數(shù)據(jù)遷移管理平臺(tái)。,6,產(chǎn)品特色,與SobeyMAM媒資系統(tǒng)、SobeyNet非編網(wǎng)、SobeyAir自動(dòng)播出系統(tǒng)的無(wú)縫結(jié)合 采用優(yōu)化

3、的分布式軟件架構(gòu) 靈活完善的多級(jí)存儲(chǔ)體系 面向?qū)ο蟮臄?shù)據(jù)遷移 結(jié)合視音頻應(yīng)用的部分恢復(fù)功能 多版本支持不同的應(yīng)用 完備的遷移管理策略 完整的數(shù)據(jù)保護(hù)機(jī)制 兼顧效率和開放性的格式,7,DMA系統(tǒng)組成模塊,8,二、常用的磁帶庫(kù)介紹,Sony PetaSite 系列 StorageTek 系列（STK） IBM 3584,9,Sony PetaSite 系列,常用的Sony磁帶庫(kù) PetaSite CSM-200BF PetaSite CSM-100BF PetaSite CSM-60BF,10,PetaSite CSM-200BF/BS,I/O Port,I/O Port,IN USE,H 198

4、0 W 680 D 930,前視圖,側(cè)視圖,Drive Area,SLOT,Hub,FC SW （Optional）,Server,Power Supply,內(nèi)部,Drive/BIN Area,MB Drive,MB Drive,MB Drive,HUB,12V,24V,12V,24V,DV I/F,B,B,AC,AC,I/O Port,I/O Port,12V,12V,AC IN,24V,B,11,Sony PetaSite 系列,12,StorageTek 系列,常用StorageTek磁帶庫(kù) L700e L180 L80/L40/L20,13,StorageTek磁帶庫(kù),StorageT

5、ek磁帶庫(kù)通常的接口方式為FC或SCSI，庫(kù)內(nèi)配置的磁帶機(jī)接口方式通常為FC接口 安裝中需要服務(wù)器安裝磁帶庫(kù)驅(qū)動(dòng)以及SCSI接口通訊協(xié)議ASPI,14,三、安裝前的準(zhǔn)備,理解系統(tǒng)的運(yùn)行方式 系統(tǒng)部署規(guī)劃 設(shè)備與運(yùn)行環(huán)境準(zhǔn)備,15,遷移系統(tǒng)運(yùn)行方式,遷移控制臺(tái),API接口,遷移管理模塊,遷移模塊,設(shè)備管理模塊,磁帶庫(kù)設(shè)備,近線存儲(chǔ)（磁帶機(jī)）,離線存儲(chǔ),緩沖池,在線存儲(chǔ)(硬盤塔),遷移控制臺(tái)發(fā)出遷移任務(wù),遷移管理器根據(jù)任務(wù)優(yōu)先級(jí)排隊(duì)，并在有遷移器空閑時(shí)，向該遷移器，發(fā)出遷移指令。,遷移器收到指令后，向設(shè)備管理器申請(qǐng)?jiān)O(shè)備。,設(shè)備管理器在控制磁帶機(jī)加載磁帶，所有設(shè)備準(zhǔn)備就緒后，返回就緒狀態(tài)。,遷移器在

6、設(shè)備準(zhǔn)備就緒后，開始執(zhí)行數(shù)據(jù)任務(wù)。,第三方應(yīng)用，如媒資系統(tǒng)，也可以通過(guò)API接口向遷移系統(tǒng)發(fā)出遷移任務(wù)。,16,遷移系統(tǒng)部署與擴(kuò)展,遷移模塊,磁帶庫(kù)設(shè)備,近線存儲(chǔ)（磁帶機(jī)）,在線存儲(chǔ)（硬盤塔）,遷移系統(tǒng)部署方便、靈活、可擴(kuò)展,隨著業(yè)務(wù)的發(fā)展、可以增加額外的遷移服務(wù)器，承擔(dān)日益繁重的遷移任務(wù)。同時(shí)也提高了系統(tǒng)運(yùn)行的安全性,系統(tǒng)還可以增加遷移管理服務(wù)器，進(jìn)一步提高系統(tǒng)的安全性和可靠性。,17,設(shè)備與運(yùn)行環(huán)境準(zhǔn)備,18,四、運(yùn)行前的配置,理解遷移中相關(guān)的術(shù)語(yǔ) 配置的流程 舉例詳述如何配置,19,理解遷移中相關(guān)的術(shù)語(yǔ),介質(zhì)：包括光盤、磁帶，這里通常指磁帶。 介質(zhì)集：指一組介質(zhì)，這里通常指多盤磁帶組成的

7、一個(gè)邏輯集合。 歸檔組：歸檔組由組名唯一確定，一個(gè)歸檔組描述了一塊特定的存儲(chǔ)空間，它與一個(gè)介質(zhì)集一一對(duì)應(yīng)，而一個(gè)介質(zhì)集則指定了一個(gè)具體的介質(zhì)，如：磁帶庫(kù)、光盤庫(kù)、硬盤塔等，本系統(tǒng)目前僅支持對(duì)磁帶庫(kù)的存儲(chǔ)。當(dāng)指定了一個(gè)歸檔組，也就明確了一塊物理上的存儲(chǔ)池；歸檔組由若干實(shí)例組成，每個(gè)實(shí)例相互唯一，且又是多個(gè)媒體文件的集合，一個(gè)實(shí)例占用一塊特定存儲(chǔ)空間的一部分。,20,理解遷移中相關(guān)的術(shù)語(yǔ),介質(zhì)：磁帶、光盤,介質(zhì)集B,介質(zhì)集A,歸檔組1,歸檔組2,歸檔組3,介質(zhì)集中的介質(zhì)可以分配到歸檔組中,歸檔組中的介質(zhì)不能再分配到其他歸檔組,21,理解遷移中相關(guān)的術(shù)語(yǔ),對(duì)象：每一次數(shù)據(jù)遷移所處理的文件的邏輯集合,

8、實(shí)例：對(duì)象的實(shí)際內(nèi)容。,22,安裝配置流程,安裝數(shù)據(jù)庫(kù) 安裝程序軟件 啟動(dòng)帶庫(kù) 運(yùn)行設(shè)備管理器連接帶庫(kù)，同步數(shù)據(jù)到SobeyAK的數(shù)據(jù)庫(kù) 用SobeyAK系統(tǒng)配置模塊來(lái)配置遷移環(huán)境(主要配置系統(tǒng)管理器、設(shè)備控制器、遷移器) 配置媒資的遷移接口,23,五、主要功能操作,啟動(dòng)過(guò)程 功能概述 數(shù)據(jù)遷入 數(shù)據(jù)回遷 實(shí)例復(fù)制 關(guān)聯(lián)復(fù)制,磁帶復(fù)制 碎片整理 實(shí)例刪除 磁帶入庫(kù) 磁帶離線 信息查詢,24,啟動(dòng)過(guò)程,啟動(dòng)磁帶庫(kù) 啟動(dòng)遷移設(shè)備管理器 啟動(dòng)數(shù)據(jù)遷移器 啟動(dòng)遷移管理器 啟動(dòng)遷移控制臺(tái),25,數(shù)據(jù)遷入,支持多種數(shù)據(jù)源路徑（如硬盤、FTP） 支持任務(wù)優(yōu)先級(jí) 對(duì)于媒體資料可生成文件索引信息，以支持媒體數(shù)據(jù)

9、的片段回遷（目前主要支持的媒體資料類型為MPEG 2、WAVE、MPEG4、MAV70、MP3）,硬盤或FTP,磁帶庫(kù)中的磁帶,26,數(shù)據(jù)回遷,支持多種回遷路徑（如：硬盤與FTP） 支持回遷文件重命名 支持媒體資料的片段回遷 支持任意文件的片段回遷（注：以字節(jié)方式簡(jiǎn)單切分）,硬盤或FTP,磁帶庫(kù)中的磁帶,27,實(shí)例復(fù)制,支持單一實(shí)例的復(fù)制。 使用中需要注意的關(guān)鍵點(diǎn) 復(fù)制到不同磁帶 同一遷移器與多個(gè)磁帶機(jī)關(guān)聯(lián),磁帶庫(kù)中的磁帶2,磁帶庫(kù)中的磁帶1,28,關(guān)聯(lián)復(fù)制,多個(gè)實(shí)例內(nèi)的文件重新組合打包。 使用中需要注意的關(guān)鍵點(diǎn) 源磁帶與目標(biāo)磁帶不同 同一遷移器與多個(gè)磁帶機(jī)關(guān)聯(lián),磁帶庫(kù)中的磁帶2,磁帶庫(kù)中的磁

10、帶1,29,實(shí)例刪除,磁帶內(nèi)容邏輯刪除 磁帶空間暫時(shí)不會(huì)再次使用 進(jìn)行碎片整理或磁帶復(fù)制后，空間方可再利用,磁帶1,實(shí)例A,實(shí)例B,實(shí)例C,實(shí)例D,實(shí)例E,磁帶1,實(shí)例A,實(shí)例C,實(shí)例D,實(shí)例E,刪除磁帶1上的實(shí)例B,30,磁帶復(fù)制,整盤磁帶復(fù)制 包括碎片的整理 使用中需要注意的關(guān)鍵點(diǎn) 同一遷移器與多個(gè)磁帶機(jī)關(guān)聯(lián) 目標(biāo)磁帶為新磁帶,磁帶庫(kù)中的磁帶2,磁帶庫(kù)中的磁帶1,31,碎片整理,整盤磁帶復(fù)制及碎片的整理 同一遷移器與多個(gè)磁帶機(jī)關(guān)聯(lián) 目標(biāo)磁帶為新磁帶 原磁帶內(nèi)容刪除,磁帶1,實(shí)例A,實(shí)例B,實(shí)例C,實(shí)例D,實(shí)例E,磁帶2,實(shí)例A,實(shí)例C,實(shí)例E,32,磁帶入庫(kù),操作要點(diǎn)： 系統(tǒng)管理器、遷移器

11、要關(guān)閉 磁帶放入帶庫(kù)后，磁帶要放入帶機(jī)中識(shí)別類型 磁帶三種入庫(kù)方式：新磁帶、舊磁帶（SobeyAK）、舊磁帶（MTF） 入庫(kù)后磁帶的分組,33,磁帶出庫(kù),操作要點(diǎn)： 系統(tǒng)管理器、遷移器可不關(guān)閉 對(duì)磁帶進(jìn)行準(zhǔn)備離線 再進(jìn)行磁帶出庫(kù),34,信息查詢,支持歸檔文件的查詢 支持遷移對(duì)象的查詢 支持請(qǐng)求信息的查詢 支持磁帶內(nèi)容的查詢,35,六、與索貝媒資的聯(lián)調(diào),媒資環(huán)境設(shè)備部署 索貝媒資中相關(guān)的設(shè)置 理解媒資中設(shè)置的含義 媒資中相關(guān)的組件 主要功能操作 常見錯(cuò)誤信息與提示 注：本教程中所涉及的索貝媒體資產(chǎn)管理系統(tǒng)版本為V2.1.0,36,媒資環(huán)境設(shè)備部署圖,37,媒資中遷移的工作流程,索貝遷移系統(tǒng)在索貝

12、媒體資產(chǎn)管理系統(tǒng)中做為中間件軟件，是媒資中視音頻資料遷移中的一個(gè)環(huán)節(jié),用戶通過(guò)媒資的客戶端，如檢索工作站或非編工作站，人工發(fā)出遷移指令，任務(wù)分發(fā)服務(wù)將磁帶遷移的任務(wù)分發(fā)到磁帶調(diào)度服務(wù)，磁帶調(diào)度服務(wù)，將任務(wù)轉(zhuǎn)發(fā)到索貝遷移系統(tǒng)中,媒資系統(tǒng)中也可以設(shè)置策略，指定在素材上載入庫(kù)后的某個(gè)時(shí)間，由系統(tǒng)自動(dòng)發(fā)出遷移任務(wù)。,策略檢查服務(wù)定時(shí)檢查系統(tǒng)中的視音頻資料，當(dāng)有符合策略設(shè)置的資料文件時(shí)，自動(dòng)向任務(wù)分發(fā)服務(wù)發(fā)出遷移指令。,媒資中的遷移策略設(shè)置靈活，可針對(duì)不同的用戶、不同的視音頻文件，設(shè)置不同的策略。并且遷移的執(zhí)行還可受到用戶權(quán)限的限制。,媒資系統(tǒng)通過(guò)磁帶調(diào)度服務(wù)支持向近線存儲(chǔ)的遷移，也可由磁盤遷移服務(wù)支持

13、在線存儲(chǔ)或準(zhǔn)在線存儲(chǔ)的遷移。,38,索貝媒資中相關(guān)的設(shè)置,存儲(chǔ)池管理 遷移策略管理 權(quán)限模板管理 用戶信息管理 用戶權(quán)限管理,39,存儲(chǔ)池管理,在線存儲(chǔ)池，通常對(duì)應(yīng)FC盤塔目錄下的長(zhǎng)文件路徑。 近線存儲(chǔ)池，通常對(duì)應(yīng)磁帶庫(kù)中的組,40,遷移策略管理,遷移策略為預(yù)定義的策略，用戶所產(chǎn)生的素材將會(huì)具有策略中所設(shè)定的操作。 策略的設(shè)定靈活多樣，可滿足各種需求。 可由用戶手動(dòng)發(fā)出遷移指令，也可由系統(tǒng)檢測(cè)，入庫(kù)后一定時(shí)期后，系統(tǒng)自動(dòng)發(fā)出遷移指令,遷移策略中可執(zhí)行的操作,41,權(quán)限模板管理,權(quán)限模板為預(yù)定義的權(quán)限，控制訪問(wèn)用戶所產(chǎn)生的素材。 訪問(wèn)的權(quán)限級(jí)別，由低到高，分別有：無(wú)權(quán)、可見、可讀、可改、可刪、超

14、級(jí)權(quán)限。,設(shè)置其它組用戶對(duì)應(yīng)用此權(quán)限模板的素材可進(jìn)行的操作,42,用戶信息管理,用戶需要分配遷移策略以及權(quán)限模板,按歸屬組的級(jí)別分次增加策略到可選列表中,對(duì)用戶策略和權(quán)限模板設(shè)置,43,用戶權(quán)限管理,對(duì)于手動(dòng)執(zhí)行遷移的情況，相關(guān)的用戶還需要擁有命令遷移的權(quán)限,44,媒資中遷移相關(guān)的程序,媒資系統(tǒng)中要完成遷移任務(wù)必須執(zhí)行以下程序： 磁盤調(diào)度服務(wù) 磁帶調(diào)度服務(wù) 任務(wù)分發(fā)服務(wù) 策略檢查服務(wù),45,主要功能操作,媒資中可完成的主要遷移功能操作： 手動(dòng)任務(wù) 從素材盤到磁帶庫(kù)遷移 從磁帶庫(kù)到素材盤的回遷 素材盤的素材在線刪除 自動(dòng)任務(wù) 由策略設(shè)定自動(dòng)遷移,46,常見錯(cuò)誤信息與提示,向磁帶遷移的任務(wù)執(zhí)行失敗，報(bào)錯(cuò)：對(duì)象范疇內(nèi)已存在 原因：素材已執(zhí)行過(guò)向磁帶遷移的操作并已成功完成。 在線刪除后，素材圖標(biāo)無(wú)變化 原因：存儲(chǔ)池的狀態(tài)設(shè)置為在線或近線,47,七、問(wèn)題與解答,48,怎樣實(shí)現(xiàn)自動(dòng)定時(shí)遷移,檢測(cè)素材的入庫(kù)時(shí)間，在一定時(shí)期后，執(zhí)行指定的遷移操作 在指定的時(shí)間段進(jìn)行 在策略設(shè)置中添加按策略啟動(dòng)的操作,49,如何配置準(zhǔn)近線的遷移,在線存儲(chǔ)或準(zhǔn)近線存儲(chǔ)，如FC盤塔、SCSI磁盤陣列、光盤庫(kù)，存儲(chǔ)讀寫機(jī)制類似。 在線存儲(chǔ)或準(zhǔn)近線存儲(chǔ)的遷移，是通過(guò)媒資的磁盤遷移部件來(lái)實(shí)現(xiàn)。 不需要配置DMA遷移系統(tǒng)。,50,如何進(jìn)行節(jié)目的遷移,