媒資檔案管理系統(tǒng)技術(shù)方案

1、媒資檔案管理系統(tǒng)技術(shù)方案北京亞細(xì)亞智業(yè)科技有限公司2010年10月媒資檔案管理系統(tǒng)技術(shù)方案 目 錄第1章方案綜述11.1系統(tǒng)建設(shè)的必要性11.2建設(shè)內(nèi)容和目標(biāo)21.3業(yè)務(wù)需求分析3第2章系統(tǒng)總體設(shè)計52.1系統(tǒng)設(shè)計原則52.2系統(tǒng)結(jié)構(gòu)設(shè)計62.3數(shù)據(jù)處理流程82.3.1數(shù)據(jù)導(dǎo)入流程82.3.2數(shù)據(jù)輸出（發(fā)布）流程102.4本方案的優(yōu)勢112.4.1體系結(jié)構(gòu)靈活112.4.2強大的視音頻處理112.4.3能夠管理各類數(shù)據(jù)資源112.4.4海量數(shù)據(jù)多級存儲122.4.5成熟穩(wěn)定的基礎(chǔ)軟件平臺122.4.6軟件強大的跨平臺運行能力12第3章系統(tǒng)功能描述133.1資料整理上載133.2視頻轉(zhuǎn)碼分析14

2、3.3資料編目標(biāo)引153.3.1編目標(biāo)引建模153.3.2視頻關(guān)鍵幀抽取173.3.3附件資料上傳183.4海量數(shù)據(jù)存儲193.4.1海量數(shù)據(jù)多級存儲體系193.4.2數(shù)據(jù)多級存儲的實現(xiàn)213.5多媒體資料查詢?yōu)g覽253.5.1視音頻資料檢索253.5.2關(guān)鍵字檢索263.5.3條件組合檢索263.5.4全文檢索263.6資料下載293.7資料安全控制293.8數(shù)據(jù)統(tǒng)計分析303.8.1設(shè)備使用情況統(tǒng)計303.8.2數(shù)據(jù)利用情況統(tǒng)計313.8.3人員工作量統(tǒng)計31第4章非視音頻數(shù)據(jù)的管理32第5章系統(tǒng)的擴展性3338北京亞細(xì)亞智業(yè)科技有限公司第1章 方案綜述經(jīng)過多年的發(fā)展和努力，許多企業(yè)已經(jīng)積

3、累了大量高水平、高質(zhì)量、具有保存價值的歷史資料，其中，包括音像資料、圖片資料、文檔資料、資料等等。隨著時間的延續(xù)，這些資料的保存價值和重要性也隨著突顯出來。首先，這些歷史資料需要更安全可靠的介質(zhì)保存；其次這些寶貴資料更需要合理有效的管理和調(diào)用，使它們完整有序、便于檢索、并能夠提供方便、快捷、全面的資料服務(wù)，充分發(fā)揮其實用價值。當(dāng)前，信息技術(shù)的廣泛應(yīng)用，使各類資料的數(shù)字化保存管理已經(jīng)成為趨勢。數(shù)字技術(shù)在資料的生成、編輯、發(fā)布播出等業(yè)務(wù)中普遍采用，有效的提高了資料保存和發(fā)布的質(zhì)量，低成本、安全高效的海量存儲技術(shù)也為大量歷史資料的長期數(shù)字化保存與管理奠定了基礎(chǔ)。信息化在知識經(jīng)濟時代的深入，信息工作對

4、資料的檢索和再利用提出更高的要求，編導(dǎo)在制作音像節(jié)目時，要查閱庫存中同類或相似的信息以便參考和再利用；逐漸增多的行業(yè)內(nèi)部交流更需要資料共享；隨著遠(yuǎn)程寬帶網(wǎng)絡(luò)的飛速發(fā)展，用戶所擁有的豐富資源還能通過網(wǎng)上資料交流而產(chǎn)生巨大的經(jīng)濟效益和社會效益。面對當(dāng)前企業(yè)的需求，構(gòu)建一個適當(dāng)?shù)拿劫Y檔案管理系統(tǒng)可以合理地解決這些問題。在保障數(shù)據(jù)安全的前提下，技術(shù)方案采用了靈活多樣的低成本設(shè)計思路，使其既適用于當(dāng)前各類資料存儲管理的需要，也適用于今后企業(yè)科學(xué)發(fā)展的要求。1.1 系統(tǒng)建設(shè)的必要性1、歷史資料管理的現(xiàn)狀：數(shù)量大、價值高、格式多樣 企業(yè)擁有大量數(shù)字多媒體資源，而且每年還再不斷增加。資料越來越多，種類日趨齊全

5、，其有形價值和無形資產(chǎn)均不能以金錢去衡量。 2、現(xiàn)有的管理和保存環(huán)境條件有限許多企業(yè)由于歷史原因，現(xiàn)有的管理和保存環(huán)境條件不是很理想，原有的資料查找和檢索相對困難，有些珍貴資料保存也出現(xiàn)危機。3、資料管理現(xiàn)代化的條件已具備，主要體現(xiàn)在：存儲與管理技術(shù)的進步，資料再利用的需求，系統(tǒng)建設(shè)成本的降低等。而且數(shù)字化的文件資料能夠長時間保存，質(zhì)量不會有任何降低，所以，數(shù)字資料的存儲與管理已經(jīng)是發(fā)展的必然。4、海量存儲技術(shù)的發(fā)展，為數(shù)字資料的再次利用打下了良好的保存基礎(chǔ)。 綜上所述，企事業(yè)機構(gòu)建立一個資料豐富，保存條件好，編目完備的現(xiàn)代化媒資檔案管理系統(tǒng)是具備條件且完全是必要的！1.2 建設(shè)內(nèi)容和目標(biāo)1結(jié)

6、合現(xiàn)有主流媒體使用的多媒體資源管理系統(tǒng)和多媒體資源現(xiàn)狀，保證系統(tǒng)開發(fā)所用技術(shù)的先進性，為企業(yè)建立一個資料豐富、保存質(zhì)量高、使用快捷的現(xiàn)代化數(shù)字媒體資料管理系統(tǒng)的目標(biāo)。2系統(tǒng)具備海量存儲功能（軟件系統(tǒng)支持）。根據(jù)現(xiàn)有媒體資源的容量，可以為企業(yè)建立媒資檔案管理中心，即搭建中心服務(wù)器及海量存儲設(shè)備，實現(xiàn)集中式管理和資源共享，核心服務(wù)器以及相關(guān)系統(tǒng)設(shè)備采用高端服務(wù)器集群，并實現(xiàn)核心設(shè)備間光纖高速連接。實現(xiàn)對于分散的文檔進行集中的、進行長期無損的數(shù)字化存儲，防止數(shù)據(jù)資料的散失。3系統(tǒng)具備強大的多媒體處理能力。為了保證多媒體素材今后不同的調(diào)用方式，要實現(xiàn)常用格式的輸入輸出以及格式轉(zhuǎn)換，如一份視頻資料能夠生

7、成兩個碼率的文件，高質(zhì)量的用來長期存儲，較低質(zhì)量的實現(xiàn)網(wǎng)絡(luò)中的在線搜索、瀏覽、發(fā)布及在線點播。4系統(tǒng)具備高速的數(shù)據(jù)輸入輸出能力。媒資檔案管理系統(tǒng)要借助現(xiàn)有網(wǎng)絡(luò)環(huán)境進行數(shù)據(jù)交換及存儲，日常數(shù)據(jù)輸入輸出的量十分大，系統(tǒng)必須提供相應(yīng)的數(shù)據(jù)接口或解決方案來適應(yīng)這種大容量、集中式的數(shù)據(jù)交換。如處理多個終端同時向中心系統(tǒng)上傳或下載數(shù)據(jù)的能力。5系統(tǒng)的可擴展性。隨著企業(yè)不斷發(fā)展，多媒體資料不斷豐富、容量不斷增加，系統(tǒng)必須提供一個簡便可靠的擴展功能來滿足正常上述需要。此外，隨著使用需求的不斷變化，系統(tǒng)設(shè)計時必須靈活，系統(tǒng)管理者維護修改必須簡便。如預(yù)留更多自定義的系統(tǒng)功能供系統(tǒng)管理者選擇。6對于各種類型的多媒體

8、資料，統(tǒng)一格式，詳細(xì)分類，通過一個系統(tǒng)平臺規(guī)范化管理。分配不同層面使用者不同的操作權(quán)限，保證原始資源安全可靠的長期存儲以及分級管理。如經(jīng)過編輯的資源要與原始資源分別存儲，并有一定關(guān)聯(lián)方式，能夠方便的被使用者搜索到。對于歷史數(shù)據(jù)的方便、準(zhǔn)確快速的檢索、實現(xiàn)在線瀏覽、提取編輯等。7為了快速完成資料整理和上載準(zhǔn)備工作，根據(jù)資料容量和投資規(guī)模可以搭建視頻采集、視頻編輯和處理、媒體資料上傳等功能的媒體工作站：8擬定一套使用規(guī)程和管理制度，規(guī)定進入媒資檔案庫文件的內(nèi)容、格式等標(biāo)準(zhǔn)。在完成資料存儲格式的統(tǒng)一后，進行節(jié)目資料的編目、標(biāo)引等整理工作，做到操作簡捷、直觀，符合規(guī)范。1.3 業(yè)務(wù)需求分析許多企業(yè)的歷

9、史資料規(guī)模大、種類多，既有視音頻、也有文檔、圖片等等，通過對多個案例的實際分析，我們認(rèn)為，企業(yè)的媒資檔案管理系統(tǒng)要能夠滿足如下方面的業(yè)務(wù)需求：l 視音頻或平明媒體數(shù)據(jù)是系統(tǒng)管理的重點內(nèi)容視音頻資料和平明媒體資料具有時間長、格式多樣、存儲容量大、管理復(fù)雜的特點，在整個存儲系統(tǒng)中，其數(shù)據(jù)量所占的比重也最大。所以，科學(xué)、合理、高效的管理和存儲企業(yè)大量的視音頻資料，是本方案需要解決的重點。本方案采用主流、先進的數(shù)據(jù)處理技術(shù)，將模擬形式的視音頻資料或紙質(zhì)的平面資料進行數(shù)字化轉(zhuǎn)換和制作，并進行有效管理和存儲，使大量資料能夠通過系統(tǒng)存得好、找得著、調(diào)得出。l 海量數(shù)據(jù)存儲管理建成的系統(tǒng)存儲量要滿足存儲幾十T

10、B、甚至上百TB的數(shù)據(jù)資料的能力，并隨著資料的不斷增加實現(xiàn)系統(tǒng)的無縫升級，存儲的介質(zhì)類型要以符合數(shù)字化技術(shù)潮流和保存時間長的介質(zhì)為主，重點要考慮到數(shù)據(jù)長期存儲的安全、高效。l 足夠的數(shù)據(jù)輸入輸出能力用戶在需要各類數(shù)據(jù)時，系統(tǒng)應(yīng)能及時輸出所需的內(nèi)容或提供信號。對音像資料來講，應(yīng)該實現(xiàn)包括MPEG-2-I、MPEG-2-IBP、DVSD、DV25、DV50、MPEG-1、MPEG4、AVI等常用格式的輸入輸出，而且能夠?qū)崿F(xiàn)對WMV等格式的支持，實現(xiàn)網(wǎng)絡(luò)中的發(fā)布與點播。l 便捷的分布式數(shù)據(jù)上、下載系統(tǒng)除了要為企業(yè)建立媒資檔案中心外，還可以通過網(wǎng)絡(luò)覆蓋企業(yè)的分支機構(gòu)或企業(yè)的用戶處，使這部分用戶也能夠及

11、時上傳和下載。因此，系統(tǒng)的軟件功能要能夠通過網(wǎng)絡(luò)，便捷的連通各部門，并將需要管理的數(shù)據(jù)及時傳輸?shù)酱鎯χ行?，同時，對保存在中心檔案庫中的數(shù)據(jù)資料，操作人員通過軟件界面，也要能夠進行便捷的檢索和瀏覽、輸出，最大限度的方便實際工作應(yīng)用。l 快速簡捷的編目、標(biāo)引對資料管理系統(tǒng)要求操作簡捷直觀符合規(guī)范，提供符合標(biāo)準(zhǔn)的編目標(biāo)引方法，提供良好的編目升級方式。對不同類型的數(shù)據(jù)需要提供靈活的編目、標(biāo)引建模體系，滿足不同類型數(shù)據(jù)管理的要求。l 易懂有效的資料檢索、瀏覽對于系統(tǒng)中保存的不同類型的數(shù)據(jù)資料，軟件要提供方便、高效的數(shù)據(jù)檢索、瀏覽能力，能夠通過數(shù)據(jù)建模的任何條件與字段，對資料進行檢索、查找。而且，針對不同

12、類型的數(shù)據(jù)資料，應(yīng)該能夠按照其編目和描述方式靈活的定義和調(diào)整檢索條件，使用戶可以在業(yè)務(wù)發(fā)生變化或增加新的描述字段時，方便地調(diào)整檢索方案。l 可靠的系統(tǒng)安全性能夠提供使用者權(quán)限的科學(xué)分配，提供良好的數(shù)據(jù)安全機制，可以保障數(shù)據(jù)的通讀性，實現(xiàn)數(shù)據(jù)的長期穩(wěn)定的保存。對不同級別的操作人員，能夠靈活的控制其使用權(quán)限，能夠?qū)幠?、查詢等不同站點實現(xiàn)不同權(quán)限的分配，并且對登錄系統(tǒng)的人員操作進行全面的日志記錄。第2章 系統(tǒng)總體設(shè)計2.1 系統(tǒng)設(shè)計原則系統(tǒng)設(shè)計原則是在滿足用戶數(shù)據(jù)資料的采集、編輯、編目標(biāo)引、存儲管理下載輸出等業(yè)務(wù)處理要求的情況下，充分考慮系統(tǒng)的可用性、穩(wěn)定性、可靠性，同時兼顧系統(tǒng)的先進性、兼容性、

13、可擴展性。1、 系統(tǒng)的功能性、適用性系統(tǒng)應(yīng)根據(jù)企業(yè)數(shù)據(jù)采集、編輯、存儲管理、下載輸出等業(yè)務(wù)處理要求進行開發(fā)，實現(xiàn)與企業(yè)實際業(yè)務(wù)工作的高度結(jié)合，切實提高工作效率。2、 系統(tǒng)的開放性、可擴展性采用成熟、標(biāo)準(zhǔn)的技術(shù)和產(chǎn)品，以便于將來與外系統(tǒng)的聯(lián)接和數(shù)據(jù)共享；采用模塊化設(shè)計方法，便于擴展，以適應(yīng)未來發(fā)展需要。3、 系統(tǒng)的先進性系統(tǒng)應(yīng)采用先進的視音頻編輯技術(shù)、計算機技術(shù)、網(wǎng)絡(luò)通信技術(shù)、存儲技術(shù)、內(nèi)容管理技術(shù)等等。4、 系統(tǒng)的安全性采用各種有效的安全措施（如數(shù)據(jù)容錯備份、網(wǎng)絡(luò)隔離技術(shù)等），確保網(wǎng)絡(luò)的安全性。5、 系統(tǒng)的穩(wěn)定性主要表現(xiàn)在兩個方面，一是采用成熟的技術(shù)和高質(zhì)量的設(shè)備；二是對網(wǎng)絡(luò)的關(guān)鍵設(shè)備要考慮容

14、錯及備份措施。6、 系統(tǒng)的可管理性系統(tǒng)應(yīng)具有很強的管理能力，以提高節(jié)目的制作速度和設(shè)備使用調(diào)度能力。7、 充分考慮廠商的技術(shù)支持本方案全面基于我公司自行研發(fā)的Mars Media數(shù)據(jù)管理軟件平臺構(gòu)建，由于管理軟件全部為我公司自行研發(fā)，所以，擁有對企業(yè)集團的最佳支持能力，從實施維護到開發(fā)升級，都可以全面滿足用戶的要求，做到最佳的支持與維護。8、 經(jīng)濟性本方案所有技術(shù)選型應(yīng)該堅持性能價格比最優(yōu)的原則，同時兼顧維護服務(wù)能力和將來的擴展能力，保護用戶現(xiàn)有的投資。綜上，媒資檔案系統(tǒng)的設(shè)計目標(biāo)是：滿足用戶需求、考慮長遠(yuǎn)利益、充分保護企業(yè)的現(xiàn)有投資。2.2 系統(tǒng)結(jié)構(gòu)設(shè)計企業(yè)的媒資檔案管理系統(tǒng)就是要利用計算機

15、將大量數(shù)據(jù)資料整理、編目標(biāo)引、海量存儲、以便方便的檢索和再利用。對資料的編目體系要按照一個靈活、規(guī)范的方式將各類資料分門別類的存放，對其中的所有的信息，不論是文字的，還是聲音的、圖像的，都加以標(biāo)引，讓使用者從任何角度出發(fā)，都能夠準(zhǔn)確、迅速地找到所需要的數(shù)字資料。對不同的資料源也可以采用不同的編目方式，以提高編目效率，同時系統(tǒng)支持多種數(shù)據(jù)格式的歸檔存儲與管理。根據(jù)上述的業(yè)務(wù)需求分析，本方案將基于我公司成熟的Mars Media多媒體數(shù)據(jù)管理軟件平臺來構(gòu)建整個系統(tǒng)。Mars Media為我公司自行研發(fā)的多媒體數(shù)據(jù)管理平臺，經(jīng)過多個項目的長期實踐檢驗，運行穩(wěn)定、可靠。從邏輯上講，Mars Media

16、涵蓋了數(shù)據(jù)內(nèi)容管理與存儲管理兩個層面，數(shù)據(jù)存儲為內(nèi)容管理提供底層的存儲支撐服務(wù)，內(nèi)容管理層提供對數(shù)據(jù)資料的各類業(yè)務(wù)處理，而且，軟件最大限度的基于B/S結(jié)構(gòu)，日常業(yè)務(wù)操作，包括數(shù)據(jù)編目標(biāo)引、檢索、瀏覽、系統(tǒng)管理等工作，全部基于Web界面，操作簡單易用。由于軟件系統(tǒng)全面基于網(wǎng)絡(luò)，具備跨網(wǎng)段、跨路由的數(shù)據(jù)管理能力，所以完全滿足企業(yè)對總部及分支機構(gòu)廣域范圍的數(shù)據(jù)傳送與管理。通過軟件的內(nèi)容管理層，查詢、瀏覽等應(yīng)用層用戶能夠?qū)φ麄€檔案庫進行輸入、輸出等訪問，以進行節(jié)目資料的再次處理與利用。因此，基于Mars Media軟件平臺，并與相關(guān)硬件設(shè)備的密切配合，可以為企業(yè)能源建設(shè)一個科學(xué)、穩(wěn)定、靈活、高效的媒資

17、檔案管理系統(tǒng)。本方案設(shè)計的企業(yè)媒資檔案管理系統(tǒng)物理結(jié)構(gòu)圖如下所示：上圖中，系統(tǒng)管理服務(wù)器和海量存儲設(shè)備全部架設(shè)在公司的中心檔案管理室，包括系統(tǒng)元數(shù)據(jù)服務(wù)器，是系統(tǒng)業(yè)務(wù)處理的核心，運行元數(shù)據(jù)管理模塊，完成對象建模、編目標(biāo)引、檢索查詢、流媒體瀏覽等核心管理功能，軟件基于IE界面，任何通過網(wǎng)絡(luò)登錄到本服務(wù)器的終端通過授權(quán)，都可以進行各類業(yè)務(wù)操作。數(shù)據(jù)存儲服務(wù)器運行海量數(shù)據(jù)存儲軟件模塊，連接海量存儲設(shè)備，將入庫整理好的歷史數(shù)據(jù)進行長期保存。根據(jù)具體的存儲策略，可以將指定的數(shù)據(jù)完成從磁盤陣列、磁帶庫、以及磁帶架之間的多級歸檔、恢復(fù)，調(diào)用。數(shù)據(jù)存儲服務(wù)器同時運行數(shù)據(jù)交換軟件，需要上載入庫的資料無論是中心還

18、是遠(yuǎn)端，只要放入指定的目錄，交換軟件可以通過網(wǎng)絡(luò)自動監(jiān)測目標(biāo)數(shù)據(jù)的變化，將新增數(shù)據(jù)及時抓取到中心存儲設(shè)備，進行數(shù)據(jù)的編目和入庫保存工作。通過數(shù)據(jù)交換軟件，要上載的數(shù)據(jù)只需存入各自的指定目錄即可，都可以自動將數(shù)據(jù)上傳到中心存儲設(shè)備。為了支持多種數(shù)據(jù)上傳手段，技術(shù)方案還提供上傳客戶端軟件，各部門用戶也可以通過數(shù)據(jù)上傳客戶端，將需要入庫的資料傳送到存儲中心。節(jié)目轉(zhuǎn)碼服務(wù)器運行視音頻格式轉(zhuǎn)換軟件，完成自動將上載入庫的高質(zhì)量Mpeg-2節(jié)目向瀏覽用Mpeg-4 wmv節(jié)目的轉(zhuǎn)換。以及其他數(shù)字格式如：avi、DVD、Mpeg-1等資料向標(biāo)準(zhǔn)存儲格式的轉(zhuǎn)換。系統(tǒng)重建模塊運行于重建服務(wù)器中，負(fù)責(zé)對系統(tǒng)中主數(shù)據(jù)

19、庫、服務(wù)器操作系統(tǒng)的自動備份。通過完全、增量、差分等專業(yè)的備份方式將數(shù)據(jù)備份到數(shù)據(jù)流磁帶中。在服務(wù)器系統(tǒng)一旦出現(xiàn)問題的情況下，能夠快速對系統(tǒng)進行恢復(fù)。海量存儲設(shè)備采用磁盤陣列與磁帶庫相結(jié)合的多級存儲方式，按照要求，各配備容量為15TB，并通過SAN存儲網(wǎng)絡(luò)與各服務(wù)器連接，是服務(wù)器可以統(tǒng)一訪問中心的海量存儲資源。相關(guān)部門配備相應(yīng)的視音頻上下載工作站，運行采集軟件，完成模擬視音頻資料向標(biāo)準(zhǔn)Mpeg-2存儲格式的采集，上載。2.3 數(shù)據(jù)處理流程方案采用的Mars Media多媒體數(shù)據(jù)管理平臺，由元數(shù)據(jù)管理模塊（MetaServer）、視音頻轉(zhuǎn)碼模塊（FlipServer）、數(shù)據(jù)交換模塊（ExServ

20、er）、系統(tǒng)重建模塊（RebuildServer）、數(shù)據(jù)多級存儲模塊（StorageServer）等組成，配合視音頻上下載設(shè)備來完成視音頻數(shù)據(jù)的業(yè)務(wù)處理與存儲。而各類型的文檔、圖片等電子數(shù)據(jù)則直接可以導(dǎo)入系統(tǒng)，進入檔案庫的管理體系中。各類多媒體數(shù)據(jù)導(dǎo)入系統(tǒng)以及從系統(tǒng)中輸出、發(fā)布的流程如下：2.3.1 數(shù)據(jù)導(dǎo)入流程數(shù)據(jù)導(dǎo)入指的是由數(shù)據(jù)交換軟件模塊（ExServer）主動對需要上載到系統(tǒng)中的數(shù)據(jù)進行檢測，并將需要管理的數(shù)據(jù)進行存儲、編目、歸檔等處理的過程。導(dǎo)入過程中，系統(tǒng)認(rèn)為需要導(dǎo)入的資料是完整的內(nèi)容資料，不再有任何對數(shù)據(jù)的再加工或再處理。具體業(yè)務(wù)流程圖如下：數(shù)據(jù)導(dǎo)入流程圖上圖流程描述的是全部的處

21、理流程。當(dāng)交換服務(wù)器（ExServer）檢測到用戶存儲的文件有新的時，就會提示是否需要遷移到本內(nèi)容管理系統(tǒng)中，如不需要則只在數(shù)據(jù)庫中作記錄；如需要遷移，則利用交換服務(wù)器按類進行資料遷移，在遷移的同時還可進行資料的備份、發(fā)布等功能。除此之外，交換服務(wù)器還提供在線素材的ftp服務(wù)，不能通過交換服務(wù)器與本內(nèi)容系統(tǒng)進行直接交換的客戶端，可以通過ftp服務(wù)，進行素材的遷移。然后把遷移的相關(guān)內(nèi)容在數(shù)據(jù)庫中作記錄。遷移到存儲系統(tǒng)中的視頻資料，有些本身格式不適合瀏覽或碼流過大影響瀏覽效果，如需要瀏覽時則可利用轉(zhuǎn)碼服務(wù)器（FlipServer），生成預(yù)覽素材、幀圖片以及對素材做其他格式的轉(zhuǎn)換工作。如素材還需要進

22、行編目則可利用元數(shù)據(jù)服務(wù)器（MetaServer）提供的編目功能進行。經(jīng)過上述三個步驟后的素材，就是用戶編輯好的可以進行發(fā)布或其他用途的素材。在此，可以進行利用存儲服務(wù)器（StorServe）對編輯好的素材進行保存，方便用戶以后使用。在以上過程中用戶可以根據(jù)需求，對不同的內(nèi)容資料選擇不同的處理流程。如：非視音頻素材是不需要轉(zhuǎn)碼過程的。2.3.2 數(shù)據(jù)輸出（發(fā)布）流程數(shù)據(jù)從系統(tǒng)向外部輸出、發(fā)布的業(yè)務(wù)流程圖如下所示：數(shù)據(jù)輸出流程圖如上圖，在用戶下載或發(fā)布素材時需要進行數(shù)據(jù)輸出（發(fā)布）流程。主要是指在通過元數(shù)據(jù)管理軟件（MetaServer）提供的檢索頁面檢索到素材后，將內(nèi)容資料傳送到其他系統(tǒng)的過程

23、。具體步驟是首先用戶在元數(shù)據(jù)處理模塊根據(jù)需要檢索定位到所需的素材；然后從存儲模塊把素材遷移到當(dāng)前在線狀態(tài)（即編輯或使用狀態(tài)）；接著看輸出（發(fā)布）的需求，是否需要對素材進行轉(zhuǎn)碼，若需要轉(zhuǎn)碼則調(diào)用轉(zhuǎn)碼模塊對素材轉(zhuǎn)碼，使之滿足用戶需求；最后，利用數(shù)據(jù)交換模塊把整理好的素材遷移到客戶端或是其他系統(tǒng)中。整個數(shù)據(jù)輸出（發(fā)布）流程可以根據(jù)素材類型的不同，用戶可以根據(jù)模板或手工來配置不同的流程，使之使用更加自動、方便。2.4 本方案的優(yōu)勢2.4.1 體系結(jié)構(gòu)靈活本方案構(gòu)建的企業(yè)媒資檔案管理系統(tǒng)中，用戶可以靈活的導(dǎo)入、增加各種數(shù)據(jù)類型，如：視音頻、圖片、文檔（PDF或Word等格式）以及未來可能產(chǎn)生的全新數(shù)據(jù)資

24、產(chǎn)類型，以適應(yīng)和支撐不斷產(chǎn)生的新媒體、新業(yè)務(wù)的需求。視頻的存儲格式采用高質(zhì)量的、國際標(biāo)準(zhǔn)的MPEG-2 IBP 4:2:2格式，可以向其他各種常用視頻格式的轉(zhuǎn)換。用戶可以靈活定義和修改原有的數(shù)據(jù)對象的標(biāo)引描述，滿足不同時期對內(nèi)容數(shù)據(jù)的不同描述需求，使數(shù)據(jù)內(nèi)容在描述上可以與時俱進。不同類型的數(shù)據(jù)內(nèi)容可以使用不同的分類法描述，而且分類法可以允許用戶自定義。針對不同類型的數(shù)據(jù)內(nèi)容，可以按照其描述方式定義和調(diào)整檢索條件，使用戶可以在業(yè)務(wù)發(fā)生變化或增加新的描述字段時，靈活調(diào)整檢索方案。2.4.2 強大的視音頻處理可以對視音頻文件自動進行后臺MPEG-4流媒體轉(zhuǎn)換生成，關(guān)鍵幀分析、抽幀等處理，減少人為干預(yù)

25、的工作量。視頻格式轉(zhuǎn)換應(yīng)該支持DVD、VCD、DV、AVI、WMV等常用格式與標(biāo)準(zhǔn)MPEG-2存儲格式之間的轉(zhuǎn)換。編目時要求實現(xiàn)對視音頻的逐幀編輯編目時可以手動添加和刪除關(guān)鍵幀，并可以對關(guān)鍵幀進行描述。關(guān)鍵幀的屬性可以自定義。數(shù)據(jù)內(nèi)容可以添加不同的附屬文件，如：宣傳海報、相關(guān)照片、相關(guān)文檔等，附件的描述屬性要求可以自定義。2.4.3 能夠管理各類數(shù)據(jù)資源本方案采用Mars Media軟件平臺，該平臺完全是基于對象型設(shè)計的通用數(shù)據(jù)管理平臺，除專門為視音頻數(shù)據(jù)設(shè)計的處理功能外，還具備管理各類不同數(shù)據(jù)類型的能力，如：word、excel、pdf、dwg、mp3等等。通過數(shù)據(jù)的交換導(dǎo)入，各類不同類型數(shù)

26、據(jù)都可以進入系統(tǒng)的管理范圍，而且不同類型數(shù)據(jù)的建模和管理，都可以按照各自的數(shù)據(jù)特色，分別設(shè)計其建模體系，檢索方式等，以適應(yīng)各種不同數(shù)據(jù)類型的管理需要。2.4.4 海量數(shù)據(jù)多級存儲本方案設(shè)計的媒資檔案管理系統(tǒng)基于成熟的Mars Media管理平臺，支持海量數(shù)據(jù)的多級存儲體系，所謂多級存儲，是指在線磁盤陣列、近線磁帶庫、離線磁帶架相結(jié)合的數(shù)據(jù)多級存儲體系，軟件系統(tǒng)可以按需要將所需特定數(shù)據(jù)（如：不常用的歷史資料）自動歸檔到磁帶庫中一份，以實現(xiàn)海量存儲設(shè)備的最佳性價比，同時確保磁盤陣列中數(shù)據(jù)的安全，而且存儲容量能夠無限擴容。2.4.5 成熟穩(wěn)定的基礎(chǔ)軟件平臺本方案采用的Mars Media 軟件平臺是

27、一個通過多年實際項目檢驗的成熟平臺，集成各類通用數(shù)據(jù)對象的管理能力，并且完全融合我公司媒體領(lǐng)域多年的視音頻管理經(jīng)驗，具備強大的視音頻處理功能，運行穩(wěn)定、可靠。而且具備多個案例的成功實施、運行經(jīng)驗。所以，通過Mars Media，企業(yè)完全能夠為企業(yè)建立一個科學(xué)、穩(wěn)定、高效的媒資檔案管理系統(tǒng)。2.4.6 軟件強大的跨平臺運行能力Mars Media軟件的主體模塊全部基于標(biāo)準(zhǔn)的Java架構(gòu)開發(fā)，可以適應(yīng)任意的操作系統(tǒng)和主機環(huán)境，除Windows外，還可以方便的移植到Linux 、Unix等各種不同的操作系統(tǒng)環(huán)境中。第3章 系統(tǒng)功能描述由上述的系統(tǒng)結(jié)構(gòu)設(shè)計，本方案設(shè)計的企業(yè)媒資檔案管理系統(tǒng)基于我公司成

28、熟的Mars Media軟件平臺實現(xiàn)，其功能能夠分為數(shù)據(jù)內(nèi)容管理與數(shù)據(jù)存儲管理兩個層面。具體來講，系統(tǒng)能夠具備如下方面的功能：資料整理上載、資料編目標(biāo)引、數(shù)據(jù)海量存儲、資料查詢輸出、資料安全控制、業(yè)務(wù)統(tǒng)計分析、系統(tǒng)維護、網(wǎng)絡(luò)配置、應(yīng)用定制開發(fā)等功能。具體說明如下：3.1 資料整理上載對于現(xiàn)有模擬形式的音像節(jié)目來講，需要利用數(shù)字上載工作站將節(jié)目進行數(shù)字化處理、上載。按照音像資料處理的標(biāo)準(zhǔn)，上載工作站需要采集、生成高質(zhì)量的Mpeg-2格式、810Mbps的數(shù)據(jù)文件，用來進行節(jié)目資料的長期保存和二次利用。對高碼率視頻，本方案的壓縮格式采用國際標(biāo)準(zhǔn)的Mpeg-2 IBP 4:2:2 格式，通過各類標(biāo)準(zhǔn)

29、的硬件或軟件都可以進行MPEG-2解碼，都能對檔案庫中存儲的節(jié)目資料進行回放。根據(jù)項目的實際情況，需要配備上載工作站，并通過網(wǎng)絡(luò)與中心媒資檔案室連接在一起。各部門編碼生成的Mpeg-2文件首先緩存到工作站本地的存儲目錄中，中心軟件系統(tǒng)的數(shù)據(jù)交換模塊會實時監(jiān)測各上載工作站的緩存目錄，將新壓縮生成的高質(zhì)量數(shù)字節(jié)目自動抓取到存儲中心的磁盤陣列，完成數(shù)據(jù)由采集編碼前端向存儲中心的上載。采集生成的高碼率MPEG-2節(jié)目主要用于節(jié)目資料的長期保存、下載輸出、以及再次利用等。為保障MPEG-2節(jié)目的高質(zhì)量采集，系統(tǒng)采用專業(yè)的上載編碼器配合上載軟件模塊來實現(xiàn)?？梢愿鶕?jù)具體需要對節(jié)目選擇不同的碼率和GOP組合，

30、充分滿足各類需求。高碼率MPEG-2動態(tài)圖像可以實現(xiàn)視音頻信號的高保真，滿足長期存儲和向各類不同應(yīng)用的視頻格式轉(zhuǎn)換要求，以及庫存節(jié)目進行二次利用、制作的需要。在設(shè)計上載整理系統(tǒng)時，主要注重以下幾個功能： A、采用先進的分布式組件技術(shù)，確保系統(tǒng)組件靈活性和開放性。從而建立了一個易于操作的標(biāo)準(zhǔn)和開放系統(tǒng)平臺；只需升級軟件和圖像卡就可實現(xiàn)系統(tǒng)的擴展和升級。 B、采集碼率可由用戶靈活定義。高碼流素材按照存儲機制將暫時放到上載工作站的存儲體里，通過交換服務(wù)器將其傳送到存儲中心，進入多級存儲的管理范圍。配合系統(tǒng)提供先進的純軟件轉(zhuǎn)碼中心，實現(xiàn)多種不同格式間的互轉(zhuǎn)，生成檢索和瀏覽所使用的低碼流Mpeg-4節(jié)目

31、等。Mpeg-4節(jié)目將直接保存到存儲中心的在線磁盤陣列上，以備實時檢索和點播。具體采集步驟如下：1建立素材模版在采集數(shù)據(jù)之前，需要做好準(zhǔn)備工作，使用人員可以根據(jù)素材類型的不同，編制出不同類型素材的采集模版，供各種素材錄入或上傳時使用。2采集數(shù)據(jù)在數(shù)據(jù)采集過程中，主要是首先由數(shù)據(jù)交換模塊檢測用戶系統(tǒng)固定的目錄內(nèi)是否有新的文件，如有新的文件且需要上傳保存時，則由交換服務(wù)器進行數(shù)據(jù)遷移。如若需要其他效果的視頻素材，則可通過轉(zhuǎn)碼模塊進行轉(zhuǎn)碼。如還需編目，則可利用元數(shù)據(jù)處理模塊進行編目。等需要進行的所有操作都完成后即可把素材數(shù)據(jù)進行保存完成采集過程。對于其他文檔、數(shù)據(jù)來講，主要通過統(tǒng)一的資料處理，通過數(shù)

32、據(jù)交換軟件，將其從不同來源收集到存儲中心，以備作詳細(xì)編目和統(tǒng)一存儲。3.2 視頻轉(zhuǎn)碼分析上傳到存儲中心的視音頻資料，根據(jù)需要可以將采集好的標(biāo)準(zhǔn)Mpeg-2文件轉(zhuǎn)碼成瀏覽碼率的Mpeg-4 wmv等格式，通過瀏覽碼率資料進行節(jié)目的編目、在線瀏覽等，完成對視音頻資料的全面管理。視頻轉(zhuǎn)碼模塊，還能夠方便的實現(xiàn)標(biāo)準(zhǔn)存儲格式與各類不同用途的視頻格式進行相互轉(zhuǎn)換，以滿足庫存音像資料的各種不同類型應(yīng)用，如：在線網(wǎng)絡(luò)瀏覽、視頻二次編緝、DVD刻錄、錄像帶輸出，甚至播出等等。 3.3 資料編目標(biāo)引3.3.1 編目標(biāo)引建模通過軟件系統(tǒng)的元數(shù)據(jù)管理中心，用戶可以靈活、方便的對上載到系統(tǒng)中的各類數(shù)據(jù)資源進行編目和標(biāo)引

33、，而且對各類數(shù)據(jù)資料都能夠適用，不管其是視音頻、文檔、或是其他數(shù)據(jù)，都能夠靈活制定對應(yīng)的編目體系，對不同類型數(shù)據(jù)進行描述建模，來適應(yīng)不同類型數(shù)據(jù)對象的管理要求。由于視頻或音頻文件是一種不能由一個具體數(shù)值來描述的非結(jié)構(gòu)化數(shù)據(jù)，如何把這些非結(jié)構(gòu)化的數(shù)據(jù)轉(zhuǎn)換成可以用數(shù)據(jù)庫來記錄的結(jié)構(gòu)化數(shù)據(jù)，是這個模塊所要完成的主要功能。此模塊主要具有音像資料類別判定、標(biāo)引錄入、審閱等功能，視頻內(nèi)容的描述是通過元數(shù)據(jù)來完成的，通過輸入屬性值來完成由非結(jié)構(gòu)到結(jié)構(gòu)化的轉(zhuǎn)換。由于不同的數(shù)字資料分類的方法不同，應(yīng)用時所要檢索和查詢的屬性也會不同。例如：新聞類的資料比較重視時間性、比較短小，而影視類的資料比較重視題材和故事內(nèi)容

34、，系統(tǒng)將對不同類型的音像資料定義不同的元數(shù)據(jù)集，來描述它們。任何音像資料在做標(biāo)引之前都必須判斷其所屬類型，選定后系統(tǒng)將自動調(diào)用其相應(yīng)的元數(shù)據(jù)，生成標(biāo)引界面供標(biāo)引工作人員錄入。最后，通過審閱的功能，檢查標(biāo)引信息的正確性和完整性，審查通過的標(biāo)引將進入數(shù)據(jù)庫進行保存。系統(tǒng)對不同數(shù)據(jù)對象的描述建模體系中應(yīng)用了先進的XML數(shù)據(jù)交換技術(shù)，從而使各類元數(shù)據(jù)以及對象模型的定義與增添變得十分靈活。在沒有應(yīng)用XML的系統(tǒng)中元數(shù)據(jù)一旦被定義就很難再做修改，隨著業(yè)務(wù)的發(fā)展，某一天可能因業(yè)務(wù)或應(yīng)用需要增加一種對視頻描述的新屬性，在原先的系統(tǒng)中就需要開發(fā)人員重新修改數(shù)據(jù)庫表結(jié)構(gòu)、重新編寫代碼，這樣就會帶來很多復(fù)雜的開發(fā)工

35、作。由于系統(tǒng)利用了XML技術(shù)，工作人員應(yīng)用系統(tǒng)提供的對象建模功能，可以隨時增加任何一項新的屬性即新的元數(shù)據(jù)，如果對系統(tǒng)中定義的元數(shù)據(jù)不滿意或希望增加新條目，可以完全由操作人員自己完成修改工作，當(dāng)標(biāo)引端調(diào)用這一類型的元數(shù)據(jù)時，系統(tǒng)將生成新的標(biāo)引窗口，并且在索引端會提供新的索引條目，從而使元數(shù)據(jù)的維護成為可能，降低了系統(tǒng)對開發(fā)商的依賴程度。編目系統(tǒng)是否完善直接關(guān)系到編導(dǎo)在查詢資料時的準(zhǔn)確性和方便性，為了提高該系統(tǒng)的使用效率，系統(tǒng)的編目體系著重設(shè)計如下功能：A. 各類數(shù)據(jù)資料的編目體系和屬性均可在系統(tǒng)初始化建模時自定義，很好的滿足了企業(yè)的不同要求，并增強了系統(tǒng)的擴展性。包括分類類型的定義，各類型屬性

36、的加刪，以及各種屬性的顯示方式，次序，是否多值，是否學(xué)習(xí)等各種個性設(shè)置。B. 設(shè)置多種分類方法：系統(tǒng)完全支持頒布的編目標(biāo)準(zhǔn)。而且可以根據(jù)企業(yè)的情況，定制新的分類方法和編目屬性，具有很強的針對性和擴展性，分類方法的自由添加為以后新的分類方式的出現(xiàn)提供了方便。還可以使一種資源可以歸屬到多種分類類型中，方便了用戶的使用和查找。系統(tǒng)可以方便的導(dǎo)入音像資料建模的國家標(biāo)準(zhǔn)，或者自定義的建模標(biāo)準(zhǔn)。國家標(biāo)準(zhǔn)的節(jié)目描述模版如下：C. 數(shù)據(jù)檔案詳細(xì)編目：在各類數(shù)據(jù)的建模體系基礎(chǔ)上，為不同的數(shù)據(jù)資源添加詳細(xì)編目信息，使不同的資料資料能進行分類標(biāo)引，并提供分類輔助標(biāo)引手段，提供分類標(biāo)引的維護功能，可以利用主題詞,關(guān)鍵

37、字等對資料標(biāo)引，在主題詞確立的完成后引入安全權(quán)限機制，保證用戶標(biāo)引信息的安全性。同時也提供主題詞的維護功能 軟件對已經(jīng)上載到中心檔案庫中的視音頻資料進行編目、標(biāo)引的界面示意圖如下：3.3.2 視頻關(guān)鍵幀抽取關(guān)鍵幀檢索是視音頻資料在網(wǎng)絡(luò)上進行檢索、發(fā)布必不可少的功能，有了關(guān)鍵幀抽取功能，節(jié)目檢索如同文字檢索一樣，用戶訪問時，可以檢索到關(guān)于視頻的標(biāo)題、描述，以及影片中的各個關(guān)鍵畫面，并且可以從某個關(guān)鍵幀開始，瀏覽、觀看一個節(jié)目的不同部分。節(jié)目轉(zhuǎn)碼完成后，軟件根據(jù)要求，自動完成相應(yīng)關(guān)鍵幀的自動抽取，包括定時抽取、根據(jù)視頻內(nèi)容的自動轉(zhuǎn)場抽取等，當(dāng)視頻畫面的內(nèi)容的變化量大于用戶預(yù)先設(shè)定值時，自動提取畫面

38、首幀，加入視頻編目描述信息系統(tǒng)內(nèi)的元數(shù)據(jù)庫，提高系統(tǒng)的編目工作效率，這些視頻元數(shù)據(jù)實時進入元數(shù)據(jù)服務(wù)器的數(shù)據(jù)庫，在管理系統(tǒng)中就如同管理其他圖像文件一樣進行視頻管理和發(fā)布，當(dāng)然，因為視頻包括更多的附加索引信息，所以可以在系統(tǒng)中定義更多的其它元數(shù)據(jù)。軟件界面如下：3.3.3 附件資料上傳對于每個視音頻或者其它數(shù)字文件，除了對主文件進行編目描述外，還可以上傳與其相關(guān)的各類附件資料，如：音視頻的文本稿件、宣傳圖片、附屬其它信息等。通過附件資料的關(guān)聯(lián)和上傳，在檢索到需要的數(shù)據(jù)后，還可以瀏覽、查看相關(guān)的附件信息。軟件界面如下：3.4 海量數(shù)據(jù)存儲3.4.1 海量數(shù)據(jù)多級存儲體系根據(jù)企業(yè)的業(yè)務(wù)需求，系統(tǒng)需要

39、存儲的數(shù)據(jù)量非常大，一期要求達(dá)到30TB的數(shù)據(jù)存儲容量。如此海量的數(shù)據(jù)存儲規(guī)模，必然需要科學(xué)、穩(wěn)定的海量存儲管理軟件的支持。本方案采用的Mars Media軟件平臺，具備強大的數(shù)據(jù)多級存儲模塊，支持強大、靈活的海量數(shù)據(jù)多級存儲體系。所謂多級存儲，是指在線磁盤陣列、近線磁帶庫、離線磁帶架相結(jié)合的數(shù)據(jù)多級存儲體系，可以安裝業(yè)務(wù)需要將不同類別的數(shù)據(jù)合理的分配到不同的存儲設(shè)備中，來達(dá)到存儲資源的最佳利用與性價比最優(yōu)，并且充分滿足了長期存儲情況下的數(shù)據(jù)安全需要。根據(jù)系統(tǒng)的業(yè)務(wù)需求，技術(shù)方案對多級存儲系統(tǒng)采用了基于SAN存儲網(wǎng)絡(luò)的設(shè)計，配備磁盤陣列、磁帶庫兩級存儲設(shè)備，通過光纖交換機與存儲服務(wù)器構(gòu)成SAN

40、存儲網(wǎng)絡(luò)。SAN網(wǎng)絡(luò)基于先進的2Gbps光纖標(biāo)準(zhǔn)，數(shù)據(jù)傳輸快速，高效。在這種多級存儲體系中，磁盤陣列用來保存常用的、適用頻率高的數(shù)據(jù)資料，可以被使用者快速調(diào)用，數(shù)據(jù)流磁帶庫由于其存儲量大、安全可靠的特性，用來長時間保存不經(jīng)常使用的歷史資料，經(jīng)常使用的重要資料，也可以歸檔到帶庫，作為安全可靠的數(shù)據(jù)后備，以備在線盤陣一旦故障的情況下，還能夠確保數(shù)據(jù)的安全使用。A、 在線存儲在線存儲采用磁盤陣列來實現(xiàn)，采集整理的各類數(shù)據(jù)，如MPEG2和MPEG4節(jié)目，先存儲在本地視頻編碼器硬盤上，由數(shù)據(jù)交換服務(wù)器統(tǒng)一調(diào)度上載到SAN磁盤陣列，進入海量存儲系統(tǒng)的管理范圍。B、 近線存儲近線系統(tǒng)用來保存更大規(guī)模的數(shù)據(jù)資

41、料，系統(tǒng)重點考慮到了近線系統(tǒng)的與在線系統(tǒng)的數(shù)據(jù)交換性能，數(shù)據(jù)的存儲可靠性，系統(tǒng)運行成本，以及系統(tǒng)的擴展性（容量與性能）。近線存儲設(shè)備采用自動化的數(shù)據(jù)流磁帶庫設(shè)備，在存儲管理軟件模塊的指揮下，自動完成數(shù)據(jù)的多級遷移和調(diào)用。存儲管理軟件模塊具備強大的海量數(shù)據(jù)多級存儲能力，除了在線磁盤陣列存儲外，還可以控制磁帶庫等近線存儲設(shè)備，實現(xiàn)海量數(shù)據(jù)長時間的多級存儲與調(diào)度。C、 離線存儲隨著時間的推移，系統(tǒng)數(shù)據(jù)量會不斷增大，考慮到更長時間歷史數(shù)據(jù)的保存，存儲管理軟件支持?jǐn)?shù)據(jù)流磁帶出庫的離線保存方式，離線存儲在數(shù)據(jù)量超出近線帶庫保存容量的時候來使用。離線存儲用來保存更大規(guī)模的數(shù)據(jù)資料。在線存儲和近線存儲的數(shù)據(jù)都

42、是系統(tǒng)自動實現(xiàn)，可以實現(xiàn)實時數(shù)據(jù)交換和存儲容量之間的自動平衡，對實際業(yè)務(wù)中的數(shù)據(jù)，其訪問量隨著時間的推移而急速衰減。對訪問量較小的數(shù)據(jù)完全可以將其從帶庫中取出，進行離線存儲，為新數(shù)據(jù)、訪問量大的數(shù)據(jù)騰出寶貴的存儲空間。離線的數(shù)據(jù)流磁帶只要上架保存就可，用條形碼作為標(biāo)識，按類、時間等方式管理存放。D、 存儲網(wǎng)絡(luò)存儲網(wǎng)絡(luò)既能夠支持傳統(tǒng)的以太網(wǎng)方式，由能夠支持SAN結(jié)構(gòu)，使大容量數(shù)據(jù)采用FC傳輸?？紤]到系統(tǒng)的大數(shù)據(jù)量以及高效吞吐的要求，方案采用SAN結(jié)構(gòu)的存儲網(wǎng)絡(luò)，將磁盤陣列、磁帶庫和相關(guān)服務(wù)器統(tǒng)一連接到SAN網(wǎng)絡(luò)中，完成數(shù)據(jù)的高速訪問和調(diào)度。3.4.2 數(shù)據(jù)多級存儲的實現(xiàn)u 存儲任務(wù)管理總體的存儲

43、任務(wù)管理調(diào)度由“存儲控制”軟件模塊完成，“存儲管理”接受業(yè)務(wù)層數(shù)據(jù)遷移調(diào)度的指令，并把完成數(shù)據(jù)在不同存儲設(shè)備間搬移的工作分配給“數(shù)據(jù)遷移”模塊。根據(jù)數(shù)據(jù)遷移量的情況，系統(tǒng)中可以配備多個“數(shù)據(jù)遷移”模塊，分別由不同的主機完成數(shù)據(jù)遷移的任務(wù)，彼此互相協(xié)同的并行工作，這樣，中心存儲區(qū)的數(shù)據(jù)搬移、調(diào)度等處理工作能夠并發(fā)進行，從而保證存儲系統(tǒng)高效、穩(wěn)定的運行。其主要功能包括：接受應(yīng)用層管理與檢索指令、任務(wù)調(diào)度、下達(dá)數(shù)據(jù)搬移指令、反饋提示信息、系統(tǒng)設(shè)置及管理等等。u 數(shù)據(jù)歸檔與恢復(fù)“數(shù)據(jù)遷移”模塊接受存儲遷移的調(diào)度命令，主要完成把 數(shù)據(jù)從原始存儲位置遷移到目標(biāo)位置的工作，安裝有“數(shù)據(jù)遷移模塊”的數(shù)據(jù)搬移工

44、作站通過光纖通道分別連接磁盤陣列、磁帶庫。“數(shù)據(jù)遷移模塊”負(fù)責(zé)整個歸檔/恢復(fù)過程的執(zhí)行，完成磁盤陣列、磁帶庫之間的數(shù)據(jù)歸檔與恢復(fù)。u 磁帶庫機械手控制“機械手控制”軟件模塊負(fù)責(zé)操作控制磁帶庫的機械手，它配合相應(yīng)的歸檔/恢復(fù)命令，來操作機械手抓取磁帶并放入相應(yīng)的驅(qū)動器，從而與數(shù)據(jù)遷移器配合來完成具體的歸檔/恢復(fù)任務(wù)。由于本模塊通過底層的硬件控制，直接驅(qū)動帶庫機械手，所以系統(tǒng)中同一時刻只能有一個存在。u 離線磁帶管理“存儲服務(wù)器”還有一個附加功能，就是對離線的出庫磁帶進行管理。本功能允許當(dāng) 數(shù)據(jù)量達(dá)到一定程度，超出在線和近線存儲容量的時候，不經(jīng)常使用的磁帶可以自動或按照事先制訂的策略從磁帶庫中吐出

45、來，管理員可以人工將其保存到離線的帶架上，但是這盤磁帶的離線保存位置以及其數(shù)據(jù)對象信息已經(jīng)被軟件系統(tǒng)所記錄，即軟件同樣可以方便的管理離線的數(shù)據(jù)。例如，如果應(yīng)用層的 信息管理、檢索界面請求恢復(fù)一個位于已經(jīng)被取出的磁帶上的 信息時，相應(yīng)的磁帶狀態(tài)將變成“請求”，并要求操作員把這盤磁帶重新裝入帶庫，以備系統(tǒng)進行數(shù)據(jù)恢復(fù)和調(diào)用。本模塊允許將那些不常用的數(shù)據(jù)磁帶放到帶架上，以空出近線磁帶庫的存儲空間，來保存其它更為常用的數(shù)據(jù)。但是，它的重要特征就是軟件還在管理已經(jīng)被移出磁帶庫的離線數(shù)據(jù)磁帶。在軟件中，用戶可以方便的查詢、瀏覽離線帶架上的各種磁帶狀態(tài)與數(shù)據(jù)信息。u 存儲系統(tǒng)管理“存儲控制”模塊同時完成軟件

46、底層各種相關(guān)參數(shù)及用戶組設(shè)置，主要包括如下方面：遷移設(shè)置、磁帶庫設(shè)置、對象路徑監(jiān)視、對象的設(shè)計組成、策略條件監(jiān)視、數(shù)據(jù)分類設(shè)置、存儲位置設(shè)置、以及冗余糾錯設(shè)置等等。u 存儲系統(tǒng)維護負(fù)責(zé)系統(tǒng)的整體維護，顯示各種維護信息，主要包括：可以隨時方便的獲得整個系統(tǒng)的相關(guān)介質(zhì)運行狀態(tài)、磁帶驅(qū)動器的使用狀態(tài)、所有數(shù)據(jù)流磁帶的使用狀態(tài)、以及所有歸檔對象的存儲狀態(tài)等等。管理員可以根據(jù)相關(guān)信息來進行系統(tǒng)各方面的維護。u 磁帶冗余糾錯數(shù)據(jù)流磁帶經(jīng)過一段時間后可能會出現(xiàn)問題，從而導(dǎo)致所保存的數(shù)據(jù)損壞，為解決這個問題，Mars Media的“存儲服務(wù)器”軟件提供數(shù)據(jù)流磁帶的冗余糾錯功能。 “冗余模塊”采用了專利技術(shù)的可

47、移動存儲介質(zhì)冗余數(shù)據(jù)保護方法，其原理示意圖如下：校驗磁帶的生成數(shù)據(jù)磁帶的恢復(fù)由上圖，冗余校驗機制允許將帶庫中的n盤磁帶（n值可以根據(jù)實際需要自由設(shè)定）進行按位異或計算，即先將兩盤磁帶進行按位異或，得出的結(jié)果再與下一盤磁帶進行按位異或計算，以次類推，將n盤磁帶全部進行按位異或計算后生成的冗余數(shù)據(jù)作為備份容錯，寫入單獨的容錯磁帶。這樣，當(dāng)這n盤磁帶中有任何一盤磁帶損壞的話，軟件可以根據(jù)冗余數(shù)據(jù)和其它的n-1盤磁帶同樣通過按位異或算法，將損壞的磁帶恢復(fù)。并且如果這n盤磁帶中有不止一盤磁帶存在部分損壞，甚至每盤磁帶都有不同程度的損壞，只要每盤磁帶損壞的位置不互相重疊的話，仍然可以通過冗余數(shù)據(jù)對每盤磁帶

48、損壞部分進行恢復(fù)。本方案建議采用Raid冗余糾錯方式。數(shù)據(jù)多級存儲管理軟件模塊的操作界面示意如下：A、特定數(shù)據(jù)按照具體存儲策略由磁盤陣列向磁帶庫的歸檔保存：B、數(shù)據(jù)流磁帶庫設(shè)備管理：C：帶庫中數(shù)據(jù)流磁帶介質(zhì)的管理3.5 多媒體資料查詢?yōu)g覽通過軟件系統(tǒng)，對檔案庫中各類數(shù)據(jù)資料進行查詢?yōu)g覽，是對數(shù)據(jù)建模與編目結(jié)果的調(diào)用。系統(tǒng)的數(shù)據(jù)檢索完全基于標(biāo)準(zhǔn)的Web界面，用戶通過網(wǎng)絡(luò)能夠連接到中心元數(shù)據(jù)服務(wù)器的任何電腦，都能夠在授權(quán)的情況下，方便的查詢自己需要的任何信息。軟件支持多種復(fù)合式條件的數(shù)據(jù)檢索方式，用戶按照自己相應(yīng)的操作權(quán)限，可以按照各種主題詞、關(guān)鍵字等要素對資料庫中的數(shù)據(jù)進行檢索查詢，并返回結(jié)果，

49、大大提高了檢索效率和檢索結(jié)果的精確度。在對資料進行了多媒體采集和編目的基礎(chǔ)上，查詢終端不僅可以使用Web界面方便的查詢文檔、圖片類信息，還可以通過網(wǎng)絡(luò)瀏覽到低碼流的音像資料。 終端用戶對數(shù)據(jù)資料檢索查詢的具體功能如下： 3.5.1 視音頻資料檢索系統(tǒng)支持Web 方式的節(jié)目檢索查詢， 內(nèi)部的用戶通過Web 端瀏覽檢索視音頻資料需要相應(yīng)的企業(yè)門戶軟件的支持。Web 檢索門戶系統(tǒng)支持用戶通過以下多種方式進行視音頻資料的查詢、瀏覽。3.5.2 關(guān)鍵字檢索通過關(guān)鍵字進行的查詢功能主要提供模糊查詢和精確查詢功能。模糊查詢又稱為智能查詢。當(dāng)用戶輸入一個關(guān)鍵詞時，搜索引擎不但反饋包括了關(guān)鍵詞的資料信息，同時也

50、發(fā)來與關(guān)鍵詞意義相近的內(nèi)容。比如，當(dāng)查找“查詢”一詞時，模糊查詢會反饋來包涵了“查詢”、“查找”、“查一查”、“尋找”、“搜索”等內(nèi)容的資料；反饋資料的排列，一般是完全符合關(guān)鍵詞的在最前邊，其次是相近的。    模糊查詢沒有特殊的使用方法，只要在文字框中輸入關(guān)鍵詞即可。 而在對英文資料的查詢中，還可以使用通配符星號（*）和問號（?），使關(guān)鍵詞更為模糊。模糊查詢往往會反饋來大量不需要的信息，如果想精確地只查某一個關(guān)鍵詞，則可以使用精確查詢功能。精確查詢是在文字框中輸入關(guān)鍵詞，例如:“中華人民共和國”。3.5.3 條件組合檢索這一功能允許用戶輸入多個關(guān)鍵詞，而且，各關(guān)

51、鍵詞之間的關(guān)系可以是“和”、“或”、“非”（and、or、not）的邏輯關(guān)系，再通過各種匹配算法，反饋檢索結(jié)果。3.5.4 全文檢索通過輸入內(nèi)容中所包含的文字，通過全文檢索將反饋所有具有這些文字描述的多媒體資料信息。當(dāng)然，多媒體資料的全文檢索功能需要第三方全文檢索引擎的支持，考慮到商業(yè)化的全文檢索引擎比較昂貴，使用也比較復(fù)雜，本方案可以集成一個開源而且免費的全文檢索引擎，來達(dá)到數(shù)據(jù)高效的全文檢索。通過以上多種方式的檢索功能，系統(tǒng)將把符合條件的反饋資料按照樹形的方式顯示在界面中，用戶可以單擊所需資料的標(biāo)題進入。用戶可以根據(jù)權(quán)限的大小查看資料的文字信息、圖片信息、MPEG-4文件，以及下載高質(zhì)量的

52、MPEG-2文件。在內(nèi)容檢索、瀏覽功能模塊中，還具備資料的映射功能，通過標(biāo)記報道中出現(xiàn)的人物、地點和事件，使內(nèi)容更有價值。通過映射，資料將與其他相關(guān)的資料鏈接。查看一段資料的同時，可以瀏覽出與本資料相關(guān)的其他資料內(nèi)容，大大提高了資料信息的利用率。通過各類檢索條件可以方便的查詢到需要的各類資料信息，軟件界面如下：點擊任何查找到的多媒體資料，都可以瀏覽、查看其所有屬性、描述信息，并能夠在線播放Mpeg-4格式的wmv流媒體視頻。軟件界面如下圖所示：除了能夠瀏覽查詢到的節(jié)目資料的基本元數(shù)據(jù)以外，還可以查看與本資料相關(guān)聯(lián)的附件信息，如：與本資料附屬的圖片、文稿、背景介紹等關(guān)聯(lián)信息。3.6 資料下載編者

53、通過檢索后得到所需的資料內(nèi)容，在瀏覽其屬性，及觀看其低碼率視頻，確認(rèn)檢索數(shù)據(jù)即為所要資料后，可以對其進行下載，輸出。通過上、下載工作站或者任何與中心元數(shù)據(jù)服務(wù)器相連的終端電腦登錄軟件系統(tǒng)，在得到授權(quán)后，都可以對檢索到的高質(zhì)量節(jié)目數(shù)據(jù)進行下載，高質(zhì)量存儲格式采用標(biāo)準(zhǔn)的Mpeg-2 IBP格式，所以任何支持標(biāo)準(zhǔn)硬件或軟件Mpeg-2解碼的終端都可以對高質(zhì)量節(jié)目進行回放。同時，通過下載工作站的視頻輸出，還能夠向錄像機等設(shè)備輸出模擬信號，以便將節(jié)目轉(zhuǎn)錄到錄像帶等介質(zhì)。或者通過軟件轉(zhuǎn)碼，轉(zhuǎn)換成標(biāo)準(zhǔn)的DVD數(shù)據(jù)，刻錄到DVD光盤。這樣，從資料庫中輸出的數(shù)據(jù)介質(zhì)可以是磁帶、DVD光盤、VCD光盤、視音頻數(shù)據(jù)

54、文件和打印的資料等，形式多種多樣，滿足各類不同的應(yīng)用需要。對于需要再編輯的節(jié)目，還可以按照要求利用系統(tǒng)的轉(zhuǎn)碼模塊把存儲中心IBP幀的MPEG2格式節(jié)目轉(zhuǎn)換成用戶所需要的非線編I幀格式或?qū)Ｓ酶袷降奈募?，與非線編系統(tǒng)對接，實現(xiàn)節(jié)目的二次制作利用。對于非視音頻數(shù)據(jù)，不涉及多樣的格式轉(zhuǎn)換，可以直接從存儲中心將數(shù)據(jù)下載到檢索客戶端，利用對應(yīng)的編輯軟件，如：word 、excel 、acrobat reader、autocad等，對下載的數(shù)據(jù)進行查看，編輯。編輯完成過的數(shù)據(jù)，還可以重新錄入回數(shù)據(jù)檔案庫系統(tǒng)中。3.7 資料安全控制作為企業(yè)的集中式多媒體數(shù)據(jù)管理系統(tǒng)，系統(tǒng)安全尤為重要。安全性可以從兩方面來考慮

55、：用戶操作安全與數(shù)據(jù)安全。技術(shù)方案充分考慮到了系統(tǒng)的操作權(quán)限與數(shù)據(jù)安全管理。從用戶操作使用的權(quán)限控制來講：系統(tǒng)可以限制用戶的數(shù)據(jù)上載、訪問權(quán)限和針對不同級別的存儲資料做出不同的瀏覽權(quán)限的設(shè)定，最大限度的保護資料資源的安全。具體如下： A.系統(tǒng)管理的權(quán)限：整個系統(tǒng)是一個軟硬件結(jié)合的系統(tǒng)，它要涉及不同的管理比如網(wǎng)絡(luò)管理，數(shù)據(jù)庫管理，這些人員在對自己職責(zé)行使權(quán)限時應(yīng)該是經(jīng)過系統(tǒng)授權(quán)，所有的操作是在整個系統(tǒng)的安全控制范圍之內(nèi)。 B.登錄系統(tǒng)操作的權(quán)限：為了保證系統(tǒng)在安全有效的條件下進行運行，避免人為的干擾或破壞，在系統(tǒng)中實現(xiàn)了嚴(yán)格的權(quán)限管理，任何人員都只能根據(jù)事先規(guī)劃好的人員職能及權(quán)限分配計劃來使用媒資檔案系統(tǒng)，不能越權(quán)操作，從而有效保證素材使用的安全、有序、有效；保證節(jié)目制作按規(guī)范有序的進行。同時對每個操作使用人員以及網(wǎng)絡(luò)管理人員的每一次操作，系統(tǒng)都有詳細(xì)的日志記錄，系統(tǒng)管理員可以進行人員、部門、欄目的增加刪除；建立人員的登錄口令；用機使用計劃的制定；人員權(quán)限的設(shè)置；系統(tǒng)日志的管理等等。人員信息可以儲存在每個使用人員的身份認(rèn)證卡上。系統(tǒng)為每位操作人員都設(shè)有用戶帳號，用戶帳號對每個操作使用人員都上唯一的。用戶在使用媒資檔案系統(tǒng)以前，都有一個登錄過程。只有用戶名和密碼得到驗證通過后才可以使用系統(tǒng)各項功能。C.對數(shù)據(jù)訪問的權(quán)限：對于編目和標(biāo)引等環(huán)節(jié)的操作人員因為工作的需