多媒體復習總結(jié)

1、1,什么是媒體：媒體是信息表示和傳輸?shù)妮d體。2.媒體分類：感覺媒體，表示媒體，表現(xiàn)媒體，存儲媒體，傳輸媒體3,多媒體技術(shù)的定義和特點：多媒體技術(shù)就是計算機交互式綜合處理聲、文、圖信息的技術(shù)，具有集成性、實時性和交互性。4.多媒體標準：微軟提出 MPCISO和ITU聯(lián)合制定的數(shù)字化圖像壓縮國際標準：JPEG標準，MPEG標準，H.26X標準音頻壓縮的標準： G.728, G.721, G.722數(shù)字化：采樣- 量化-編碼8,多媒體技術(shù)的應(yīng)用：教育與培訓，咨詢和演示，娛樂和游戲，管理信息系統(tǒng)（MIS）,視頻會議系統(tǒng)，計算機支持協(xié)同工作，視頻服務(wù)系統(tǒng)9,多媒體數(shù)據(jù)中存在的數(shù)據(jù)冗余：空間冗余，時間冗余

2、，信息嫡冗余，結(jié)構(gòu)冗余，知識冗 余，視覺冗余。（需要擴展）.彩色空間：RGB彩色空間，RGB8:8:8方式,HIS 彩色空間：H （hue,色調(diào)），S （saturation,飽和度）,I （intensity,光強度）YUV彩色空間：Y為亮度信號，U, V是色差信號，采樣 4:2:2YIQ彩色空間：CMYK彩色空間.數(shù)字圖像格式： TIF, PCX, GIF , TGA , BMP , DVI.數(shù)據(jù)壓縮技術(shù)：（1）根據(jù)解碼后數(shù)據(jù)與原始數(shù)據(jù)是否完全一致來進行分類：a,可逆編碼（無失真編碼）：Huffman編碼，算術(shù)編碼，行程長度編碼b,不可逆編碼（有失真編碼）：壓縮比可以從幾倍到上百倍。常用的

3、有變換編碼和預(yù)測編碼（2）根據(jù)壓縮的原理劃分：a.預(yù)測編碼：DPCM系統(tǒng)中的誤差來源是發(fā)送端的量化器b.變換編碼：預(yù)測編碼主要是在時域上進行，變換編碼則利用頻域中能量較集中的特點，在頻域（變換域）上進行（K-L變換，最優(yōu)的變換方式）c,量化與向量量化編碼（最優(yōu)量化器是Max量化器）d.信息嫡編碼e.子帶（subband）編碼f,模型編碼.基于DCT有失真壓縮編碼的步驟：（1）離散余弦變換（2）量化處理（3） DC系數(shù)的編碼和 AC系數(shù)的行程編碼（4）嫡編碼. Huffman編碼定量：在變長編碼中，對出現(xiàn)概率大的信源符號賦予短碼字，而對于出現(xiàn) 概率小的信源符號賦予長碼字。如果碼字長度嚴格按照所對

4、符號出現(xiàn)概率大小的逆序排列， 則編碼結(jié)果平均長度一定小于任何其他排列方式。.算術(shù)編碼基本原理：將編碼的信息表示成實數(shù)0和1之間的一個間隔（interval）,信息越長，編碼表示它的間隔就越小，表示這一間隔所需的二進制位就越多。.算術(shù)編碼的特點：a,不必預(yù)先定義概率模型，自適應(yīng)模式具有獨特的優(yōu)點；b.信源符號概率接近時，建議使用算術(shù)編碼，這種情況下其效率高于Huffman編碼。. JPEG200主要特點：高壓縮率(低比特速率)；無損壓縮；漸進傳輸；感興趣區(qū)域壓縮. MPEG-1標準名稱為用于大約高達1.5Mbps速率的數(shù)字存儲媒體的運動圖像及其伴音 編碼. MPEG-2標準名稱為“運動圖像及其伴

5、音信息的通用編碼. MPEG-4標準名稱為甚低速率視聽編碼. MPEG編碼算法中采用兩種基本技術(shù)，即為了減少時間上冗余性的基于塊的運動補償技術(shù)和基于DCT變換的減少空間上冗余性的ADCT技術(shù).在 MPEG 中將圖像分為 3 種類型：I 圖像(intra picture ), P 圖像(predicted picture ), B 圖像(bidirectional picture )預(yù)測方法：幀內(nèi)預(yù)測，前向預(yù)測，后向預(yù)測，雙向預(yù)測.動態(tài)補償技術(shù)的作用何目的：主要用于消除 P圖像和B圖像在時間上的冗余性，提高 壓縮效率。原理：基于塊的運動補償技術(shù)，就是在其參照幀中尋找符合一定條件限制，當前被預(yù)測塊

6、的最佳匹配塊，找到匹配塊后，有兩種處理方式：一是在恢復被預(yù)測塊時，用匹配塊代替；二 是對預(yù)測的誤差采用 ADCT技術(shù)編碼，在恢復被預(yù)測塊時，用匹配塊加上預(yù)測誤差。. MPEG-4的顯著特點：基于內(nèi)容的編碼，更加注重對媒體系統(tǒng)的交互性，互操作性和靈 活性。. ITUH.261標準化方案的標題為64Kbps視聲服務(wù)用視像編碼方式，又稱為PX 64kbps 視頻編碼標準。PX 64kbps視頻編碼壓縮算法采用混合編碼方法，即基于 DCT的變換編碼 方法和帶有運動預(yù)測的DPCM預(yù)測編碼方法的混合。.語音的基本參數(shù)包括基音周期，共振峰，語音譜，聲強等。語音生成機構(gòu)的模型由3部分組成：聲源，共鳴機構(gòu)(也稱

7、聲道)，放射機構(gòu)。語音生成機構(gòu)模型對應(yīng)的聲源由基音周期參數(shù)描述，聲道由共振峰參數(shù)描述，放射機構(gòu)則由語音譜和聲強描述。.多媒體信息的主要的特點：1.多媒體信息存在和表現(xiàn)有多種形式。2.多媒體信息量大.光盤的分類：1.CD-ROM只讀光盤。2.WORM 一次寫多次讀光盤。3.Rewritalbe可重寫 光盤.光盤工作原理：只讀光盤讀原理：只讀光盤上的信息是沿著盤面螺旋形狀的信息軌道以凹坑和凸區(qū)的形式記錄的，凹凸交界的正負跳變沿均代表1,兩個邊緣之間代表數(shù)字 0可重寫光盤的擦寫原理：.磁光式擦寫原理照射單元區(qū)域磁化方向與其他未照射單元方向相反，從而產(chǎn)生一個信息存儲狀態(tài)1”,未經(jīng)照射單元相當于存儲單元

8、0.相變式擦寫原理兩種穩(wěn)定是反射率高的晶態(tài)和反射率低的非晶態(tài)(玻璃態(tài))。寫過程是把記錄介質(zhì)的信息點從晶態(tài)轉(zhuǎn)變?yōu)榉蔷B(tài)。擦過程是寫過程的逆過程。盤的規(guī)范和標準：1.CD-DA o 2.CD-ROM。3.CD-V(video) 。 4.可錄 CD。5.CD-I。6.CD-ROM XA 。 7.Photo-CD。 8.Video CD. CD-ROM的數(shù)據(jù)傳送速率：150KB/s稱為單速，倍速300KB/s ,4速600KB/s ,6速900KB/s. CD-ROM規(guī)范及格式：CD-ROM黃皮書標準很大程度的繼承了紅皮書的內(nèi)容，但 CD-ROM有自己的數(shù)據(jù)格式。 從物理結(jié)構(gòu)來說，CD-ROM同樣是把

9、光軌道分為等長的扇區(qū)， 使用分，秒，扇區(qū)的數(shù)據(jù)編址方法，采用常線速伺服方式。它與 CD-DA的不同主要是每個 扇區(qū)中數(shù)據(jù)格式的不同。. DVD光盤：MPEG-1的視頻質(zhì)量具有家用錄像機的質(zhì)量，它的技術(shù)促成了VCD產(chǎn)業(yè)，MPEG-2的視頻質(zhì)量是廣播級質(zhì)量， 由于采用MPEG-2標準的視頻數(shù)據(jù)量很大， 為解決其存 儲問題，研制了 DVD（dig讓al video disc）,并于1995年完成標準化方案。 DVD盤片尺寸與 CD相同，容量最高的雙層雙面盤可達 17GB。單面單層 DVD盤能夠存儲4.7GB的數(shù)據(jù)， 存儲133分鐘的MPEG-2視頻。其分辨率與現(xiàn)在的電視相同，并配備 Dolby AC

10、-3/ MPEG-2 音頻質(zhì)量的聲音和不同語音的字幕。.聲音卡：聲音卡或音頻卡是處理音頻信號的計算機插件，它是普通計算機向MPC升級的一種重要部件。.視頻卡：分為視頻采集卡，視頻壓縮卡，視頻解壓卡和視頻轉(zhuǎn)接卡。.視頻采集卡功能：視頻采集卡將視頻信號連續(xù)轉(zhuǎn)換為計算機存儲的數(shù)字視頻數(shù)據(jù)。.圖像數(shù)字化圖像信息的空間分布和亮度（顏色）分布都是連續(xù)的，這些連續(xù)的信息量必須離散化，離散化的過程即數(shù)字化處理過程，它應(yīng)該包括空間位置的離散和亮度電平的離散化.圖像掃描儀：光電轉(zhuǎn)換部件是CCD （電耦合器件）.觸摸屏應(yīng)包括3個部分：傳感器，控制部件，驅(qū)動部件。.觸摸屏按其工作原理可分為紅外線觸摸屏，電阻式觸摸屏，

11、電容式觸摸屏，表面聲波技術(shù)和底座式矢量壓力測力觸摸屏等。.多媒體個人計算機基本的硬件結(jié)構(gòu)可以歸納為：1.一個功能強大的，速度快的中央處理器（CPU）。2.大容量的存儲器空間。3.高分辨率顯示接口與設(shè)備。4.可處理音響的接口與設(shè)備。5.可處理圖像的接口與設(shè)備。6.可存放大量數(shù)據(jù)的配置等。. CD-I系統(tǒng)是家庭交互式多媒體系統(tǒng)。. VCD播放機由3個核心部件組成：CD驅(qū)動器或稱CD加載器。MPEG解碼器。微控制 器. DVD播放系統(tǒng)：1.DVD盤讀出機構(gòu)。2.DVD-DSP。3.數(shù)字聲音/視頻解碼器。4.微處理 器。.多媒體工作站的意義和特點：工作站是市場上一種功能很強的小型計算機系統(tǒng)，一般特點是

12、采用UNIX操作系統(tǒng)，具有GUI接口，很強的圖形圖像處理功能。多媒體工作站設(shè)計成為能同時處理離散和連續(xù)媒體信息的工作站系統(tǒng)。.多媒體應(yīng)用軟件俄開發(fā)過程：1.明確使用對象，了解用戶需求。2.選擇開發(fā)方法。3.準備對媒體數(shù)據(jù)。4.完成系統(tǒng)集成。.音頻數(shù)據(jù)：計算機處理的音頻種類通常包括波形音頻和MIDI音頻（P120）. MIDI音頻文件是一串的時序命令，它記錄下音樂的行為，例如鋼琴鍵，踩踏板等。但 是MIDI卻有一個嚴重的缺點，不適合編制口語旁白的音頻。.圖像數(shù)據(jù)圖像一般分為靜態(tài)對象（通常稱圖像）和活動的視頻。靜態(tài)圖像通常以位映射矩陣的方法來 表示每一像素點的顏色數(shù)據(jù)。（P124）.視頻由光線照射

13、在物體上面，反映在照相機或攝像機的鏡頭上，這種反射的光便形成電子信號。這些信號可以分為3種顏色的合成，即 RGB三色。.視頻標準：NTSC制式：美國PAL制式：中國，英國SECAM制式：法國，俄羅斯.什么是圖形：計算機圖形學是研究怎樣用計算機表示，生成，處理和顯示圖形的一門學科。.計算機動畫使用計算機生成一系列可供實時演播的連續(xù)畫面技術(shù)。.計算機動畫研究內(nèi)容：1.運動控制方法。2.動畫描述模型與動畫語言。3.中間畫面的生成技術(shù)。4.三維動畫中的物體造型技術(shù)。5.動畫繪制技術(shù).多媒體開發(fā)和創(chuàng)作環(huán)境具有下述功能：1.提供多媒體程序編程的環(huán)境。 2.超文本、超媒體和多媒體數(shù)據(jù)管理的功能。 3.支持多

14、媒體數(shù)據(jù)的輸入輸出。 4.應(yīng)用連接功能。5.多媒體數(shù) 據(jù)制作功能。6.友好的用戶界面。.多媒體編著工具的功能和分類和典型工具.以卡或頁為基礎(chǔ)的多媒體編著工具。.基于圖符和事件的多媒體編著工具。.以時間為基礎(chǔ)的多媒體編著工具。.以傳統(tǒng)的程序語言為基礎(chǔ)的編著工具。.多媒體數(shù)據(jù)的存儲環(huán)境：1.可更換的硬盤。2.磁帶備份介質(zhì)。3.光盤檔案介質(zhì)。4.磁盤陣 列。.多媒體數(shù)據(jù)的傳輸環(huán)境：3種傳輸方法1.使用可更換得介質(zhì)進行人工傳輸。2.使用串行端口實行點對點傳輸。3.使用網(wǎng)絡(luò)系統(tǒng)，實現(xiàn)計算機之間的傳輸。.多媒體數(shù)據(jù)管理的軟件環(huán)境：1.文件管理系統(tǒng)。2.建立特定的邏輯目錄。3.傳統(tǒng)的字符，數(shù)值數(shù)據(jù)庫管理系統(tǒng)

15、。4.多媒體數(shù)據(jù)庫管理系統(tǒng)。5.超文本和超媒體.多媒體數(shù)據(jù)對數(shù)據(jù)庫的影響體現(xiàn)在以下幾方面：.數(shù)據(jù)量大且媒體之間差異也大，從而影響數(shù)據(jù)庫中的組織和存儲方法。.媒體種類的增多增加了數(shù)據(jù)處理的難度。.查詢的結(jié)果是綜合多媒體信息的統(tǒng)一表現(xiàn).MDBMS應(yīng)增加這種處理長事務(wù)的能力。.MDBMS應(yīng)提供很強的版本管理能力。. MDBMS的組織結(jié)構(gòu)一般可分為 3種，即集中型、主從型和協(xié)作型。.擴充的關(guān)系數(shù)據(jù)模型不但能支持格式化數(shù)據(jù)，也能處理非格式化數(shù)據(jù)。.面向?qū)ο蟮幕靖拍睿?對象。(2).屬性。(3).方法。(4).對象類。(5).子類和父類。(6).消息。(7).繼承性。(8).多態(tài) 性.(重點)面向?qū)ο蟮?/p>

16、數(shù)據(jù)庫模型(未完成P179).基于內(nèi)容的檢索技術(shù)的特點.從媒體內(nèi)容中提取信息線索，直接對媒體進行分析，抽取特征。(2).提取特征方法多種多樣。(3).人機交互。(4).基于內(nèi)容的檢索采用一種近似的匹配技術(shù)。.基于內(nèi)容的檢索系統(tǒng)實現(xiàn)方法：.基于傳統(tǒng)的數(shù)據(jù)庫檢索方法。(2)基于信號處理理論，即采用特征抽取和模式識別的方法。. MPEG-7 ,它的正式名稱是多媒體內(nèi)容描述接口 . MPEG-7的相關(guān)概念：數(shù)據(jù)特征描述子描述值描述模式描述編碼的描述(MPEG-7的核心)描述定義語言：一種允許產(chǎn)生新的描述模式的描述子的語言，允許擴展 和修改現(xiàn)有的描述機制。(P190).文本的特點：線性的和順序的。.超文

17、本的特點：沒有固定的順序。.超文本是由信息結(jié)點和表示信息結(jié)點間相關(guān)性的鏈構(gòu)成的一個具有一定邏輯結(jié)構(gòu)和語 義的網(wǎng)路。.超媒體=多媒體+超文本.超文本系統(tǒng)結(jié)構(gòu)模型：HAM模型：分為3層.數(shù)據(jù)庫層：提供存儲、共享數(shù)據(jù)和網(wǎng)絡(luò)訪問功能。.超文本抽象機層：介于數(shù)據(jù)庫層和用戶界面層之間，這一層決定了超文本系統(tǒng)結(jié)點和鏈 的基本特點，記錄了結(jié)點之間鏈的關(guān)系，并保存了有關(guān)結(jié)點和鏈的結(jié)構(gòu)信息。.用戶界面層又稱為表現(xiàn)曾，它構(gòu)成超文本系統(tǒng)特殊性的重要表現(xiàn)。包括用戶可以使用命 令，HAM層信息(結(jié)點和鏈)如何展示。Dexter模型：也分為 3層.存儲層：描述成員之間的網(wǎng)狀關(guān)系.成員內(nèi)部層：描述超文本中各個成員的內(nèi)容和結(jié)構(gòu)

18、。.運行層：描述支持用戶和超文本交互作用的機制。.表現(xiàn)規(guī)范：模型中介于存儲層和運行層之間的接口稱為表現(xiàn)規(guī)范。.錨定機制：存儲層和成員內(nèi)部之間的接口稱為錨定機制。.鏈可以分為如下幾種類型：.基本結(jié)構(gòu)鏈.組織鏈.推理鏈.文獻模型概述：文獻是文章或文本的組合文獻的一般結(jié)構(gòu)：文獻的結(jié)構(gòu)包括內(nèi)容組織和版面安排兩個方面。文獻模型的基本任務(wù)：.能夠表示多媒體文獻的內(nèi)容層次性。.能夠表示多媒體文獻的版面布局。.能夠表示多媒體文獻的時間布局。.能夠?qū)?nèi)容與布局對應(yīng)起來。(P203).文獻模型：ODA模型和HyTime模型. HTML語言：超文本標記語言. XML語言：可擴展的標記語言。3個要素：文檔定義，XSL

19、, Xlink。XML提供了數(shù)據(jù)定義機制，目前存在兩種方式：DTD和Schema.常用的動態(tài)網(wǎng)頁技術(shù)主要有：ASP, PHP, JSP. Web系統(tǒng)是采用HTTP協(xié)議的超文本系統(tǒng)，其基本結(jié)構(gòu)是一個客戶機/服務(wù)器模型.網(wǎng)絡(luò)服務(wù)器站點鏡像特點：為了提高響應(yīng)速度，減少網(wǎng)絡(luò)負擔，增強系統(tǒng)得強壯性。.代理服務(wù)器的特點：在靠近客戶端的合適位置緩存熱點訪問信息。. Web緩存設(shè)計白優(yōu)點： Web緩存可以顯著的改善 Web系統(tǒng)的服務(wù)性能，減少了帶寬消 耗，減少了用戶訪問延時，減少了遠程 Web服務(wù)器的工作負荷。 Web服務(wù)的強壯性加強。. Web緩存設(shè)計的缺點：缺乏合適的緩存代理更新，代理總是系統(tǒng)服務(wù)的瓶頸，

20、減少遠 程服務(wù)器的點擊率。.緩存系統(tǒng)的體系結(jié)構(gòu)：(1).層級緩存結(jié)構(gòu)。(2).分布式緩存結(jié)構(gòu)。(3).混合的緩存結(jié)構(gòu).常用的緩存方式：預(yù)裝技術(shù)，動態(tài)置換，部分緩存.緩存置換策略：(1).傳統(tǒng)的置換策略及其直接擴展。(2).基于鍵的置換策略.(3).基于費用的置換策略。.數(shù)據(jù)模型就是計算機數(shù)據(jù)世界中建立的計算機所能接受的對現(xiàn)實世界中所要研究對象的抽象描述。(1).提供一種計算機可接受的信息表示和處理方法(2).能夠指出數(shù)據(jù)構(gòu)造。.多媒體數(shù)據(jù)時空關(guān)系建模是多媒體系統(tǒng)的關(guān)鍵問題。.多媒體系統(tǒng)表現(xiàn)的模型分層次來實現(xiàn)。描述性定義：.多媒體表現(xiàn)是多媒體數(shù)據(jù)的合成再現(xiàn)。.多媒體合成主要包括空間和時間合成。.

21、空間合成是同一表現(xiàn)空間域中共存的一系列媒體對象之間的空間特性、位置關(guān)系的描述。.時間合成是在某一時間域內(nèi)并發(fā)(包括順序和并行)表現(xiàn)的一系列媒體對象之間的時序 關(guān)系的描述。.多媒體同步是指采用進程來協(xié)調(diào)時序關(guān)系的機制，亦即實現(xiàn)時間合成方法的描述。91.多媒體系統(tǒng)數(shù)據(jù)模型的層次結(jié)構(gòu)以信息內(nèi)容組織來看分為3個層次：應(yīng)用層，信息元層,數(shù)據(jù)元層.從表現(xiàn)角度來看：.系統(tǒng)對用戶的表現(xiàn)如何安排(包括交互能力)？這是上層同步問題，主要通過腳本的描 述來解決。.信息元內(nèi)各元素的時空編排如何？這是中間同步問題，亦即時空合成問題。(4).計算機的具體實現(xiàn)對應(yīng)于最低層的同步；由系統(tǒng)內(nèi)部完成。.形式化描述：就是用數(shù)學的概

22、念或類數(shù)學概念來精確地定義和描述信息系統(tǒng)的基本特性 (屬性和結(jié)構(gòu)等)的一種方法。.超文本的形式化描述方法：集合論和一階邏輯.多媒體信息元：以自上而下的觀點來看：具有一定語義的，組成信息系統(tǒng)應(yīng)用的信息子塊。以自下而上的觀點來看：一個或多個媒體數(shù)據(jù)元經(jīng)過一定的添加與包裝而合成的超數(shù)據(jù)元。.信息元的大?。焊鞣N多媒體應(yīng)用的公共需求，即信息元必須滿足的特性。.信息元的合成：信息元的合成主要指多個數(shù)據(jù)元之間的時空合成，亦即時空關(guān)系的描述。不同模型有不同的描述方法。. MHEG標準采用面向?qū)ο蟮姆椒▉矸治鲈O(shè)計模型。MH對象分為以下幾類：.輸出內(nèi)容對象.一般輸入對象.投射器對象.基本對象.合成對象.條件與動作

23、.表現(xiàn)是把各種媒體信息戰(zhàn)是個用戶的活動，是多媒體數(shù)據(jù)的合成再現(xiàn)。.以時間順序和空間關(guān)系來安排多種媒體的合成表現(xiàn)，即是多媒體同步問題。. 3種基本的同步表示方法：.層次化同步.基于時間軸的同步.基于參考點的同步101.多媒體對通信的影響.多媒體數(shù)據(jù)量.多媒體實時性.多媒體時空約束.多媒體交互性.分布式處理和協(xié)同工作.多媒體通信的實現(xiàn)途徑：話路+視頻-多媒體通信網(wǎng)絡(luò)+視頻-多媒體通信有線電視+交換功能-多媒體通信.多媒體通信的關(guān)鍵技術(shù)：聲音、視頻、動畫等的傳輸技術(shù)數(shù)據(jù)壓縮和解壓縮技術(shù)解決多媒體實時同步問題解決協(xié)議和標準化問題.在模擬通信網(wǎng)上傳輸靜態(tài)圖像的電話稱為可視電話.在模擬通信網(wǎng)和數(shù)字網(wǎng)上傳輸動態(tài)或準動態(tài)圖像的可視電話稱為電視電話，分為4個部分：.語音處理部分.圖像輸入部分.圖像輸出部分.圖像信號處理部分.視頻會議系統(tǒng)：是一種在位于兩個或多個地點的一群用戶之間提供語音和運動彩色畫面 的雙向?qū)崟r傳送的視聽會話型電信會議業(yè)務(wù)。.視頻會議系統(tǒng)的類型：.高檔會議室型.桌面會議系統(tǒng).可視電話型108.視頻顯示的轉(zhuǎn)換控制的 3種模式：.語音激活模式.主席控制模式.講課模式.計算機網(wǎng)絡(luò)是計算機技術(shù)與通信技術(shù)結(jié)合的產(chǎn)物，它使信息傳輸和信息加工緊密聯(lián)系在一起，成為信息社會重要的標志和基礎(chǔ)。.網(wǎng)絡(luò)對多媒體通信支持的各種方式及特點：電話交換網(wǎng)：電話網(wǎng)本質(zhì)上講是用于模擬語音通信