多媒體技術(shù)介紹

1、三個問題 Why? What? How?Why?硬性規(guī)定、獲得學分“廣播電視編導”專業(yè)角度信息化社會中的一員人與媒體=魚與水 3G手機（無線通信與多媒體通信相結(jié)合） 多媒體計算機、多媒體網(wǎng)絡教室、多媒體課件 數(shù)字化電視（廣播電視） 網(wǎng)頁（文本、圖像、聲音、視頻） 影院（3D電影） 游戲（手柄、方向盤、裝備）信息多媒體技術(shù)媒體信息與多媒體技術(shù)的關(guān)系主要內(nèi)容（what）第一章多媒體技術(shù)概述第二章多媒體系統(tǒng)環(huán)境第三章圖形與圖像第四章音頻與視頻第五章多媒體處理技術(shù)第六章網(wǎng)絡多媒體應用第七章多媒體數(shù)據(jù)庫技術(shù)第八章多媒體編輯與創(chuàng)作實驗重點推薦書目（how）教材：多媒體技術(shù)與應用楊帆 高教多媒體技術(shù)及應用

2、游澤清 高教多媒體技術(shù)基礎(chǔ) 林福宗 清華 第一章 多媒體技術(shù)概論 多媒體技術(shù)的基本概念 多媒體技術(shù)的發(fā)展歷程 多媒體技術(shù)的研究內(nèi)容 多媒體技術(shù)的應用及前景涉及到以下幾個概念：媒體多媒體多媒體技術(shù)多媒體中的基本元素第一節(jié) 基本概念1.媒體古時，媒指做媒，婚姻介紹的中介?，F(xiàn)代人引用過來，指表示和傳播信息的載體。 媒體是指傳播信息的介質(zhì)，通俗的說就是傳播信息的載體或平臺。如：報紙刊物、廣播、電視、互聯(lián)網(wǎng)、移動網(wǎng)絡等媒體形式。注意區(qū)分：通常提到的“媒體”與計算機領(lǐng)域中所提到的“媒體”。媒體在計算機領(lǐng)域中通常有兩種含義：一種是指信息的物理載體，即存儲和傳遞信息的實體。如硬盤、軟盤、光盤等。另一種含義是指

3、信息的表現(xiàn)形式（或者說傳播形式）。如文本、音頻、視頻、圖形、圖像和動畫等。 從medium的譯名來看： medium service（媒介服務中心，相當于我國的“電教中心”）medium指的是磁帶、光盤等存儲教學信息的物理介質(zhì) media player（媒體播放器）media（復數(shù)形式）指存儲在硬盤、光盤上的圖像、聲音、文本、動畫等教學信息的表現(xiàn)形式（或載體） 從多媒體的詞組來看： 多媒體教室媒體：計算機、DVD、視頻展示臺、網(wǎng)絡設(shè)備等 多媒體課件媒體：課件中數(shù)字、文本、圖形圖像、聲音、視頻等 為了便于描述媒體在存儲、處理和傳遞信息等過程的相關(guān)問題，國際電話電報咨詢委員會（CCITT后改ITU

4、）制定了媒體分類的標準（5類型）：（1）感覺媒體（ Perception Medium ）（2）表示媒體（ Representation Medium ）（3）顯示媒體（ Presentation Medium ）（4）存儲媒體（ Storage Medium ）（5）傳輸媒體（ Transmission Medium ）兩個單位CCITT：International consultative committee on telecommunications and Telegraphy（國際電報電話咨詢委員會）ITU：International Telecommunication Union

5、（國際電信聯(lián)盟）1）感覺媒體（ Perception Medium ） 它指直接作用于人的感覺器官，使人直接產(chǎn)生感覺的媒體。如引起聽覺反應的聲音，引起視覺反應的圖像等等。 主要包括數(shù)據(jù)、文本、圖形、圖像、聲音、視頻、動畫等。2）表示媒體（ Representation Medium ）（再生媒體） 指各種編碼，如語言編碼、文本編碼、圖像編碼等。這是為了表達、處理和傳輸信息（感覺媒體）而人為地研究、構(gòu)造出來的一種媒體。傳輸和存儲的一般是表示媒體。 表示媒體是這五類媒體的核心。3）表現(xiàn)媒體（ Presentation Medium ） 指把感覺媒體輸入到計算機或通過計算機展示感覺媒體的物理設(shè)備，即

6、獲取和還原感覺媒體的輸入、輸出設(shè)備。 鼠標、鍵盤、話筒、掃描儀、攝像機等是輸入表現(xiàn)媒體；顯示器、打印機、音箱等是輸出表現(xiàn)媒體。4）存儲媒體（ Storage Medium ）指用于存儲表示媒體的物理設(shè)備。如軟盤、硬盤、光盤、磁盤（帶）、閃存等。5）傳輸媒體（ Transmission Medium ）指用于傳輸表示媒體的物理介質(zhì)。如雙絞線、同軸電纜、光纖和電磁波等。存儲計算機顯示輸入設(shè)備顯示存儲輸入設(shè)備計算機傳輸文本、圖形、動畫、數(shù)據(jù) 計算機信息媒體的傳遞過程文本、圖形、動畫、數(shù)據(jù)討論：信息與媒體的關(guān)系以上觀點：媒體既是信息的表現(xiàn)形式，又是信息的物理載體。另一種觀點：媒體是信息的表現(xiàn)形式，媒介

7、是信息的物理載體。 第二種看法： 媒體是信息的載體，信息只有通過某一種或幾種媒體形式才能表達出來，感覺媒體和經(jīng)過處理后的表示媒體均屬于媒體的范疇。 媒介是用于存儲、呈現(xiàn)或傳輸媒體的物理介質(zhì)。存儲媒介、傳輸媒介和呈現(xiàn)媒介都屬于媒介的范疇。 按照第二種觀點，信息、媒體和媒介三者關(guān)系與電子信息領(lǐng)域中信息、信號和信道三者關(guān)系是對應的 信息總是通過某種信號形式表現(xiàn)出來的，如電視領(lǐng)域中視頻信號、音頻信號，計算機領(lǐng)域中的各種格式的數(shù)據(jù)信號等。 信號只能在其規(guī)定的信道中傳送，如錄像機中的視頻通道、音頻通道、計算機中的各種總線等。 2. 多媒體 從字面上看，多媒體就是多重媒體的意思，即是由兩種以上媒體融合而成的

8、信息綜合表現(xiàn)形式，是多種媒體的綜合、處理和利用的結(jié)果。 多媒體的實質(zhì)是將不同表現(xiàn)形式的媒體信息數(shù)字化并集成為有機整體，同時實現(xiàn)交互控制。多媒體的特性（與傳統(tǒng)傳媒區(qū)別）：1.兩種以上不同媒體信息的有機集成。2.信息是數(shù)字化的。3.可以讓人們主動地與信息媒體進行交互。舉例：判斷是不是屬于多媒體范疇彩色電視電子有聲圖書交互視頻 多媒體技術(shù)是計算機綜合處理文字、圖形圖像、聲音、視頻和動畫等多種媒體信息，使它們集成為一個系統(tǒng)并具有交互性的信息處理技術(shù)。 即多媒體技術(shù)是：一種計算機處理技術(shù)；一種信息處理技術(shù)；一種人機交互技術(shù)；是關(guān)于多種媒體和多種應用綜合的技術(shù)。3. 多媒體技術(shù)多媒體技術(shù)的特點：1.集成性

9、：體現(xiàn)在兩個方面。即多種信息媒體的集成與處理這些媒體的軟硬件集成。前者指多媒體信息的多通道統(tǒng)一獲取、存儲組織及表現(xiàn)等各方面；后者中硬件集成指計算機系統(tǒng)及其外設(shè)的集成；軟件集成指多媒體操作系統(tǒng)、多媒體信息處理系統(tǒng)、多媒體應用開發(fā)與創(chuàng)作工具的集成。多媒體技術(shù)的特點：2.交互性：有別于傳統(tǒng)信息交流媒體的關(guān)鍵特征。交互性是指人機可以對話，多媒體技術(shù)的交互性將為用戶提供更加有效的控制和使用信息的手段。 借助于交互人們不是被動地接受文字、圖像、視頻等，而是主動地隨時進行編輯、處理、檢索等。多媒體技術(shù)的特點：3.多樣性（媒體種類和處理技術(shù)）4.數(shù)字化（計算機處理數(shù)字信號）5.實時性（實時處理視音頻） 多媒體

10、應用的根本目的是以自然習慣的方式，有效地接受計算機世界的信息，并通過媒體展現(xiàn)。多媒體元素就是指多媒體應用中可以顯示給用戶的媒體組成元素。目前主要包括文本、圖形、圖像、音頻、視頻和動畫等媒體元素。4.多媒體應用系統(tǒng)中的媒體元素4.1 文本（Text） 它是指各種文字。它是計算機文字處理程序的基礎(chǔ)，也是多媒體應用程序的基礎(chǔ)。是人和計算機交互作用的主要形式。文本主要有兩種形式： 非格式化文本：僅能按一種形式和類型使用，不具備排版功能。如*.txt 格式化文本：可對文本進行編排，包括各種字體、尺寸、格式、色彩、段落格式、頁面屬性等等。常見格式：*.doc、*.rtf4.2 圖形（Graphic） 圖形

11、是指從點、線、面到三維空間的黑白或彩色幾何圖，也稱為矢量圖。 它是以一組描述點、線、面等大小、形狀、位置、維數(shù)和其他屬性的指令集合。通過讀取指令可以將其轉(zhuǎn)換為輸出到顯示器上的圖像。4.3 圖像（Image） 原指在印刷品上的圖形、圖畫等。多媒體技術(shù)中的圖像是由掃描儀、攝像機等輸入設(shè)備捕捉實際的畫面產(chǎn)生的數(shù)字圖像，是由像素點陣構(gòu)成的位圖。 可以把圖像進行二維空間分割，每個行、列的交點就是“像素點”，位圖中的像素點是基本數(shù)據(jù)單位，用來定義每個像素點的顏色和亮度。它適合表現(xiàn)細膩、含有大量細節(jié)的對象。圖形與圖像的區(qū)別：1.基本概念 圖形是指由外部輪廓線條構(gòu)成的矢量圖。即由計算機繪制的直線、圓、矩形、曲

12、線、圖表等；而圖像是由掃描儀、攝像機等輸入設(shè)備捕捉實際的畫面產(chǎn)生的數(shù)字圖像，是由像素點陣構(gòu)成的位圖。2.數(shù)據(jù)描述 圖形：用一組指令集合來描述圖形的內(nèi)容，如描述構(gòu)成該圖的各種圖元位置維數(shù)、形狀等。描述對象可任意縮放不會失真。 圖像：用數(shù)字任意描述像素點、強度和顏色。描述信息文件存儲量較大，所描述對象在縮放過程中會損失細節(jié)或產(chǎn)生鋸齒。圖形與圖像的區(qū)別：3.屏幕顯示 圖形：使用專門軟件將描述圖形的指令轉(zhuǎn)換成屏幕上的形狀和顏色。 圖像：是將對象以一定的分辨率分辨以后將每個點的信息以數(shù)字化方式呈現(xiàn)，可直接快速在屏幕上顯示。 4.適用場合 圖形：描述輪廓不很復雜，色彩不是很豐富的對象，如：幾何圖形、工程圖

13、紙、CAD、3D造型軟件等。 圖像：表現(xiàn)含有大量細節(jié)（如明暗變化、場景復雜、輪廓色彩豐富）的對象，如：照片、繪圖等，通過圖像軟件可進行復雜圖像的處理以得到更清晰的圖像或產(chǎn)生特殊效果。4.4 音頻（Audio） 有時也泛稱聲音，除語音、音樂外，還包括各種音響效果。聲音不僅能烘托氣氛，而且還能增加活力，增強對其他類型媒體所表達的信息的理解。 通常，聲音用一種模擬的連續(xù)波形表示；而多媒體中的聲音是數(shù)字音頻，它是指一個用來表示聲音強弱的數(shù)據(jù)序列，由模擬聲音經(jīng)過采樣、量化和編碼后得到的。計算機、數(shù)字光盤中存儲的都是數(shù)字聲音。4.5 視頻（Video） 視頻是圖像數(shù)據(jù)的一種，若干有聯(lián)系的圖像數(shù)據(jù)連續(xù)播放就

14、形成視頻。視頻常常與音頻配合進行，二者的共同基礎(chǔ)是時間連續(xù)性。一般意義上談到視頻時，往往也包括聲音媒體。但在這里，視頻特指不包含聲音的動態(tài)圖像。 計算機視頻圖像可來自攝像機、錄像帶等視頻信號源的映像。視頻圖像使得多媒體應用系統(tǒng)功能更強、更精彩。4.6 動畫（Animation） 動畫就是通過以1220幀每秒的速度順序地播放靜止圖像，利用人眼視覺暫留現(xiàn)象從而產(chǎn)生運動的錯覺。動畫的連續(xù)播放既指時間上的連續(xù)，也指圖像內(nèi)容上的連續(xù)，即播放的相鄰兩幅圖像之間內(nèi)容相差不大。 計算機動畫是借助計算機生成一系列連續(xù)圖像的技術(shù)。復習：1.媒體、多媒體、多媒體技術(shù)的概念2.多媒體的各媒體要素1.2 多媒體技術(shù)的發(fā)

15、展 多媒體技術(shù)的核心是計算機技術(shù)，多媒體技術(shù)的發(fā)展實質(zhì)上就是計算機技術(shù)的發(fā)展，實質(zhì)上就是通過計算機技術(shù)把各種信息媒體相互集成在一起并使之具有交互性的過程。 “多媒體”一詞出現(xiàn)于20世紀80年代，至今，多媒體發(fā)展共經(jīng)歷了三個階段： 孕育階段（20世紀80年代初期 90年代初）計算機圖形化以及數(shù)字光盤的出現(xiàn) 問世階段（20世紀90年代初期 90年代中）計算機與視音頻（電視）相結(jié)合 發(fā)展階段（20世紀90年代中期 至今）計算機與通信網(wǎng)絡的結(jié)合1. 孕育階段 流行叫法：交互式視頻(Interactive Video) 特點：計算機圖形化（計算機應用開始深入到人們生活、工作的各個領(lǐng)域，要求其人-機接口不

16、斷改善，即由字符方式、文本處理向圖形方式、聲音和圖像處理發(fā)展。）和交互視頻技術(shù)（大容量光盤的出現(xiàn)使得計算機處理體積龐大的視頻成為可能）重要歷程： 1984年蘋果公司研制了Mac計算機，其中引入了位圖（bitmap）、窗口（window）、圖符（icon）等技術(shù)，并由此創(chuàng)建了圖形用戶界面（Graphical User Interface GUI），同時采用鼠標配合，使人機界面得到極大改善。 1985年微軟公司也推出了Windows操作系統(tǒng)，并且不斷更新版本，使之成為后來運行多媒體的一種普遍采用的工作平臺。早期計算機使用的DOS命令行界面 Windows3.0圖形用戶界面 vista界面 雖然計算

17、機圖形化使得計算機能處理視頻的目標邁了一大步，但是由于當時計算機的存儲容量較小，需盡快找到解決方案。 計算機采用隨機存儲方式的磁盤系統(tǒng)，但是存儲容量小。而錄像機采用是磁帶存儲系統(tǒng)的線性記錄方式，不能快速檢索和實時調(diào)用；于是研究者把注意力集中到光盤上來。當時看來光盤存儲容量高，而且還能實現(xiàn)快速尋址。交互式視頻的出現(xiàn)： 1986年索尼公司和飛利浦公司聯(lián)合推出的交互式光盤系統(tǒng)，這項技術(shù)對大容量光盤的發(fā)展產(chǎn)生了巨大影響，為存儲表示聲音、文字、圖像、視頻等高質(zhì)量的數(shù)字化媒體提供有效的手段。 1989年英特爾公司推出的交互式數(shù)字視頻技術(shù)，它是由計算機專業(yè)公司在PC機上采用視頻卡、音頻卡的思路設(shè)計出來的。它

18、是以計算機技術(shù)為基礎(chǔ)，用標準光盤來存儲和檢索靜態(tài)圖像、視頻和聲音等數(shù)據(jù)。交互式光盤系統(tǒng)和交互式視頻技術(shù)這兩者都是交互式視頻領(lǐng)域中以光盤為存儲介質(zhì)的階段性成果，二者技術(shù)分別在后來VCD和非線編系統(tǒng)中有所體現(xiàn)。至此，采用光盤的產(chǎn)品一發(fā)不可收。也就是這個時期，“多媒體”一詞開始流傳開來。 2. 問世階段 流行叫法：多媒體（Multimedia） 這一時期的特點：計算機領(lǐng)域中的媒體與電視領(lǐng)域中的媒體有機結(jié)合，并且具有交互功能。電視設(shè)備（攝像機、錄像機、監(jiān)視器等）充當了計算機外部設(shè)備的角色；而傳統(tǒng)的視頻編輯、特技設(shè)備卻被計算機的專業(yè)軟件所取代；計算機中可播放視頻、音頻信號，在視頻設(shè)備（如VCD）中增加計

19、算機軟硬件，也能對播放的圖像、聲音實現(xiàn)互動控制。 重要歷程： 1991年10月，由美國微軟公司發(fā)起組建的多媒體個人計算機市場協(xié)會，提出了多媒體計算機技術(shù)規(guī)格：MPC1.0。該規(guī)格表達了計算機業(yè)界的一個共識：可以將電視領(lǐng)域中音頻和視頻引入其中的PC機可稱為多媒體PC機。1993年提出了MPC2.0，1995年提出了MPC3.0。 1992年及以后，計算機、電視、微電子和通信等領(lǐng)域全方位的技術(shù)合作，主要是圍繞解決存儲容量、存儲速度和提高MPC的處理能力的問題。PC機不斷升級，運行速度不斷提高硬盤容量及存儲速度大幅度提高操作系統(tǒng)不斷升級各種外部設(shè)備以及接口大量涌現(xiàn)各種軟件（轉(zhuǎn)換和編輯視音頻）的開發(fā)各

20、種視音頻壓縮標準的制定 90年代中期的多媒體產(chǎn)品的兩種類型代表：非線性編輯系統(tǒng)（交互式數(shù)字視頻技術(shù)的延伸）和VCD（交互式光盤技術(shù)的延伸）。 這一時期，多媒體技術(shù)已日趨成熟，計算機與視頻設(shè)備之間的界限已經(jīng)模糊，兩個領(lǐng)域中的媒體已被有機融為一體。3. 發(fā)展階段 流行叫法：3C一體化（Computer, Consumer, Communication） 內(nèi)涵：分布式多媒體技術(shù)成為熱點，計算機、廣播電視和通信等領(lǐng)域正在互相滲透。 特點：信息家電化、家電智能化、三網(wǎng)（計算機網(wǎng)、通信網(wǎng)、有線電視網(wǎng)）互相滲透 傳統(tǒng)的電信網(wǎng)由語言通信向多媒體通信過渡：綜合業(yè)務數(shù)字網(wǎng)（ISDN）應運而生；應用領(lǐng)域：可視電話、

21、電視會議、視頻點播等。 傳統(tǒng)的有限電視網(wǎng)由單向傳輸向雙向傳輸過渡：數(shù)字多媒體廣播系統(tǒng)應運而生。機頂盒的出現(xiàn)。下行單向廣播網(wǎng)下行單向廣播網(wǎng) （光纜）（光纜）衛(wèi)星電視節(jié)衛(wèi)星電視節(jié)目目因特網(wǎng)因特網(wǎng)本地信息本地信息 （網(wǎng)頁）（網(wǎng)頁）演播室演播室（VCD、DVD）調(diào)制發(fā)送調(diào)制發(fā)送調(diào)諧器調(diào)諧器解解 調(diào)調(diào)電視電視編碼編碼電電視視機機有線電視臺多媒體播送系統(tǒng)（中心）有線電視臺多媒體播送系統(tǒng)（中心）視視 頻頻節(jié)節(jié) 目目數(shù)數(shù) 字字信信 息息上行指令上行指令（電話線（電話線）紅外遙控器紅外遙控器用戶機頂盒（用戶）用戶機頂盒（用戶）AVRF多媒體發(fā)展共經(jīng)歷了三個階段： 孕育階段（20世紀80年代初期-90年代初） 計

22、算機與電視相結(jié)合的準備期交互視頻 問世階段（20世紀90年代初期-90年代中） 計算機與電視相結(jié)合的蜜月期多媒體 發(fā)展階段（20世紀90年代中期-至今） 多媒體與通信網(wǎng)絡的結(jié)合3C一體化 多媒體技術(shù)是一種基于計算機的綜合技術(shù)。到底多媒體技術(shù)究竟包含哪些技術(shù)？換句話說，就是哪些技術(shù)領(lǐng)域是屬于多媒體技術(shù)的研究范疇？ 根據(jù)多媒體技術(shù)所處理的各媒體元素來劃分 根據(jù)研制多媒體計算機系統(tǒng)本身要解決的技術(shù)和多媒體應用所涉及到的技術(shù)來劃分1.3 多媒體技術(shù)的研究內(nèi)容 根據(jù)多媒體技術(shù)所處理的各媒體元素來劃分，主要包括三個方面： 多媒體計算機圖形與圖像處理技術(shù) 數(shù)字音頻、視頻處理技術(shù) 多媒體網(wǎng)絡通信技術(shù) 1.多媒

23、體計算機圖形與圖像處理技術(shù) ： 多媒體計算機圖形與圖像處理技術(shù)是研究如何借助于數(shù)學的方法和多媒體硬件技術(shù)的支持，在計算機上生成、處理和顯示圖形與圖像的一門技術(shù)。 圖像信息如何采集、存儲、輸出才能使人們得到逼真的視覺，這是圖形圖像處理技術(shù)要解決的基本問題。多媒體計算機圖形與圖像處理技術(shù)形式上：圖形圖像的獲?。▓D形圖像數(shù)字化）圖形圖像的存儲（文件格式）圖形圖像的顯示圖形圖像的處理（編輯）多媒體計算機圖形與圖像處理技術(shù)（內(nèi)容上）： 圖形處理技術(shù) 數(shù)字圖像處理技術(shù) 圖形、圖像處理中的虛擬現(xiàn)實技術(shù) 圖形處理技術(shù) 該技術(shù)包括二維平面及三維空間的圖形處理兩種。早期的圖形處理技術(shù)主要集中于二維圖形技術(shù)的研究，

24、但是二維圖形僅能表現(xiàn)圖形中各個部分簡單的幾何關(guān)系，無法表現(xiàn)出空間、位置、材質(zhì)、明暗等接近自然的真實效果，現(xiàn)在的研究重點集中于三維圖形技術(shù)的研究，以及對三維圖形對象賦予運動屬性后生成連續(xù)畫面效果的研究。 數(shù)字圖像處理技術(shù) 圖像處理是指將客觀世界中實際存在的物體映射成數(shù)字化圖像，然后在計算機上用數(shù)學的方法對數(shù)字化圖像進行處理。圖像處理的具體內(nèi)容主要包括： 圖像變換：縮放、平移、旋轉(zhuǎn)、變形和剪貼等 圖像增強、復原和重建 圖像分割和特征提取 圖像識別 圖像編碼壓縮 圖形處理與圖像處理的區(qū)別： 圖形處理著重研究怎樣將數(shù)據(jù)和幾何模型變成可視的圖形，這種圖形可能是自然界根本不存在的。即是人工創(chuàng)造的畫面。如商

25、標設(shè)計、室內(nèi)設(shè)計等 圖像處理側(cè)重于將客觀世界中原來存在的物體映像處理成新的數(shù)字化圖像，關(guān)心的問題是如何對圖像進行變換、如何增強、復原圖像、圖像的分割和特征提取、圖像識別以及圖像壓縮等。如婚紗照處理等 圖形、圖像處理中的虛擬現(xiàn)實技術(shù) 虛擬現(xiàn)實（Virtual Reality）技術(shù)是利用計算機模擬產(chǎn)生一個三維空間的虛擬世界，提供使用者關(guān)于視覺、聽覺、觸覺等感官的模擬，讓使用者如同生臨其境一般，可實時觀察三維空間內(nèi)的事物。并且使用者可以進入這個三維空間，并且操縱場景中的對象，實現(xiàn)了在虛擬場景中的人機“可交互性。 虛擬現(xiàn)實的分類 桌面虛擬現(xiàn)實（屏幕作為虛擬空間的窗口） 沉浸型虛擬現(xiàn)實（頭盔顯示器、數(shù)據(jù)

26、手套） 增強型虛擬現(xiàn)實（增加功能） 分布式虛擬現(xiàn)實（多用戶網(wǎng)絡連接）2.數(shù)字音頻、視頻處理技術(shù)： 音頻、視頻技術(shù)是多媒體技術(shù)中不可分割的重要組成部分。它們采用了全新的純數(shù)字技術(shù)，這是電子成像技術(shù)的一場重大變革。 數(shù)字視音頻處理技術(shù)主要包括3部分：模擬音頻、視頻信號的數(shù)字化數(shù)字音頻、視頻的壓縮編碼數(shù)字音頻、視頻信息的存儲與傳輸編碼 模擬視音頻信號的數(shù)字化編碼（模/數(shù)轉(zhuǎn)換） 模數(shù)轉(zhuǎn)換是將人所能接受的模擬音頻、視頻信號轉(zhuǎn)換為計算機能夠識別的數(shù)字信息，它是數(shù)字音頻、視頻處理技術(shù)中的基礎(chǔ)。 數(shù)字視音頻的壓縮編碼（信源編碼） 文字、圖形圖像、音頻、視頻和動畫等各種數(shù)據(jù)本身的編碼通常稱為信源編碼。信源編碼是

27、將數(shù)字化后的視音頻信號的數(shù)據(jù)根據(jù)不同的應用、按照不同的標準及其算法進行壓縮處理，從而達到降低碼率的目的，它是數(shù)字視音頻技術(shù)的關(guān)鍵。 數(shù)字視音頻的存儲和傳輸編碼（信道編碼） 信道編碼是將壓縮后視音頻數(shù)據(jù)根據(jù)存儲與傳輸?shù)牟煌橘|(zhì)進行相應的調(diào)制，使得調(diào)制后的數(shù)據(jù)格式符合該介質(zhì)的要求，或者達到提高頻率資源利用率的目的；同時，利用信道編碼還可以對存儲和傳輸?shù)臄?shù)據(jù)進行容錯技術(shù)處理，以確保重放數(shù)據(jù)的準確性。信道編碼是數(shù)字視音頻技術(shù)的保證。 以上三種編碼的過程均是可逆的，因為數(shù)字視音頻處理技術(shù)最終的目的就是音頻、視頻信息的還原與重放，因此逆過程的順序應該是：信道編碼、信源編碼和數(shù)/模轉(zhuǎn)換。 3.多媒體網(wǎng)絡通信

28、技術(shù)： 自從上世紀90年代以來，基于多媒體的網(wǎng)絡通信為家庭、學校、企事業(yè)單位提供了更加豐富多彩的信息交流手段，用戶能夠創(chuàng)建自己的多媒體資料，也可以交互式地選擇和接受多媒體信息。如視頻點播、視頻會議、遠程教育、數(shù)字圖書館、交互電視等。 多媒體通信的研究領(lǐng)域十分廣泛，其中包括一系列標準的制定、通信和網(wǎng)絡基礎(chǔ)設(shè)施建設(shè)，滿足企業(yè)家庭用戶需求的產(chǎn)品開發(fā)以及應用配套服務等。 根據(jù)研制多媒體計算機系統(tǒng)本身要解決的關(guān)鍵技術(shù)和多媒體應用所涉及的關(guān)鍵技術(shù)來劃分：研制多媒體計算機要解決的技術(shù)多媒體應用所涉及到的技術(shù)多媒體數(shù)據(jù)壓縮技術(shù)多媒體專用芯片技術(shù)多媒體輸入輸出技術(shù)多媒體存儲技術(shù)多媒體系統(tǒng)軟件技術(shù)多媒體素材采集與制作多媒體應用程序的開發(fā)多媒體創(chuàng)作工具及開發(fā)環(huán)境多媒體界面設(shè)計與人機交互多媒體網(wǎng)絡通信技術(shù)虛擬現(xiàn)實技術(shù)基本多媒體硬件系統(tǒng)多媒體數(shù)據(jù)壓縮技術(shù)：媒體的數(shù)據(jù)量非常大，要得到令人滿意的圖像和聲音效果，必須要解決視音頻信號數(shù)據(jù)的大容量存儲和實時傳輸問題