多媒體技術(shù)與應(yīng)用多媒體概論

多媒體技術(shù)與應(yīng)用多媒體概論第1頁(yè)，共55頁(yè)，2023年，2月20日，星期四2聯(lián)系方式楊柳yangliu@第2頁(yè)，共55頁(yè)，2023年，2月20日，星期四3課程內(nèi)容組成及考察方式課程的講授內(nèi)容以理論講解和上機(jī)實(shí)踐相結(jié)合。課程將布置3至4次平時(shí)作業(yè)，期末將布置一個(gè)完整的多媒體設(shè)計(jì)作業(yè)。課程考察方式采取理論考試和課程設(shè)計(jì)相結(jié)合的方法。這門課程是一門實(shí)踐性非常強(qiáng)的課程，需要多動(dòng)手！第3頁(yè)，共55頁(yè)，2023年，2月20日，星期四4課件下載及作業(yè)提交方式每次課件將保存在郵箱multimedia@中，登陸密碼為135246，請(qǐng)進(jìn)入郵箱下載課件。布置的作業(yè)題目也將通過該郵箱發(fā)布。請(qǐng)同學(xué)們進(jìn)入該郵箱后，只下載，不要?jiǎng)h除任何郵件。每次作業(yè)請(qǐng)發(fā)送至我本人的郵箱yangliu@。第4頁(yè)，共55頁(yè)，2023年，2月20日，星期四5課程分?jǐn)?shù)組成平時(shí)成績(jī)，占40%，包括：平時(shí)作業(yè)期末的綜合項(xiàng)目考勤，占10%期末成績(jī)，占50%第5頁(yè)，共55頁(yè)，2023年，2月20日，星期四6課程目標(biāo)1．理解多媒體技術(shù)的基本概念和主要功能；2、掌握音頻、視頻的獲取、實(shí)時(shí)處理技術(shù)；3．掌握常用的多媒體工具軟件的使用方法；4、了解多媒體數(shù)據(jù)壓縮編碼技術(shù)及多媒體計(jì)算機(jī)硬件系統(tǒng)結(jié)構(gòu)；5．了解如何進(jìn)行多媒體軟件開發(fā)和多媒體制造，從而為以后的學(xué)習(xí)和工作打下基礎(chǔ)。第6頁(yè)，共55頁(yè)，2023年，2月20日，星期四7課程安排第一部分：多媒體技術(shù)基礎(chǔ)多媒體的基本概念 理解多媒體技術(shù)的基本概念和多媒體技術(shù)的特點(diǎn)，了解多媒體技術(shù)的發(fā)展歷史、現(xiàn)狀及應(yīng)用。了解流媒體技術(shù)。聲音媒體 掌握聲音媒體的有關(guān)概念，掌握聲音媒體信息的處理，了解語(yǔ)音輸入/輸出技術(shù)。顏色及圖像基礎(chǔ)： 掌握色彩的基本概念，掌握?qǐng)D形圖像信息的處理。第7頁(yè)，共55頁(yè)，2023年，2月20日，星期四8課程安排動(dòng)畫基礎(chǔ) 掌握動(dòng)畫視覺原理、動(dòng)畫分類，掌握動(dòng)畫的技術(shù)參數(shù)。視頻基礎(chǔ) 掌握模擬視頻和數(shù)字視頻的基本概念，了解視頻制式、了解視頻媒體信息的處理。多媒體數(shù)據(jù)壓縮技術(shù) 了解常用多媒體數(shù)據(jù)壓縮技術(shù)。多媒體計(jì)算機(jī)硬件 了解多媒體硬件設(shè)備和存儲(chǔ)設(shè)備。第8頁(yè)，共55頁(yè)，2023年，2月20日，星期四9課程安排第二部分：圖形圖像處理 掌握photoshop的圖形圖像處理技術(shù)，能夠利用Photoshop掃描、修改圖像。第三部分：二維動(dòng)畫制作 掌握Flash的動(dòng)畫設(shè)計(jì)技術(shù)制作。第四部分：多媒體創(chuàng)作工具 掌握基于authorware的多媒體系統(tǒng)創(chuàng)作。第9頁(yè)，共55頁(yè)，2023年，2月20日，星期四

制作多媒體需要哪些知識(shí)

用戶心理學(xué)

演示內(nèi)容寫作

美學(xué)、音樂基礎(chǔ)

平面設(shè)計(jì)概念

音頻信號(hào)原理與處理

動(dòng)畫創(chuàng)意與制作

圖像的獲取與處理

編制計(jì)算機(jī)程序相關(guān)專門技能計(jì)算機(jī)專業(yè)能力第10頁(yè)，共55頁(yè)，2023年，2月20日，星期四1.1多媒體技術(shù)的基本概念31.3多媒體技術(shù)的應(yīng)用前景11.2多媒體技術(shù)的發(fā)展241.4流媒體技術(shù)第1章概論第11頁(yè)，共55頁(yè)，2023年，2月20日，星期四●多媒體屬性：多媒體技術(shù)是計(jì)算機(jī)技術(shù)和社會(huì)需求相結(jié)合的產(chǎn)物?！窈?jiǎn)捷、形象地傳播信息的需要●影視、娛樂業(yè)的需要●近代教育的需要●人工智能模擬的需要社會(huì)需求●

計(jì)算機(jī)CPU速度的提高●計(jì)算機(jī)存儲(chǔ)容量的增加●計(jì)算機(jī)實(shí)時(shí)信息的處理技術(shù)背景為什么出現(xiàn)了多媒體技術(shù)？第12頁(yè)，共55頁(yè)，2023年，2月20日，星期四為什么出現(xiàn)了多媒體技術(shù)？當(dāng)然不能期望用這樣的計(jì)算機(jī)來實(shí)現(xiàn)多媒體處理!一臺(tái)名為Harwell的計(jì)算機(jī)整臺(tái)機(jī)器上使用了900支十進(jìn)制真空管，每支管子只能存放一位數(shù)據(jù)，并用紙帶進(jìn)行輸入，就像現(xiàn)在電腦使用的RAM存儲(chǔ)器。機(jī)器首先要具備可靠性，然后才是速度。當(dāng)時(shí)人工在操作機(jī)械計(jì)算器時(shí)，最多只能在前30分鐘有較快的計(jì)算速度，中間還要休息，而Harwell則可以持續(xù)計(jì)算，它可以從圣誕節(jié)一直算到新年假期結(jié)束?！钡?3頁(yè)，共55頁(yè)，2023年，2月20日，星期四1.1.1媒體的概念媒體（MediumMedia）有三種定義：傳播媒體用以存儲(chǔ)信息的實(shí)體，如磁盤、磁帶、紙用以表述信息的邏輯載體，如文本、聲音、圖形、圖像、動(dòng)畫和視頻等第14頁(yè)，共55頁(yè)，2023年，2月20日，星期四媒體的類型感覺媒體

(perceptionmedium)：直接作用于人的感官，使人直接產(chǎn)生感覺。包括視覺、聽覺、嗅覺、味覺和觸覺表示媒體(representationmedium)：是為了加工、處理和傳輸感覺媒體而人為構(gòu)造出來的一種媒體，即用于數(shù)據(jù)交換的編碼（如圖像編碼、文本編碼和聲音編碼）第15頁(yè)，共55頁(yè)，2023年，2月20日，星期四媒體的類型顯示媒體(presentationmedium)：指感覺媒體與用于通信的電信號(hào)之間轉(zhuǎn)換用的一種媒體（設(shè)備）。主要包括輸入設(shè)備和輸出設(shè)備顯示媒體。存儲(chǔ)媒體(storagemedium)：又稱存儲(chǔ)介質(zhì)，保存表示媒體的介質(zhì)。傳輸媒體(transmissionmedium)：用來將表示媒體傳送到其他計(jì)算機(jī)的通信載體第16頁(yè)，共55頁(yè)，2023年，2月20日，星期四位圖圖像用像素點(diǎn)描述的自然影像第17頁(yè)，共55頁(yè)，2023年，2月20日，星期四矢量圖形通過計(jì)算而描述的矢量圖形第18頁(yè)，共55頁(yè)，2023年，2月20日，星期四視覺類媒體各類文字和符號(hào)多媒體多媒體多媒體如何從事多媒體教學(xué)第19頁(yè)，共55頁(yè)，2023年，2月20日，星期四視頻視頻數(shù)字信號(hào)AVI、壓縮視頻信號(hào)MPG第20頁(yè)，共55頁(yè)，2023年，2月20日，星期四動(dòng)畫動(dòng)畫FRAME01FRAME02FRAME03FRAME04FRAME05FRAME06FRAME07第21頁(yè)，共55頁(yè)，2023年，2月20日，星期四聽覺類媒體——音頻對(duì)象音頻●波形聲音●語(yǔ)音●音樂第22頁(yè)，共55頁(yè)，2023年，2月20日，星期四觸覺類媒體指點(diǎn)包括間接指點(diǎn)和直接指點(diǎn)。通過指點(diǎn)可以確定對(duì)象的位置、大小、方向和方位，執(zhí)行特定的過程和相應(yīng)的操縱位置跟蹤為了與系統(tǒng)交互，系統(tǒng)必須了解參與者的身體動(dòng)作，包括頭、眼睛、手、四肢等部位的位置與運(yùn)動(dòng)方向，系統(tǒng)將這些位置與運(yùn)動(dòng)的數(shù)據(jù)轉(zhuǎn)變?yōu)樘囟ǖ哪Ｊ剑瑢?duì)相應(yīng)的動(dòng)作進(jìn)行表示第23頁(yè)，共55頁(yè)，2023年，2月20日，星期四觸覺類媒體專門的語(yǔ)音識(shí)別機(jī)器是英國(guó)著名物理學(xué)家霍金與人交流和進(jìn)行理論研究的工具。

這個(gè)專用的機(jī)器外觀就是輪椅，有專門的傳感器夾在霍金眼鏡旁邊，當(dāng)外人對(duì)霍金講話時(shí)，霍金眼睛及臉部肌肉的變化，會(huì)通過傳感器輸入專門軟件，經(jīng)處理解碼后轉(zhuǎn)換為文字信號(hào)，自動(dòng)顯示在屏幕上，并口頭代表霍金說話。

據(jù)悉，霍金平日與人溝通時(shí)是通過眼球的活動(dòng)控制計(jì)算機(jī)打字組句以表達(dá)意思，他的速度為1分鐘選出3到5個(gè)字。第24頁(yè)，共55頁(yè)，2023年，2月20日，星期四觸覺類媒體力反饋與運(yùn)動(dòng)反饋這與位置跟蹤正好相反，是由系統(tǒng)向參與者反饋運(yùn)動(dòng)及力的信息，如觸覺刺激、反作用力（例如推門時(shí)的門重感覺）、運(yùn)動(dòng)感覺（例如搖晃、振動(dòng)）及溫度等環(huán)境信息這些媒體信息的表現(xiàn)必須借助于一定的電子、機(jī)械的伺服機(jī)構(gòu)才能實(shí)現(xiàn)第25頁(yè)，共55頁(yè)，2023年，2月20日，星期四●

多媒體定義用計(jì)算機(jī)綜合處理多種媒體信息—文本、圖形、圖像和聲音等，使多種信息建立邏輯連接，集成為一個(gè)系統(tǒng)并具有交互性●“多媒體”一詞源自“Multimedia”Multiple多重、復(fù)合medium的復(fù)數(shù)形式media介質(zhì)、媒介和媒體3451.1.2多媒體的概念●

多媒體

“多媒體”是指把多種不同的但相互關(guān)聯(lián)的媒體綜合集成在一起而產(chǎn)生的一種存儲(chǔ)、傳播和表現(xiàn)信息的全新載體12案例“放炮”第26頁(yè)，共55頁(yè)，2023年，2月20日，星期四多媒體數(shù)據(jù)的特點(diǎn)數(shù)據(jù)量大數(shù)據(jù)類型繁多相關(guān)性強(qiáng)、同步性高動(dòng)態(tài)性第27頁(yè)，共55頁(yè)，2023年，2月20日，星期四多媒體技術(shù)的特點(diǎn)集成性

一方面是指各種不同的媒體信息有機(jī)地進(jìn)行同步組合，形成一個(gè)完整的多媒體信息；另一方面是指把不同的媒體設(shè)備集成在一起，形成多媒體系統(tǒng)實(shí)時(shí)性聲音、動(dòng)態(tài)圖像(視頻)隨時(shí)間變化交互性主要指用戶與計(jì)算機(jī)的多種媒體進(jìn)行交互式操作，從而為用戶提供更有效地控制和使用信息的手段，允許人機(jī)交互第28頁(yè)，共55頁(yè)，2023年，2月20日，星期四多媒體計(jì)算機(jī)硬件系統(tǒng)音頻卡處理音頻信息視頻卡能處理活動(dòng)圖像的適配器有視頻疊加卡、視頻捕獲卡、電視編碼卡、電視選臺(tái)卡、壓縮/解壓卡掃描儀輸入設(shè)備觸摸屏輸入設(shè)備第29頁(yè)，共55頁(yè)，2023年，2月20日，星期四聲音適配器主機(jī)箱主板音箱音頻信號(hào)數(shù)字信號(hào)音箱音頻卡(聲卡)●

作用:數(shù)字信號(hào)與模擬信號(hào)之間的雙向轉(zhuǎn)換●單板(輸出功率大，抗干擾，音質(zhì)好)●主板集成(易受干擾，性能指標(biāo)比單板略差)●

采樣模式16bit~24bit●

音頻輸出模式：2STEREO5.1STEREO●

￥400～800元第30頁(yè)，共55頁(yè)，2023年，2月20日，星期四顯示適配器顯示器主機(jī)箱主板顯示電纜視頻卡●

顯示緩沖存儲(chǔ)器容量與芯片

64MB~128MBDDRSGRAM/DDRSDRAM●

顯示存儲(chǔ)器頻率620MHz●

顯示芯片型號(hào)Radeon9700Pro●圖形加速功能三維效果增速●￥650～3600元

AG-411技嘉GV-R9700PRO顯示信號(hào)輸出顯示處理器第31頁(yè)，共55頁(yè)，2023年，2月20日，星期四數(shù)碼照相機(jī)彩色掃描儀語(yǔ)音識(shí)別設(shè)備光盤存儲(chǔ)介質(zhì)半導(dǎo)體存儲(chǔ)介質(zhì)數(shù)碼攝像機(jī)彩色投影機(jī)彩色打印機(jī)常見多媒體擴(kuò)展設(shè)備第32頁(yè)，共55頁(yè)，2023年，2月20日，星期四●觸摸屏—輸入設(shè)備，坐標(biāo)定位裝置觸摸屏●觸摸屏組成顯示器觸摸檢測(cè)裝置觸摸屏控制卡驅(qū)動(dòng)程序●作用—將坐標(biāo)信息送入計(jì)算機(jī)●

觸摸檢測(cè)裝置特點(diǎn)：高透明度，可觸摸作用：獲得觸摸坐標(biāo)信息●

觸摸屏控制卡作用：分析觸摸坐標(biāo)信息坐標(biāo)信息數(shù)字化經(jīng)電纜傳送至主機(jī)電纜●

驅(qū)動(dòng)程序作用：提供數(shù)據(jù)分析方法規(guī)范信號(hào)傳送格式控制硬件動(dòng)作第33頁(yè)，共55頁(yè)，2023年，2月20日，星期四●掃描儀種類臺(tái)式掃描儀平板式掃描儀底片掃描儀(透射式)圖像掃描儀手持掃描儀滾筒掃描儀掃描、打印兩用機(jī)●按結(jié)構(gòu)分：●

按原理分：反射式手持式、平板式、滾筒式、臺(tái)式、透射式、多用機(jī)第34頁(yè)，共55頁(yè)，2023年，2月20日，星期四●各種類型的打印機(jī)噴墨打印機(jī)噴墨打印、掃描兩用機(jī)彩色激光打印機(jī)噴墨打印機(jī)(噴繪)噴墨打印機(jī)照片打印機(jī)第35頁(yè)，共55頁(yè)，2023年，2月20日，星期四多媒體計(jì)算機(jī)軟件系統(tǒng)多媒體操作系統(tǒng)用于支持多媒體的輸入/輸出及相應(yīng)的軟件接口，例如Windows多媒體創(chuàng)作工具軟件用于開發(fā)多媒體應(yīng)用系統(tǒng)的工具軟件多媒體素材編輯軟件采集、整理和編輯各種媒體數(shù)據(jù)多媒體應(yīng)用軟件根據(jù)各種需求實(shí)現(xiàn)用戶的應(yīng)用程序及演示軟件第36頁(yè)，共55頁(yè)，2023年，2月20日，星期四多媒體計(jì)算機(jī)軟件系統(tǒng)●

Toolbook國(guó)產(chǎn)洪圖多媒體創(chuàng)作系統(tǒng)●

VisualBasic/VisualC微軟開發(fā)的視窗類語(yǔ)言編程系統(tǒng)●

Authorware美國(guó)Macromedia公司開發(fā)的多媒體模塊軟件●常用多媒體創(chuàng)作軟件●

方正奧思多媒體創(chuàng)作軟件●各類多媒體傻瓜軟件(照片管理、備忘錄等)第37頁(yè)，共55頁(yè)，2023年，2月20日，星期四多媒體計(jì)算機(jī)軟件系統(tǒng)●

文字處理

各類文字處理軟件●

圖像處理

PhotoShop/PhotoStyler/CorelDRAW/PageMaker●

圖形處理

Basic/VisualBasic……●

動(dòng)畫處理

AnimatorPro/3DSMAX/Morph/Cool3D

/

MAYA●

網(wǎng)頁(yè)動(dòng)畫

GIFAnimator/Flash/GIFCON●

音頻處理

GoldWave/CoolEditPro●

視頻處理

Premiere/Director●常用多媒體素材編輯軟件第38頁(yè)，共55頁(yè)，2023年，2月20日，星期四多媒體計(jì)算機(jī)軟件系統(tǒng)第39頁(yè)，共55頁(yè)，2023年，2月20日，星期四多媒體計(jì)算機(jī)的關(guān)鍵技術(shù)視頻/音頻信號(hào)獲取技術(shù)多媒體數(shù)據(jù)壓縮編碼和解碼技術(shù)視頻/音頻數(shù)據(jù)的實(shí)時(shí)處理技術(shù)視頻/音頻數(shù)據(jù)的輸出技術(shù)第40頁(yè)，共55頁(yè)，2023年，2月20日，星期四1.2.1多媒體技術(shù)的歷史1984年，Apple公司，Macintosh系統(tǒng)；1985年，Commodore公司，Amiga系統(tǒng)（世界上第一個(gè)多媒體計(jì)算機(jī)系統(tǒng)）1986年，Philips公司和Sony公司，CD-I（交互式緊湊光盤）系統(tǒng)1987年,美國(guó)無(wú)線電公司RCA，DVI（交互式數(shù)字視頻）技術(shù)1989年,Intel公司和IBM公司，第一代DVI技術(shù)產(chǎn)品，1991年第二代DVI產(chǎn)品第41頁(yè)，共55頁(yè)，2023年，2月20日，星期四視頻壓縮的主要標(biāo)準(zhǔn)JPEG標(biāo)準(zhǔn)適用彩色、單色、多灰度連續(xù)色調(diào)、靜止圖像壓縮。屬于有損壓縮，壓縮比率比較大MPEG標(biāo)準(zhǔn)運(yùn)動(dòng)圖像和聲音的壓縮編碼標(biāo)準(zhǔn)，在提供高壓縮比的同時(shí)對(duì)圖像損失很小H.261標(biāo)準(zhǔn)最早的一種碼率壓縮標(biāo)準(zhǔn)，第一個(gè)實(shí)用化的、適用于可視電話和電視會(huì)議要求的視頻壓縮第42頁(yè)，共55頁(yè)，2023年，2月20日，星期四音頻壓縮的主要標(biāo)準(zhǔn)16KbpsCCITT標(biāo)準(zhǔn)化方案G.728用在帶寬為64Kbps的ISDN線路的可視電話上32KbpsCCITT標(biāo)準(zhǔn)化方案G.721主要應(yīng)用于電視會(huì)議的語(yǔ)音編碼和數(shù)字電話的語(yǔ)音合成64KbpsCCITT標(biāo)準(zhǔn)化方案G.722以語(yǔ)音和音樂為對(duì)象的標(biāo)準(zhǔn)化音響編碼方案，面向高質(zhì)量的語(yǔ)音通信會(huì)議第43頁(yè)，共55頁(yè)，2023年，2月20日，星期四MPC的主要標(biāo)準(zhǔn)Microsoft，Philips，NEC等公司組成了多媒體個(gè)人計(jì)算機(jī)MPC(MultimediaPersonalComputer)市場(chǎng)委員會(huì)1990年10月，MPC規(guī)范1.0；1993年5月，MPC2.01996年6月，MPC3.0第44頁(yè)，共55頁(yè)，2023年，2月20日，星期四MPC-1標(biāo)準(zhǔn)設(shè)備 標(biāo)準(zhǔn)配置 推薦配置CPU 386SX 386DXor486SX時(shí)鐘 16MHz內(nèi)存 2MB 4MB硬盤 30MB 80MB接口 串行、并行、游戲棒接口MIDI MIDI合成、混音接口顯示 VGA模式，分辨率640×480，16色 256色激光驅(qū)動(dòng)器 單速CD-ROM，數(shù)據(jù)傳輸速率150KByte/s聲音輸入/重放 mV級(jí)靈敏度輸入，耳機(jī)、揚(yáng)聲器輸出聲卡 8bit/11.025kHz采樣，11.025和22.05kHz輸出操作系統(tǒng) DOS3.1版本或以上，Windows3.0帶多媒體擴(kuò)展模塊1991年公布MPC的主要標(biāo)準(zhǔn)第45頁(yè)，共55頁(yè)，2023年，2月20日，星期四設(shè)備 標(biāo)準(zhǔn)配置 推薦配置CPU 486SXor兼容CPU 486DXorDX2時(shí)鐘 25MHz內(nèi)存 4MB 8MB硬盤 160MB 400MB接口 串行、并行、游戲棒接口MIDI MIDI合成、混音接口顯示 VGA模式，分辨率640×480，256色

65536色激光驅(qū)動(dòng)器 倍速CD-ROM，數(shù)據(jù)傳輸速率300KByte/s聲音輸入/重放 mV級(jí)靈敏度輸入，耳機(jī)、揚(yáng)聲器輸出聲卡 16bit采樣，11.025、22.05kHz和44.1kHz輸出操作系統(tǒng) DOS3.1版本或以上，Windows3.1帶多媒體擴(kuò)展模塊1993年5月公布MPC-2標(biāo)準(zhǔn)MPC的主要標(biāo)準(zhǔn)第46頁(yè)，共55頁(yè)，2023年，2月20日，星期四設(shè)備 標(biāo)準(zhǔn)配置

CPU PentiumCPU或兼容CPU

時(shí)鐘 75MHz內(nèi)存 8MB

硬盤 540MB

接口 串行、并行、游戲棒接口MIDI MIDI合成、混音接口顯示 VGA模式，分辨率640×480，64K色激光驅(qū)動(dòng)器 4倍速CD-ROM，數(shù)據(jù)傳輸速率600KByte/s視頻播放 NTSC制:30幀/秒，分辨率352×240

PAL制:24幀/秒，分辨率352×288

數(shù)據(jù)格式:MPEG-1壓縮格式1995年6月公布MPC-3標(biāo)準(zhǔn)MPC的主要標(biāo)準(zhǔn)第47頁(yè)，共55頁(yè)，2023年，2月20日，星期四1.2.2