多媒體課件dmtch多媒體通信同步技術(shù)

1、多媒體通信同步技術(shù)多媒體同步的概念多媒體同步就是保持和維護(hù)各個媒體對象之間和各個媒體對象內(nèi)部存在的時態(tài)關(guān)系，組織多種媒體序列以實(shí)現(xiàn)某種特定的表現(xiàn)任務(wù)。同步問題兩個含義： 1.時態(tài)行為必須明確定義 2.多媒體系統(tǒng)必須保證各媒體時態(tài)的正確性主要分為多媒體同步規(guī)范和同步控制兩個層次多媒體同步的類型上層同步用戶級同步中層同步媒體之間的同步底層同步媒體內(nèi)部同步影響媒體同步的因素延時抖動時鐘偏差不同的采集起始時間或不同的延時時間不同的播放起始時間數(shù)據(jù)丟失網(wǎng)絡(luò)傳輸條件的變化媒體同步模型概述參考點(diǎn)同步模型時間軸同步模型層次同步模型邏輯數(shù)據(jù)單元（LDU）連續(xù)媒體數(shù)據(jù)可以看成是由邏輯數(shù)據(jù)單元LDU構(gòu)成的時間序列（

2、或稱為流）。LDU的劃分由具體的應(yīng)用、編碼方式、數(shù)據(jù)的存儲方式和傳輸方式等因素決定。邏輯數(shù)據(jù)單元（LDU）的劃分H.261碼流中的LDU的不同劃分多媒體數(shù)據(jù)的構(gòu)成同步規(guī)范同步規(guī)范描述了媒體對象之間和各媒體對象內(nèi)部存在的時態(tài)關(guān)系，確定了多媒體的時態(tài)說明，是多媒體系統(tǒng)的重要組成部分。同步規(guī)范由同步描述數(shù)據(jù)和同步容限兩部分組成。同步規(guī)范通常包括：媒體對象內(nèi)部的同步，媒體對象之間的同步以及業(yè)務(wù)品質(zhì)QoS描述。同步規(guī)范的傳送在傳送多媒體數(shù)據(jù)之前，將整個播放過程所需要的全部同步規(guī)范，以文件方式傳送到接收端，以備播放時參照。在傳送多媒體成份數(shù)據(jù)的通道之外，使用一個附加的邏輯通道專門傳送同步規(guī)范。將同步規(guī)范與

3、成份數(shù)據(jù)復(fù)接在一起，使用一個通道傳送。同步容限同步容限包括了用戶對偏差許可范圍的定義，同步機(jī)制則需要依據(jù)同步容限，保證在恢復(fù)后的時域場景中，事件的偏差在其許可范圍內(nèi)事件偏差包括：1 事件間偏差2 對象內(nèi)偏差3 對象間偏差多媒體層次同步模型多媒體層次的分層介紹為實(shí)現(xiàn)同步所做的規(guī)劃通常稱為調(diào)度。媒體層流層對象層描述層（規(guī)范層）媒體層處理對象是來自連續(xù)碼流的LDU，向上提供與設(shè)備無關(guān)的操作。主要任務(wù)：1.申請必要的資源和系統(tǒng)服務(wù)；2.訪問各類設(shè)備的接口函數(shù)，獲取或提交一個完整的LDU流層處理對象是連續(xù)碼流或碼流組主要任務(wù)：完成流內(nèi)同步和流間同步兩項(xiàng)任務(wù)。根據(jù)同步容限決定LDU的大小以及對各LDU的處理方案。對象層處理對象是不同類型的媒體對象。主要任務(wù)：對不同類型的媒體對象進(jìn)行統(tǒng)一處理，實(shí)現(xiàn)連續(xù)媒體對象和非連續(xù)媒體對象之間的同步并完成對非連續(xù)對象的處理。描述層（規(guī)范層）處理對象是由多媒體應(yīng)用生成的時域場景主要任務(wù)：主要解決多媒體表現(xiàn)中各個場景的安排與對象同步的描述問題其核心是時域定義方案連續(xù)媒體內(nèi)部的同步媒體流之間的同步實(shí)時媒體流之間的同步方法還未形成通用的模式，許多方法是基于特定的應(yīng)用環(huán)境而提出的基于全局時鐘的時間戳方法基于反饋的流間同步方法基于流內(nèi)同步的流間同步方法多級同步機(jī)制在分布多媒體系統(tǒng)中，同步通常是分布完成的，涉及到各個部分，其中包括：采集多媒體數(shù)據(jù)及存儲多媒體數(shù)據(jù)時的同步從