09-多媒體同步技術(shù)

1、多媒體通訊技術(shù)西南科技大學(xué)信息工程學(xué)院授課教師：吳 靜電 話：6089322 址：東6A515，通訊與網(wǎng)絡(luò)實(shí)驗室 E mail： wujingvip.163答疑地點(diǎn)：東6A515，通訊與網(wǎng)絡(luò)技術(shù)實(shí)驗室答疑時間：周1下午，周4晚上第九章 多媒體通訊同步技術(shù)9.1 概述9.2 多媒體同步參考模型9.3同步描畫方法9.4同步控制機(jī)制1.分布式多媒體系統(tǒng)中的同步2.延續(xù)媒體內(nèi)部的同步3. 媒體流之間的同步 9.1 概述同步與一致的時間基準(zhǔn)相關(guān)聯(lián)知同步？時鐘同步幀同步網(wǎng)同步本章討論的同步是？多媒體同步 媒體內(nèi)同步、媒體間同步一、多媒體數(shù)據(jù)媒體的種類依賴于時間關(guān)系的媒體獨(dú)立于時間

2、關(guān)系的媒體媒體數(shù)據(jù)的時域約束關(guān)系媒體對象在時間上的相對依賴關(guān)系延續(xù)媒體對象的各個LDU之間的相對時間關(guān)系各媒體對象之間的相對時間關(guān)系多媒體數(shù)據(jù)的構(gòu)成成分?jǐn)?shù)據(jù)同步規(guī)范同步描畫數(shù)據(jù)同步容限多媒體數(shù)據(jù)的構(gòu)成多媒體數(shù)據(jù)成分?jǐn)?shù)據(jù)同步規(guī)范文本數(shù)據(jù)圖形數(shù)據(jù)音頻數(shù)據(jù)視頻數(shù)據(jù)同步描畫數(shù)據(jù)同步容限多媒體同步：堅持和維護(hù)各媒體之間和各媒體對象內(nèi)部存在的事態(tài)關(guān)系，組織多種媒體序列以實(shí)現(xiàn)某種特定的表現(xiàn)。多媒體同步所研討的主要問題：如何表示多媒體數(shù)據(jù)的時域特征；在處置多媒體數(shù)據(jù)時，如何維護(hù)時域特征。二、同步的類型上層同步用戶級同步中層同步媒體間同步底層同步媒體內(nèi)同步1. 用戶級同步描畫方式：從用戶的角度設(shè)計模型框架，表達(dá)

3、用戶的交互性，容易被用戶了解和運(yùn)用。控制機(jī)制：事件驅(qū)動同步，發(fā)生在系統(tǒng)中某一節(jié)點(diǎn)需求起始動作的情況下。2 .媒體間的同步關(guān)系媒體間的同步關(guān)系即流間同步。將不同類型的媒體數(shù)據(jù)流按一定的時間 關(guān)系進(jìn)展合成，保證不同媒體間的時間關(guān)系。 如：音頻和視頻之間的時態(tài)關(guān)系, 音頻和文本之間的時態(tài)關(guān)系等, 表現(xiàn)為各個媒體流中在同步點(diǎn)上的同時播放。流間同步的復(fù)雜性和需求同步的媒體的數(shù)量有關(guān)多媒體系統(tǒng)的同步控制必需保證在同步點(diǎn)上各個媒體之間可以堅持時間關(guān)系。例：一個有語音講解的多媒體幻燈片, 其講解必需和一組畫面同時表現(xiàn), 且隨著畫面的顯示, 講解是順序的。這里的同步點(diǎn)處于畫面的改動點(diǎn)和講解的起始點(diǎn)與終了點(diǎn)。一個

4、可視系統(tǒng), 其語音和圖像序列經(jīng)過通訊網(wǎng)絡(luò)傳輸?shù)浇蛹{端, 且必需同步地在接納設(shè)備上演示, 以堅持口型和聲音同步。媒體內(nèi)的時間關(guān)系即流內(nèi)同步, 主要是保證單個媒體流之間的簡單時態(tài)關(guān)系, 也就是按一定的時間要求傳送每一個媒體對象, 其表現(xiàn)為媒體流的延續(xù)性, 以滿足人類感知上的要求。 流內(nèi)同步的復(fù)雜性不僅和單個媒體的種類有關(guān), 而且和分布式系統(tǒng)提供的效力質(zhì)量Quality of Service, QoS有關(guān)。 同時, 也和源端和目的端操作系統(tǒng)的實(shí)時性有關(guān)。3. 媒體內(nèi)的同步關(guān)系三、影響媒體同步的要素延時偏移媒體間信道不同產(chǎn)生不同延時延時抖動傳輸過程中的延時偏向最大延時與最小延時之差時鐘漂移端系統(tǒng)之間的

5、時鐘頻率變化一段時間間隔內(nèi)的平均抖動數(shù)據(jù)喪失9.2 多媒體同步參考模型多媒體同步參考模型用于從整體上描畫媒體之間的時序關(guān)系。參考點(diǎn)同步模型將延續(xù)媒體看作是一系列離散的子單元構(gòu)成的序列，一個子單元所在的位置稱為一個參考點(diǎn)時間軸同步模型一切媒體對象彼此獨(dú)立地依賴同一時間軸。層次同步模型對多媒體同步進(jìn)展分層處置，規(guī)定了同步機(jī)制所應(yīng)有的層次及各層所應(yīng)完成的主要義務(wù)。1.邏輯數(shù)據(jù)單元LDULDU1LDU2LDU3LDU4LDU5.t40ms40ms時間相關(guān)媒體流的根本信息單元LDU的劃分與運(yùn)用、編碼方式、數(shù)據(jù)存儲方式有關(guān)。例：一幀圖像為一個LDU，每秒25幀，兩個LDU之間的時間40ms。視頻幀1視頻幀

6、2視頻幀3視頻幀n音頻1視頻幀3音頻1音頻1不同媒體LDU同步關(guān)系例如2. 同步容限事件間偏向?qū)ο髢?nèi)偏向同一媒體對象的時域事件之間的偏向?qū)ο箝g偏向不同媒體對象的時域事件之間的偏向同步容限用戶與同步機(jī)制之間就偏向的答應(yīng)范圍所達(dá)成的協(xié)議。同步機(jī)制保證恢復(fù)后的時域場景中，事件間的偏向在同步容限內(nèi)3. 層次同步模型同步任務(wù)過程按照同步描畫數(shù)據(jù)生成調(diào)度方案根據(jù)同步容限及多媒體數(shù)據(jù)特點(diǎn)懇求資源同步控制機(jī)制按照同步容限要求完成對偏向的控制，維持多媒體數(shù)據(jù)的時域關(guān)系。1. 媒體層處置來自于延續(xù)碼流的LDU，LDU的大小與同步容限相關(guān)。同步容限越小，LDU越小同步機(jī)制與底層效力系統(tǒng)之間的接口，向上提供與設(shè)備無關(guān)

7、的操作，內(nèi)部不包含同步控制操作。義務(wù)：懇求資源訪問各類接口函數(shù)，完成LDU的I/O2. 流層處置延續(xù)碼流或碼流組，完成流內(nèi)同步和流間同步。流層將延續(xù)碼流作為一個整體進(jìn)展處置，向上層用戶提供各種功能函數(shù)。面向延續(xù)碼流義務(wù)：確定LDU大小及對LDU的處置方案向媒體層提交QoS要求實(shí)施流內(nèi)和流間的同步控制3. 對象層對不同類型的媒體對象進(jìn)展一致地處置，實(shí)現(xiàn)延續(xù)媒體和非延續(xù)媒體之間的同步，并完成非延續(xù)媒體對象的處置。義務(wù)：制定調(diào)度方案：同步容限、媒體信息、資源情況系統(tǒng)初始化執(zhí)行調(diào)度方案：非延續(xù)媒體與延續(xù)媒體對象之間的同步控制4. 描畫層處置多媒體運(yùn)用生成的時域場景。處理各場景的安排與對象同步的描畫問題

8、。為用戶提供描畫多媒體數(shù)據(jù)時域約束關(guān)系的工具。描畫層產(chǎn)生同步描畫數(shù)據(jù)和同步容限，提供應(yīng)對象層。如何描畫多媒體數(shù)據(jù)的時域特征，對多媒體數(shù)據(jù)的時域特征進(jìn)展籠統(tǒng)、描畫以及給出必要的同步容限。對象同步關(guān)系的描畫同步的效力質(zhì)量的描畫方法：1. 基于途徑的描畫方法2. 基于Petri網(wǎng)的描畫方法3. 基于時間標(biāo)志的描畫方法9.3 多媒體信息同步描畫法描畫時域特征的時間模型時間模型的構(gòu)成根本時間單位關(guān)聯(lián)信息時間表示技術(shù)根本時間單位表示時域場景中的事件時辰間隔關(guān)聯(lián)信息反映時域事件的組織方式定量關(guān)聯(lián)信息事件獨(dú)立，單獨(dú)的描畫時域事件在場景中的位置，間接反映事件間的關(guān)系定性關(guān)聯(lián)信息事件彼此相關(guān)，關(guān)聯(lián)信息包含的是對時

9、域事件約束關(guān)系的描畫1. 基于途徑的描畫方法動作動作和時間的關(guān)系途徑表達(dá)式動作動作：表示發(fā)生的事情同步點(diǎn)：一個動作的某些事件和別的動作的某些事件點(diǎn)有對應(yīng)關(guān)系，這個事件稱為同步點(diǎn)動作分類：原子動作：起始點(diǎn)之間不再有同步點(diǎn)的動作復(fù)合動作：2動作和時間的關(guān)系：先于銜接包含相交同始同終平行3途徑表達(dá)式由途徑操作符來定義動作的同步ABABA;BA/BAi*N:A將對象分成SIU(同步間隔單元 2. 基于Petri網(wǎng)的描畫法 OCPN模型對象合成Petri網(wǎng)OCPN模型描畫了媒體對象內(nèi)和媒體對象間的時間關(guān)系， 它是一個定時Petri網(wǎng)。用一個六元組表示: OCPN = T,P,A,D,R,M T = t1

10、,t2, , tn 為變化集, ti表示同步點(diǎn)和處置位置, 在圖中用短垂直棒表示。 P = p1,p2, , pm 為位置集, pi表示進(jìn)程, 并假定變化瞬時發(fā)生, 故pi具有相應(yīng)形狀, 在圖中用圓表示。 A: TP PT I = 1,2,是有向孤集, 在圖中用箭頭表示。 D: PRe定義了由位置集向?qū)崝?shù)集的映射, 實(shí)數(shù)集Re表示OCPN中的時間約束。 R:Pr1,r2,rk 定義了由位置集向資源集 r1,r2,rk 的映射。 M:PI,I =1,2,定義了由位置集向整數(shù)集的映射,它表示位置集中的標(biāo)志(token)分布。 XOCPN是在OCPN模型的根底上擴(kuò)展了對多媒體對象通訊和同步機(jī)理的描畫

11、。用一個八元組XOCPN= T,P,A,D,R,M,Y,Z 表示, 也就是在OCPN模型的根底上擴(kuò)展了兩個映射函數(shù)Ypi和Zpi: Y: P 控制, 對象 定義了位置集向位置類型集的映射。 位置分為對象位置和控制位置兩種。 Z: P動作, 函數(shù)地址, 同步單元地址, 通訊和同步的信息地址定義了由位置集向地址集的映射。 OCPN中的位置分成對象位置和控制位置兩種。 (1) 對象位置 它表示媒體對象的播放進(jìn)程, 每個對象位置與媒體對象的一個同步單元SIU相對應(yīng)。 每個對象位置Pi指定一個時間間隔, 一個時間間隔與其對應(yīng)的SIU的時間間隔相等, 由映射函數(shù)Z(Pi )堅持的SIU的地址可以是一個緩沖

12、器指針。每個對象位置表示如下兩種操作之一: Action.SIUPlayout: 在媒體輸出設(shè)備上播放相關(guān)的同步單元。 Action.SIUTransmit: 向指定的虛電路通道發(fā)送相關(guān)的同步單元。 (2) 控制位置 它表示基于XOCPN語義的控制過程, 在其上執(zhí)行的操作有資源的建立, 資源的釋放以及媒體間的同步等, 即: Action. ResourceSetup: 建立虛電路信道、按用戶設(shè)置的QoS參數(shù)的協(xié)商信道屬性、分配接納端緩沖器、預(yù)備輸出設(shè)備等。 其中, 資源Resource定義了通訊通道、緩沖器或輸出設(shè)備等。Action. ResourceRelease: 在媒體對象完成播出后,

13、立刻釋放所占用的資源。 Action.InterstreamSynchronize: 按所希望的同步戰(zhàn)略實(shí)現(xiàn)流間同步機(jī)制。 (1) 中斷同步 (2) 受限中斷同步 流內(nèi)同步機(jī)制 (a) 中斷同步； (b) 受限中斷同步 1 流內(nèi)同步對于流間同步, XOCPN模型也支持兩種同步機(jī)制: 中斷和非中斷。 (1) 流間中斷同步將在Nxocpn中的每一個IPP流間播放點(diǎn)處中斷快速流的播放過程, 直到一切需求同步的媒體流都到達(dá)IPP才播放。 非中斷同步 將在Nxocpn中的每一個IPP點(diǎn)搜集有關(guān)流間的同步形狀信息, 然后根據(jù)所搜集的同步形狀信息進(jìn)展某些校正動作, 這些校正動作分成兩種: 2 流間同步流間同

14、步機(jī)制 一個電視新聞廣播時間線的例子 節(jié)目片頭引導(dǎo)音樂音樂漸隱播音員念第一條新聞播音員全景播音員上部照片圖形ABCDEF視頻音樂語音 電視新聞廣播的XOCPN 3. 基于同步標(biāo)志的描畫法在數(shù)據(jù)生成過程中在數(shù)據(jù)流中參與同步標(biāo)志的方法。同步標(biāo)志方式有形標(biāo)志：如以信息幀的方式插入到媒體數(shù)據(jù)流中; 邏輯標(biāo)志：如相對數(shù)據(jù)量和相對時間。 時間標(biāo)志： 多媒體對象起始媒體單元位于時間系統(tǒng)的零點(diǎn)，一個媒體單元在相對時間系統(tǒng)中的位置。將各個媒體流映射到一個邏輯時間軸上, 賦予每個媒體單元一個時戳(Timestamp), 以此來標(biāo)識媒體單元相對于邏輯時間軸起始點(diǎn)的時域位置。邏輯時間軸的單位應(yīng)小于最小媒體單元的繼續(xù)時

15、間, 從而使同一媒體中兩個不同的媒體單元的時戳相異。在媒體表現(xiàn)過程中, 具有一樣時戳的媒體單元同步播放。 圖 3.6 RTP報頭格式 RTP協(xié)議中的時間標(biāo)志其中: V: RTP協(xié)議的版本號, 占2位。 當(dāng)前協(xié)議版本號為2。 P: 填充標(biāo)志, 占1位。 假設(shè)P=1, 那么在該報文的尾部將填充一個或多個額外的八位組。 X: 擴(kuò)展標(biāo)志，占1位。 假設(shè)X=1, 那么在RTP報頭后跟有一個擴(kuò)展報頭。 CC: CSRC計數(shù)器, 占4位, 指示CSRC 標(biāo)識符的個數(shù)。 M: 標(biāo)志, 占1位, 不同的有效載荷有不同的含義。 對于視頻, 標(biāo)志一幀的終了; 對于音頻, 標(biāo)志會話的開場。 PT: 有效載荷類型, 占

16、7位, 用于闡明RTP報文中有效載荷的類型。 例如, GSM音頻、 JPEM視頻等。 序列號: 占16位, 用于標(biāo)識發(fā)送者所發(fā)送的RTP報文的序列號; 每發(fā)送一個報文, 序列號增1。接納者經(jīng)過序列號來檢測報文喪失情況, 重新排序報文, 恢復(fù)數(shù)據(jù)。 時戳(Timestamp): 占32位, 時戳反映了該RTP報文的第一個八位組的采樣時辰。接納者運(yùn)用時戳來計算延遲和延遲抖動, 并進(jìn)展同步控制。 同步信源(SSRC)標(biāo)識符: 占32位, 用于標(biāo)識同步信源。 該標(biāo)識符是隨機(jī)選擇的, 參與同一視頻會議的兩個同步信源不能有一樣的SSRC。 特約信源(CSRC)標(biāo)識符: 每個CSRC標(biāo)識符占32位, 可以有

17、015個。每個CSRC標(biāo)識了包含在該RTP報文有效載荷中的一切特約信源。設(shè)備驅(qū)動法：銜接驅(qū)動法： 典型的時戳遞進(jìn)戰(zhàn)略(1) 設(shè)備驅(qū)動法源于主設(shè)備的媒體單元的時戳在主設(shè)備時鐘控制下遞進(jìn)；源于從設(shè)備的媒體單元的時戳的遞進(jìn)要經(jīng)過調(diào)理過程的處置, 使從設(shè)備媒體單元與同時生成的主設(shè)備媒體單元具有一樣的時戳。 選擇主設(shè)備時的思索要素有: 時鐘頻率的準(zhǔn)確性和媒體源的重要性等。例如, 聲音媒體和圖像媒體中, 通常選擇聲音頻媒體源作為主設(shè)備, 由于聲音媒體的時間誤差易被人們的聽覺感受; 也可以選擇外部時鐘源作為主設(shè)備。 (2) 銜接驅(qū)動法在分布式網(wǎng)絡(luò)環(huán)境中, 媒體單元時戳遞進(jìn)率取決于某一網(wǎng)絡(luò)銜接的數(shù)據(jù)傳輸率。

18、上講內(nèi)容1同步義務(wù)：維持媒體內(nèi)、媒體間的時間關(guān)系。2同步的類型：用戶級同步、媒體間同步、媒體內(nèi)同步3多媒體數(shù)據(jù)的組成：成分?jǐn)?shù)據(jù)、同步數(shù)據(jù)同步描畫數(shù)據(jù)、同步容限、邏輯數(shù)據(jù)單元LDU。4同步描畫方法：基于途徑的描畫方法：基于OCPN模型的描畫方法基于時間標(biāo)志的描畫方法 課后練習(xí)節(jié)目片頭引導(dǎo)音樂音樂漸隱播音員念第一條新聞播音員全景播音員上部照片圖形ABCDEF視頻音樂語音途徑描畫表達(dá)式：？同步控制機(jī)制：了解同步描畫數(shù)據(jù)所定義的時域特征，并根據(jù)用戶所要求的同步容限，完成對改特征的維護(hù)。內(nèi)容：分布式多媒體系統(tǒng)中的同步延續(xù)媒體內(nèi)部的同步媒體流之間的同步9.4 多媒體同步控制機(jī)制多路復(fù)用同步技術(shù)將多個媒體流

19、的數(shù)據(jù)復(fù)用到一個數(shù)據(jù)流中，從而使他們在傳輸中自然堅持媒體間的同步關(guān)系。例：MPEG-2規(guī)范中TS流的構(gòu)成數(shù)據(jù)編碼器音頻編碼器TS復(fù)用音頻視頻數(shù)據(jù)視頻編碼器打包器打包器打包器PS復(fù)用TS碼流PS碼流ESPES節(jié)目1音頻1節(jié)目1視頻1節(jié)目1PMT節(jié)目1視頻2節(jié)目1視頻3TS包音頻PES視頻PES數(shù)據(jù)PES節(jié)目1音頻2節(jié)目1音頻3節(jié)目1數(shù)據(jù)1PES包頭PES包數(shù)據(jù)PES 包鏈接頭適配域TS 包凈荷184byte188byte鏈接頭適配域凈荷.一、分布式多媒體系統(tǒng)中的同步分布式系統(tǒng)構(gòu)造：點(diǎn)對點(diǎn)、點(diǎn)對多點(diǎn)、多點(diǎn)對點(diǎn)、多點(diǎn)對多點(diǎn) SDSDSDSDSD2同步規(guī)范的傳送方式：提早傳送法傳送多媒體數(shù)據(jù)之前，將整

20、個播放過程所需同步規(guī)范以文件方式傳送到接納端，以備播放時參照。輔助通道傳送法運(yùn)用附加邏輯通道專門傳送同步規(guī)范文件插入同步標(biāo)志法將同步規(guī)范與成分?jǐn)?shù)據(jù)復(fù)接在一同運(yùn)用一個通道傳送 3. 影響媒體同步的要素延時偏移媒體間信道不同產(chǎn)生不同延時延時抖動傳輸過程中的延時偏向最大延時與最小延時之差時鐘漂移端系統(tǒng)之間的時鐘頻率變化一段時間間隔內(nèi)的平均抖動數(shù)據(jù)喪失傳輸延時 抖動對多媒體同步的破壞效力器用戶音頻數(shù)據(jù)視頻數(shù)據(jù)網(wǎng)絡(luò)時鐘偏向?qū)ν降挠绊懶旁春托潘拗g時鐘存在偏向，經(jīng)過一段時間后，接納端數(shù)據(jù)缺乏，破壞延續(xù)媒體播放的延續(xù)性例：時鐘偏向10-3秒，90分鐘后，偏向5.4秒，播放質(zhì)量無法保證。一秒內(nèi)時鐘偏向10-

21、6秒，90分鐘后，偏向5.4ms，可以忽略。網(wǎng)絡(luò)時鐘同步協(xié)議Internet的網(wǎng)絡(luò)時鐘協(xié)議NTPNetwork Time Protocol，中央時間效力器維護(hù)一個高精度和高穩(wěn)定度的時鐘，時間效力器向各站點(diǎn)周期性廣播定時信號，各站點(diǎn)以此為基準(zhǔn)調(diào)整本地時鐘各站點(diǎn)同步時鐘的精度堅持在毫秒級4、多級同步機(jī)制在分布式多媒體系統(tǒng)中，同步通常是分多步完成的，涉及到系統(tǒng)的各個部分。采集多媒體數(shù)據(jù)及存儲多媒體數(shù)據(jù)時的同步從存儲設(shè)備中提取多媒體數(shù)據(jù)時的同步發(fā)送多媒體數(shù)據(jù)時的同步多媒體數(shù)據(jù)傳輸過程中的同步接納多媒體數(shù)據(jù)時的同步輸出設(shè)備內(nèi)部的同步 發(fā)送、傳輸和接納過程中的同步控制機(jī)制二、延續(xù)媒體內(nèi)部的同步 延續(xù)媒體是

22、由假設(shè)干個LDU構(gòu)成的時間序列，LDU之間存在固定時間關(guān)系，當(dāng)網(wǎng)絡(luò)傳輸存在抖動時，延續(xù)媒體內(nèi)部LDU的相互時間間隔那么發(fā)生變化，這時接納端需求采取一定的措施恢復(fù)原來的時間關(guān)系。效力器用戶LDU網(wǎng)絡(luò)處置方法：接納端設(shè)置緩存，延時抖動進(jìn)展過濾技術(shù)：基于播放時限的同步方法基于緩存數(shù)據(jù)量控制的同步方法信源緩存器播放器(解碼器)傳輸線路1. 基于播放時限的同步方法限定播放延遲時間主要問題？ 播放延遲時間 緩存器如何設(shè)計信源緩存器播放器(解碼器)傳輸線路r設(shè)恣意LDU：發(fā)送時辰為 t(i)到達(dá)時辰為 a(i)播放時辰為 p(i)傳輸時延為 d(i)最大延時dmax，最小延時dmin播放速度 為 r 每秒傳

23、送的LDU個數(shù)12i12idmindmax12iT實(shí)時數(shù)據(jù)的發(fā)送、接納和播放時間關(guān)系t(i)a(i)p(i)T=? 播放延遲時間在延時抖動已限定在一定范圍的條件下，接納端在接納到第1個LDU之后，必需延遲一段時間T再開場播放，才干保證整個播放過程不延續(xù)。緩存器的最大容量最大緩存時間Bt緩存器的最大容量緩存器的最大容量B： 設(shè)播放速度為 r ，那么：2.基于緩存數(shù)據(jù)量控制的同步方法周期性檢測緩存數(shù)據(jù)量，假設(shè)緩存數(shù)據(jù)量超越預(yù)定警戒限時，以為存在不同步景象，采取措施進(jìn)展再同步。措施？接納端調(diào)理發(fā)送端調(diào)理接納端再同步信源緩存器播放器傳輸線路控制函數(shù)反響濾波器：t時辰的緩存數(shù)據(jù)量：反響濾波器：t時辰的緩

24、存數(shù)據(jù)量：控制函數(shù)發(fā)送端再同步：信源緩存器播放器傳輸線路控制函數(shù)反響濾波器：t時辰的緩存數(shù)據(jù)量：反響濾波器：t時辰的緩存數(shù)據(jù)量：控制函數(shù)同步操作過程濾波器輸出：經(jīng)過濾波器后，平滑掉短期延時抖動引起的緩存數(shù)據(jù)量動搖，只需由時鐘漂移、網(wǎng)絡(luò)傳輸條件改動等要素引起的長期緩存數(shù)據(jù)量變化才會觸發(fā)控制函數(shù)的任務(wù)為平滑因子，其取值影響濾波器的靈敏度。過大，同步控制機(jī)制啟動慢，緩沖器溢出或空過小，延時抖動引起的緩存數(shù)據(jù)量微小變化也會不用要的啟動再同步機(jī)制，系統(tǒng)不穩(wěn)定播放速度調(diào)整：控制函數(shù)將平滑后的緩存數(shù)據(jù)量于預(yù)先設(shè)定的緩存數(shù)據(jù)量警戒線比較，假設(shè)超出警戒線，啟動再同步機(jī)制。BbaLWUWba播放速率調(diào)整： 相對調(diào)

25、整速率再同步伐整期緩存器容量BbaLWUWbaB：知延時條件下的緩存容量滯后ba：附加緩存容量，包容再同步機(jī)制延遲時間的數(shù)據(jù)三、媒體流之間的同步1基于反響的流間同步方法2基于全局時鐘的時間戳方法3基于RTP協(xié)議的同步控制機(jī)制1. 基于反響的流間同步機(jī)制在網(wǎng)絡(luò)環(huán)境下，基于反響的同步機(jī)制是常用的同步方法。關(guān)鍵點(diǎn)：失調(diào)檢測控制機(jī)制：發(fā)送端控制接納端控制例：到達(dá)用戶A音頻流和到達(dá)用戶B的視頻流必需符合二者間的同步要求。效力器ABfafbfa fb: 反響單元條件：無全局時鐘延時在dmin，dmax之間任務(wù)過程：效力器根據(jù)相對時間戳同時提取不同流的并送到通訊線路；由于各種要素影響，各用戶端播放過程進(jìn)過一段時間不同步；用戶端在播放某個LDU時，將該LDU的時間戳前往效力器；效力器周期性比較反響回來的數(shù)據(jù)，可檢測出各條流之間的同步情況。同步過程: 估計與反響信息相對應(yīng)的