7.2.1

概述高級的多媒體系統(tǒng)的特征是，它集成了計算機控制的、相互獨立的、與時間相關(guān)和與時間無關(guān)的媒體的生成、存儲、通信、操作和演示，而集成的關(guān)鍵問題是各種各樣的媒體和數(shù)據(jù)之間的同步。因此，同步（Synchronization）問題被認為是多媒體系統(tǒng)的一個重要特征。同步一般指多媒體系統(tǒng)中媒體對象間的時間關(guān)系，更廣泛的概念則包括內(nèi)容、空間和時間的關(guān)系。媒體對象：時間相關(guān)的媒體時間無關(guān)的媒體視頻、音頻、動畫文本、圖形、圖象媒體對象間的同步由時間相關(guān)的媒體對象和時間無關(guān)的媒體對象之間的關(guān)系組成。這里有兩個常見的例子：一個是電視中視覺和聽覺信息間的同步關(guān)系，這是典型的連續(xù)媒體間的同步；另一個是幻燈演示中畫面顯示與音頻流之間的時間關(guān)系，是典型的時間相關(guān)的媒體和時間無關(guān)的媒體之間的同步關(guān)系。在多媒體系統(tǒng)的許多系統(tǒng)部件上都存在并應(yīng)支持多媒體同步，如操作系統(tǒng)、通信系統(tǒng)、數(shù)據(jù)庫、文檔，以及應(yīng)用程序等各個層次上。時間關(guān)系的定義隱式即在采集媒體對象時就定義了，如果演示的目的就是以采集時同樣的方式顯示出來的話（如音頻/視頻的錄放）顯式即演示是由獨立采集或生成的媒體對象構(gòu)成的。特別指在媒體數(shù)量、媒體類型（時間相關(guān)、時間無關(guān)）、媒體集成度三個測度標準上都有充分體現(xiàn)的系統(tǒng)。同步中的基本概念同步參考模型同步的范疇對象內(nèi)和對象間同步現(xiàn)場同步和合成同步同步的服務(wù)質(zhì)量概述同步中的基本概念同步參考模型同步的范疇對象內(nèi)和對象間同步現(xiàn)場同步和合成同步同步的服務(wù)質(zhì)量概述同步中的基本概念同步參考模型同步的范疇對象內(nèi)和對象間同步現(xiàn)場同步和合成同步同步的服務(wù)質(zhì)量概述同步一般指多媒體系統(tǒng)中媒體對象間的時間關(guān)系，而更廣泛的概念則包括內(nèi)容、空間和時間的關(guān)系。內(nèi)容關(guān)系是指從某種數(shù)據(jù)定義媒體對象的相關(guān)性?？臻g關(guān)系是指空間關(guān)系指多媒體演示中某一時間點上對象在輸出設(shè)備上的布局關(guān)系。時間關(guān)系不僅指基本的反映媒體對象之間簡單的出現(xiàn)順序的“時序關(guān)系”，還應(yīng)包括由活動的媒體對象間通過消息傳遞或狀態(tài)訪問產(chǎn)生進一步動作的“制約關(guān)系”，并考慮在多媒體演示過程中，“用戶交互”對媒體對象活動的影響。同步的范疇同步中的基本概念同步參考模型同步的范疇對象內(nèi)和對象間同步現(xiàn)場同步和合成同步同步的服務(wù)質(zhì)量概述對象內(nèi)同步指一個時間相關(guān)媒體對象的各種演示單元間的時間關(guān)系。對象間同步指媒體對象之間的同步，后文討論的同步方法主要是針對對象間同步的。對象內(nèi)和對象間的同步同步中的基本概念同步參考模型同步的范疇對象內(nèi)和對象間同步現(xiàn)場同步和合成同步同步的服務(wù)質(zhì)量概述現(xiàn)場同步和合成同步這是因時間關(guān)系定義的類型不同而區(qū)別的兩個概念。在現(xiàn)場同步（livesynchronization）中，同步的目的是準確再現(xiàn)一個演示中在采集過程就存在的時間關(guān)系。例如，在兩個人進行討論的一個計算機會議中，現(xiàn)場同步包括音頻/視頻的唇同步，以及屏幕顯示中鼠標指針的移動與講話的同步。在目的端要同樣再現(xiàn)源端的信號關(guān)系。其根本要求是根據(jù)在媒體對象的采集階段就存在的時間關(guān)系顯示數(shù)據(jù)?，F(xiàn)場同步和合成同步這是因時間關(guān)系定義的類型不同而區(qū)別的兩個概念。在合成同步（synthetic

synchronization）中，每個對象數(shù)據(jù)都是獨立生成的，時間關(guān)系是人工定義

的。合成同步通常用在演示和用來生成新的復(fù)合

多媒體對象的系統(tǒng)中，它強調(diào)的是支持媒體對象

間靈活的同步關(guān)系。合成同步有兩個階段：定義

階段要有合適的方法充分定義對象間的時間關(guān)系，演示階段是在運行時保證以同步的模式顯示數(shù)據(jù)。同步中的基本概念同步參考模型同步的范疇對象內(nèi)和對象間同步現(xiàn)場同步和合成同步同步的服務(wù)質(zhì)量概述同步的服務(wù)質(zhì)量“同步”是否有一個客觀的度量標準？盡管從人的主觀感覺的角度很難提出一個客觀的同步度量標準，我們按照演示的需求，根據(jù)與心理學相關(guān)的一些領(lǐng)域的實驗結(jié)果，給出下面兩個同步服務(wù)質(zhì)量（QoS,Quality

of

Service）的表格。對對象內(nèi)同步，書P556表7-1反映一個時間相關(guān)的媒體對象需要滿足的LDU間時間關(guān)系的精確度；對對象間同步，書P557表7-2反映兩個媒體對象的并行演示中的精確度。同步中的基本概念同步參考模型同步的范疇對象內(nèi)和對象間同步現(xiàn)場同步和合成同步同步的服務(wù)質(zhì)量概述同步參考模型我們需要一個參考模型來理解多媒體同步的各種需求，區(qū)別和構(gòu)造支持同步運行的運行機制，區(qū)別運行機制間的接口，比較多媒體同步的系統(tǒng)解決方案。Multimedia

ApplicationSpecification

LayerObject

LayerStream

LayerMedia

Layer圖7-12多媒體同步參考模型圖中表示的同步參考模型體現(xiàn)了不同層次上對于同步的要求。每層實現(xiàn)一個由適當?shù)慕涌谔峁┑耐綑C制，這些接口可以用于定義和保證時間關(guān)系。描述層對象層流層媒體層媒體層：媒體層針對的是單獨的媒體數(shù)據(jù)流。它所面對的是數(shù)據(jù)流中的一個個基本的邏輯數(shù)據(jù)單元。流層：這一層要面對的是多個媒體數(shù)據(jù)流。為了保持多個數(shù)據(jù)流的并行、同步的播放，在這層中必須解決的是媒體數(shù)據(jù)流之間的同步關(guān)系。對象層：對象是多媒體演示中的基本單位，對象層同步就是要保證多媒體演示中的各個對象按照規(guī)定的次序出現(xiàn)并正確地響應(yīng)用戶的輸入事件。這層涉及到多媒體演示之中的對象調(diào)度算法和差錯檢查等。媒體層、流層、對象層和描述層描述層：描述層解決的是多媒體演示中的對象出現(xiàn)次序及交互處理的描述，即多媒體演示的作者如何描述一個