多媒體技術(shù)及應(yīng)用多媒體概論多媒體音頻處理技術(shù)圖像處理技術(shù)計(jì)算機(jī)動(dòng)畫技術(shù)多媒體視頻技術(shù)多媒體技術(shù)的基本概念多媒體技術(shù)的研究?jī)?nèi)容多媒體技術(shù)的發(fā)展與應(yīng)用多媒體計(jì)算機(jī)系統(tǒng)組成數(shù)據(jù)壓縮與編碼技術(shù)簡(jiǎn)述第1章多媒體技術(shù)概論31.1多媒體技術(shù)的基本概念多媒體的相關(guān)概念多媒體技術(shù)的特點(diǎn)41.1.1多媒體技術(shù)的相關(guān)概念信息與媒體信息：是人們頭腦中對(duì)現(xiàn)實(shí)世界中客觀事物以及事物之間聯(lián)系的抽象反映，它向我們提供了關(guān)于現(xiàn)實(shí)世界實(shí)際存在的事物和聯(lián)系的有用知識(shí)。媒體：是信息表示和傳輸?shù)妮d體。兩種含義：

存儲(chǔ)信息的實(shí)體

信息的載體

5媒體的分類

按照國(guó)際電聯(lián)（ITU）的定義，媒體有五大類感覺(jué)媒體表示媒體顯示媒體傳輸媒體存儲(chǔ)媒體直接作用于人的感官，令人直接產(chǎn)生感覺(jué)的媒體。如語(yǔ)言、音響、文字、圖形、動(dòng)畫、活動(dòng)影像等。為了對(duì)感覺(jué)媒體進(jìn)行有效的加工、處理和傳輸，而人為研究、構(gòu)造的媒體稱為表示媒體，其目的是更有效地將感覺(jué)媒體從一地向另一地傳送，便于加工和處理。表示媒體包括各種編碼方式，如語(yǔ)言編碼、文本編碼以及靜止和運(yùn)動(dòng)圖像編碼等。媒體的分類

按照國(guó)際電聯(lián)（ITU）的定義，媒體有五大類感覺(jué)媒體表示媒體顯示媒體傳輸媒體存儲(chǔ)媒體6指顯示感覺(jué)媒體的物理設(shè)備，即把進(jìn)出主設(shè)備(如電腦)的數(shù)據(jù)信號(hào)用人能感知的視聽(tīng)信號(hào)顯示出來(lái)的器材。顯示媒體又分為兩種，一種是輸入顯示媒體，如話筒、攝像機(jī)、光筆、鍵盤等；另一種是輸出顯示媒體，如顯示器、揚(yáng)聲器、打印機(jī)等。傳輸媒體是指將媒體從一處傳輸?shù)搅硪惶幍奈锢磔d體，如同軸電纜、光纖、雙絞線以及電磁波等。用于存儲(chǔ)表示媒體，即存放感覺(jué)媒體數(shù)字化后的代碼的媒體稱為存儲(chǔ)媒體，如磁盤、光盤、磁帶、紙張等。7常見(jiàn)的感覺(jué)類媒體(1)視覺(jué)類媒體圖像圖形符號(hào)視頻動(dòng)畫(2)聽(tīng)覺(jué)類媒體(3)觸覺(jué)類媒體65%20%10%2%3%視覺(jué)味覺(jué)嗅覺(jué)觸覺(jué)聽(tīng)覺(jué)多媒體、多媒體技術(shù)與多媒體計(jì)算機(jī)多媒體：使用計(jì)算機(jī)交互式綜合技術(shù)和數(shù)字通信網(wǎng)絡(luò)技術(shù)處理多種表示媒體——文本、圖形、圖像和聲音，使多種信息建立邏輯連接，集成為一個(gè)交互式系統(tǒng)。(2001年，國(guó)際電信聯(lián)盟)多媒體技術(shù)：計(jì)算機(jī)綜合處理文本、圖形、圖像、音頻與視頻等多種媒體信息，使多種信息建立邏輯連接，集成為一個(gè)系統(tǒng)并且具有交互性。因此，“多媒體”與“多媒體技術(shù)”是同義詞。多媒體計(jì)算機(jī)是指具有多媒體處理功能的計(jì)算機(jī)。8多媒體技術(shù)的特點(diǎn)集成性信息的集成設(shè)備的集成實(shí)時(shí)性交互性媒體的多樣性91.2多媒體技術(shù)的研究?jī)?nèi)容多媒體數(shù)據(jù)壓縮技術(shù)多媒體軟硬件平臺(tái)多媒體數(shù)據(jù)存儲(chǔ)技術(shù)多媒體數(shù)據(jù)庫(kù)與基于內(nèi)容的檢索技術(shù)超文本與超媒體技術(shù)多媒體通信與分布式處理虛擬現(xiàn)實(shí)技術(shù)智能多媒體技術(shù)10/2016-02/29/content_8601677.htm/n1/2016/0229/c40606-28156505.html/#/home111.3多媒體技術(shù)的發(fā)展與應(yīng)用多媒體技術(shù)的發(fā)展啟蒙發(fā)展階段：最早起源于20世紀(jì)80年代中期1984Apple公司Macintosh應(yīng)用和標(biāo)準(zhǔn)化階段MPC

圖像壓縮國(guó)際標(biāo)準(zhǔn)： JPEG MPEG H.26X12多媒體技術(shù)應(yīng)用領(lǐng)域商業(yè)學(xué)校家庭公共場(chǎng)所多媒體技術(shù)的前景網(wǎng)絡(luò)化智能化131.4多媒體計(jì)算機(jī)系統(tǒng)組成141516創(chuàng)新SoundBlasterAudigy4ValueSB0610聲卡及接口音頻卡(1)音頻卡的音頻處理能力多媒體信息處理中，音頻媒體有3種形式：數(shù)字化聲音、合成音樂(lè)和CD音頻。音頻卡的音頻處理能力包括：①立體聲合成。

②模擬混音。③立體聲方式的D/A轉(zhuǎn)換和A/D轉(zhuǎn)換。④數(shù)字信號(hào)處理(DSP)。⑤MIDI接口和CD-ROM接口。⑥輸出功率放大。17(2)音頻卡的性能指標(biāo)①采樣深度 24位、32位。位數(shù)越大，精度越高，所錄制的聲音質(zhì)量也越好。②最高采樣頻率

一般聲卡提供11.025kHz、22.05kHz、44.1kHz的采樣頻率，高檔的聲卡可達(dá)48kHz甚至更高。③MIDI合成方式1819七彩虹網(wǎng)馳GTX750Ti-2GD5獨(dú)立顯卡側(cè)面圖視頻卡(1)視頻卡的主要功能①全活動(dòng)數(shù)字圖像的顯示、抓取、錄制等。②可以從VCR、攝像機(jī)、LD、TV等視頻源中抓取定格，存儲(chǔ)輸出圖像。③近似真彩色YUV格式圖形緩沖區(qū)，并可將緩沖區(qū)影射到高端內(nèi)存。④可按比例縮放、剪切、移動(dòng)、掃描視頻圖像。20⑤色度、飽和度、亮度、對(duì)比度及R、G、B三色比例可調(diào)。⑥可用軟件選擇端口地址和IRQ(InterruptRequest，中斷請(qǐng)求)中斷。⑦具有若干個(gè)可用軟件相互切換的視頻輸入源，以其中一個(gè)做活動(dòng)顯示。21(2)視頻卡的特性①視頻輸入源：可通過(guò)軟件從3個(gè)復(fù)合視頻信號(hào)輸入口中選擇視頻源，支持NTSC、PAL或SECAM制式。②窗口和疊加：窗口定位及定位尺寸精確到單個(gè)像素，通過(guò)圖形色鍵將VGA圖形和視頻疊加。③屏蔽：色鍵控制，亮度和彩色信號(hào)屏蔽。④圖像獲取：支持JPEG、PCX、TIFF、BMP、MMP、GIF及TARGA文件格式，640×480分辨率(VGA)，支持二百萬(wàn)種真色彩。⑤圖像處理：活動(dòng)及靜止比例縮放，視頻圖像的定格、存取及載入，圖像的剪輯和改變尺寸，色調(diào)、飽和度、亮度和對(duì)比度的控制。221.5數(shù)據(jù)壓縮與編碼技術(shù)簡(jiǎn)述1.5.1數(shù)據(jù)壓縮的必要性與可能性1.5.2數(shù)據(jù)壓縮的性能指標(biāo)1.5.3數(shù)據(jù)壓縮方法分類1.5.4音頻編碼分類與數(shù)字音頻壓縮標(biāo)準(zhǔn)1.5.5靜態(tài)圖像壓縮標(biāo)準(zhǔn)JPEG1.5.6數(shù)字視頻壓縮編碼23數(shù)據(jù)壓縮的必要性多媒體數(shù)據(jù)的數(shù)字化帶來(lái)了很多好處，如能更方便地處理數(shù)據(jù)，易于存儲(chǔ)和遠(yuǎn)距離傳輸，沒(méi)有累積失真等。但是同時(shí)，數(shù)字化也帶來(lái)了很多問(wèn)題，其中一個(gè)主要問(wèn)題就是龐大的數(shù)據(jù)量。龐大的數(shù)據(jù)量如果不壓縮，將帶來(lái)如下問(wèn)題：對(duì)CPU的處理速度要求太高；對(duì)外部存儲(chǔ)設(shè)備的容量要求太高；對(duì)數(shù)據(jù)傳輸帶寬要求太高。24數(shù)據(jù)壓縮的可能性多媒體數(shù)據(jù)之所以能夠進(jìn)行壓縮主要是基于兩個(gè)原因：一個(gè)是信源數(shù)據(jù)中存在或多或少的冗余，這種冗余既存在信源本身的相關(guān)性中，也存在于信源概率分布的不均勻中，如空間冗余、時(shí)間冗余、結(jié)構(gòu)冗余、知識(shí)冗余及紋理統(tǒng)計(jì)冗余；另一個(gè)是對(duì)于圖像、音頻和視頻等特殊信源，人的感知可容忍某些細(xì)節(jié)信息的丟失(感知冗余)多媒體數(shù)據(jù)冗余的主要類型有：1.空間冗余2.時(shí)間冗余3.結(jié)構(gòu)冗余4.信息熵冗余5.視覺(jué)冗余6.聽(tīng)覺(jué)冗余7.知識(shí)冗余251.5.2數(shù)據(jù)壓縮的性能指標(biāo)壓縮比失真度算法復(fù)雜度、速度算法能否用硬件實(shí)現(xiàn)261.5.3數(shù)據(jù)壓縮方法分類1.按解碼后的數(shù)據(jù)有無(wú)損失分：無(wú)損壓縮和有損壓縮2.按編碼算法原理分①預(yù)測(cè)編碼。②變換編碼。③量化與向量量化編碼。④信息熵編碼。⑤子帶編碼。⑥結(jié)構(gòu)編碼。⑦基于知識(shí)的編碼。271.5.4音頻編碼分類與數(shù)字音頻壓縮標(biāo)準(zhǔn)音頻編碼分類波形編碼、參數(shù)編碼、混合編碼數(shù)字音頻壓縮標(biāo)準(zhǔn)針對(duì)不同的質(zhì)量要求，制定了一系列的壓縮標(biāo)準(zhǔn)：1.電話質(zhì)量的語(yǔ)音壓縮標(biāo)準(zhǔn)(1)G.711(2)G.721(3)G.723(4)G.7282.寬帶話音壓縮標(biāo)準(zhǔn)G.722

3.高保真立體聲音頻壓縮標(biāo)準(zhǔn)MPEG音頻281.5.5靜態(tài)圖像壓縮標(biāo)準(zhǔn)JPEGJPEG(JointPhotographicExpertsGroup，聯(lián)合圖像專家組)成立于1986年，由前國(guó)際電報(bào)電話咨詢委員會(huì)(CCITT)和國(guó)際標(biāo)準(zhǔn)組織(ISO)聯(lián)合組成。1987年11月，國(guó)際電Ⅰ委員會(huì)(IEC)也參加了合作他們開發(fā)研制出連續(xù)色調(diào)、多級(jí)灰度、靜止圖像的數(shù)字圖像壓縮編碼方法，這個(gè)壓縮編碼方法稱為JPEG算法。JPEG算法被確定為JPEG國(guó)際標(biāo)準(zhǔn)，它是國(guó)際上彩色、灰度、靜止圖像的第一個(gè)國(guó)際標(biāo)準(zhǔn)。JPEG適用范圍很廣，可用于灰度圖像、彩色圖像、視頻圖像的幀內(nèi)預(yù)測(cè)2930JPEG算法結(jié)構(gòu)圖1.5.6數(shù)字視頻壓縮編碼MPEG和H.26xMPEG(MovingPictureExpertsGroup，運(yùn)動(dòng)圖像專家組)是1988年由ISO和IEC聯(lián)合成立的一個(gè)專家組，負(fù)責(zé)開發(fā)視頻數(shù)據(jù)和聲音數(shù)據(jù)的編碼、解碼和它們的同步等標(biāo)準(zhǔn)，這個(gè)專家組開發(fā)的標(biāo)準(zhǔn)稱為MPEG