北華大學(xué)-多媒體通信技術(shù)期末復(fù)習(xí)資料

1、北華大學(xué)-多媒體通信技術(shù)期末復(fù)習(xí)資料1 .多媒體系統(tǒng)有哪幾部分組成？2.圖形和圖像有何區(qū)別？3.什么是變換編碼？4.說明多媒體創(chuàng)作工具的類型與特征2 .答：多媒體系統(tǒng)的主要部分有：計(jì)算機(jī)硬件、多媒體計(jì)算機(jī)所配置的硬件、多媒體I/O控制及接口、多媒體的核心系統(tǒng)、創(chuàng)作系統(tǒng)、應(yīng)用系統(tǒng)。2.答：圖形一般指用計(jì)算機(jī)繪制的畫面，如直線、圓、圓弧、任意曲線和圖表等；圖像則是指由輸入設(shè)備捕捉的實(shí)際場景畫面或以數(shù)字化形式存儲的任意畫面。圖像都是由一些排成行列的像素組成的，一般數(shù)據(jù)量都較大。而圖形文件中只記錄生成圖的算法和圖上的某些特征點(diǎn)，也稱矢量圖。相對于位圖的大數(shù)據(jù)量來說，它占用的存儲空間較小。3.答：變換編

2、碼是將通常在空間域描寫的圖像信號，變換到另外一些正交矢量空間（即變換域）中進(jìn)行描寫，而且通過選擇合適的變換關(guān)系使變換域中描寫的各信號分量之間相關(guān)性很小或者互不相關(guān)，從而達(dá)到數(shù)據(jù)壓縮的目的。4.答：基于多媒體創(chuàng)作工具的創(chuàng)作方法和結(jié)構(gòu)特點(diǎn)的不同，可將其劃分為如下幾類：（1）基于時(shí)間的創(chuàng)作工具；（2）基于圖標(biāo)或流線的創(chuàng)作工具；（3）基于卡片或頁面的工具；（4）以傳統(tǒng)程序語言為基礎(chǔ)的多媒體創(chuàng)作工具1.多媒體系統(tǒng)基于功能可分為、和家庭系統(tǒng)四種。2.Windows中最常用的圖像文件格式是、。3.一幀畫面由若干個(gè)像素組成，在每一幀內(nèi)的相鄰像素之間相關(guān)性很大，有很大的信息冗余，稱為。4.多媒體應(yīng)用系統(tǒng)的開發(fā)一

3、般包括下列幾個(gè)步驟：確定;明確;準(zhǔn)備;集成一個(gè)多媒體應(yīng)用系統(tǒng)。5.OCR軟件的功能是將轉(zhuǎn)換為。6.多媒體數(shù)據(jù)庫管理系統(tǒng)的層次結(jié)構(gòu)可以分為三層：、和存儲層。1.開發(fā)系統(tǒng)、演示系統(tǒng)、培訓(xùn)系統(tǒng)2.DIB、BMPPCXTIFF3.空域相關(guān)4.使用對象、開發(fā)方法、多媒體數(shù)據(jù)5.圖化的文字、電子文檔6.表示層、概念層奔媒體皿信技術(shù)練習(xí)醒B誓率，|打飛'fh-rr-fli"Jf：V箕閆i工<-I有I：干.3 .%Jr：.'，1I''.卜rpl-I'i：.L-frF'AI.:>-門心，J'SIM4 .VOL*珈當(dāng):9則上小戒.一代卜

4、是電鍍4TLKW1上WLlGE-H一的“掛i1呻1. ，Jbfi"6蟲J計(jì)丘型性：的+切沖-H甲F為口PL=.6的，*i*rviTT>接口K4T1>T讓4斤外部酶T接inqtEmw”“舊打箱MgMsus.它/她定不kJ泉咕ill廣田和II*L江掖gill墩硼硼件及觸則幡輸?shù)陌碔：必通.蟲在I:玄打HP點(diǎn)H|l放.11戶詰本階1"“做L碼|幢”W檔全寸HJI轉(zhuǎn)諸用戶國d垓內(nèi)視頻內(nèi)行.各門力個(gè)川廣陽MlMHF白麥n.陽.喝川H若"X枕Gr。一郵為f也孑/不學(xué)於心個(gè)fLI曲印3訛用見試上，”口.叫,從和臨僚於之川一的相關(guān)性和“力的L匕如，命假量的猊度或西色佑

5、號，數(shù)華"愴的像水總足L3以我近的.I除V處丁可界伏那么.上fU像素的強(qiáng)3血制俏作i”的做他花可以JHlidIAI出】見的像才工的friM打慢洲，的I個(gè)覦州曲芹向安向Hi，舊測仍過霜小外.對譚個(gè)花M進(jìn)行餃陽，傳話.一乂種編日”法就庭W1與與如嗎力法.4-撞麟個(gè)蝴小山書的叫西山丁只干小卉的行由1月g電松林為掩麟口前古林為枝幃喉聲77,宿#稱為梅融聲77.三.內(nèi)防對錯(cuò)井改正>Xji.，吮咖坳#%足杓卜！I.肥討利天你）匚全:唐nj工綿眄打江.XI/.件小啦-L只燈以超七圖像件壓縮7U-&右.（-右息中就柄心白如收,處山舊笈小.1L城的加”芋及樂/rtWA變摭.爪嘴.心帕.的

6、門Aa>也描“<X1J4.IB或人而統(tǒng)史化M人里的聯(lián)AH臼恬結(jié)構(gòu).姬月向宓的看，尋.它聚川壇狄納曲穌映慶狀信息(Q)5./1.計(jì)/業(yè)系優(yōu)的衣物數(shù)卻，體和小徐“數(shù)期仄你會獨(dú)成汽頻質(zhì)母的卜隆.四、問答S11>數(shù)翔壓縮技術(shù)的三個(gè)土安指標(biāo)是什么z竹：數(shù)川H、縮技術(shù)門三二個(gè)耍指小小.一任卜I，縮雨后例而的佰總,他量之L匕耍入：一圮實(shí)現(xiàn)小縮的訴法次笳中.小縮、角縮i逆反快.KF他，也做刃實(shí)小門卜縮和豺日縮：足恢攵效Ui詠女/變盡向能地完全恢乂原始數(shù)如2、敷孚電視系統(tǒng)中使用的關(guān)技術(shù)有噴些7看數(shù)字也理票院中儀:川MXJ卷技4U從壽.右®r/仄編H&|i.受投券iR”&

7、;術(shù).現(xiàn)貨:加權(quán)技術(shù).閂注2預(yù)處1邛，“二處用技術(shù)和名儲U川技術(shù).由文狽分ZJIjCFOA1等.3 .同建育燈(卡的主整功陋.分，<I)在恢的呆制,播放:2)綢軌匕合1發(fā)，<3>MIDI接L1和a"合成：(4)文語M報(bào)和語，；識別：<5)OO-RONl1ftL-J：<<>)M戍MT女字.Mini系統(tǒng)實(shí)卬在是個(gè)外由1、rtdUK,也松擬的滋分系統(tǒng).4 ,機(jī)項(xiàng)紙股JUl必咋功能？ 通信功他：川廣終斌一信總中心.采用不對稱雙向化檢方式 人機(jī)全力檸制功他，通過泌松牌實(shí)現(xiàn) 信“的科力他,必須發(fā)捋MFEG7.MI>EG-2言視頻估息物碼.根井:需要

8、還可文特JPEG、H.261.H.263.MPEG-4等標(biāo)？f1. 儲總必不功徒：2的vg八和視頻愉山松Ij,他顯小茱中.靜止圖像及修標(biāo).m頂普啟總.5 .數(shù)據(jù)壓縮技術(shù)的三個(gè)主襄指標(biāo)是什么？n：數(shù)據(jù)壓縮技術(shù)仃：個(gè)主婪指標(biāo).是壓縮前后所需的信總體顯之比要入：是實(shí)I見壓縮的反法變簡單.正墻.冊壓埔速度快.盡可能地做旬實(shí)時(shí)壓縮和解壓縮；三足恢更效果要纖.要盡切能地完全恢&原始數(shù)則。6 .數(shù)字電視系統(tǒng)中使用的關(guān)悅技術(shù)有哪些？在數(shù)字電理系詵中使川的X鍵技術(shù)HIW(數(shù)字樂緯技術(shù)、變換加色技術(shù).視覺加I權(quán)技、門適應(yīng)恢處山！“信處H!技術(shù)和七照MJU技系、”爻須分。bL>M號.7、筒述音頻卡的主

9、要功能.符：61)洋頻體J圾。列八才南飲：<2>緋戊：<3):V1IDI拉一和京樂今，戊：(4)義語也4央不口語言號！另人15) C?O-RC)IVI按II*(G)淞戲林核II衿.niioi系紂匕實(shí)卬濃JJ,個(gè)作出I、nd.iti/松捫打內(nèi)1寅會系統(tǒng)。o2.請畫出DPCM系統(tǒng)的原理框圖|自胃等|_一|信定|-I卜三G。3.什么是圖彳象的數(shù)字彳七？四住的數(shù)字彳七的過程是怎木羊的2簡要說明。O將亮度的變化是連續(xù)的梭拉國象轉(zhuǎn)化為由一系列雨散數(shù)據(jù)所表示的數(shù)字圖象的過程O稱為圖鍬的數(shù)字化。過程包括：抽小節(jié)和罹Y匕。M連續(xù)變化的橫擦國函敷r（x,y）的空間連續(xù)坐標(biāo)（x,y）進(jìn)行闌散化處理

10、的M立程相，為采材.來底后，把連續(xù)變彳匕的圖儂函數(shù)f（x,y）Hj毋個(gè)離散.奴（保率）的亮度（頗色）彳直.用數(shù)字量來表示的過程材：為星化。1 .七媒體HWUJL的工心壯術(shù)S）答：各媒體計(jì)mHL理例次的XJ建技術(shù)是；HIMAMff；弓3"，支術(shù).再雙體HMH，加以打帆叫技術(shù)、袍切1冷荻數(shù)撲:的山雨處JM和佐及.視切；匕板戲甥的除出核術(shù).2 .同坯1由泗城0的玷不如到"d）鈴：似測始的也現(xiàn)是從Ml臨像水之問行劃心和共心行點(diǎn)書.七的.比如之加像本仙火/熨以物色信號.垃伯上JJL才II臨的俯樂4星I化較極近的,降正處邊界狀擊.叩久.當(dāng)前像布帕米煥rar色信號的敷值就可以用*rmtu

11、現(xiàn)的位進(jìn)行澗立筲到I個(gè)m洲伯開米>實(shí)斤mi削m他洱行亦華.對玷個(gè)冷（門邊行縹;四.達(dá)科£中）方認(rèn)就星利U則編的方力一3 .K=i!1的】例力儲（I）衿；齊力碩k伯I登，力能外；網(wǎng)!的錄WJrj據(jù)成；8的過與子（成；M1I>1撼II及義再科換；C4>CDROM抗口及游戲忙口等.4 .對呼的娶媒體系統(tǒng)設(shè)計(jì)做刈外答，取巾的iQil而削s？鰥體制通儕助他的中獨(dú)的次或Ja*中轉(zhuǎn)次，懷於州桐Klit和口為Y1I結(jié)介*把多叫作血血信技術(shù)微網(wǎng)CPU也片中5 .mr“I做物的創(chuàng)件源冏彳6Yr：由手11情物的向n沛.FJ為：JWVIIM加分柘.加小片。、iQi+|L*?.各中|，&qu

12、ot;休班琳H，缶.仙件令成.惻認(rèn).六,簡若MPEG標(biāo)準(zhǔn)系列已仃哪。匕壓箱標(biāo)淮？分別活介于什么做川？C10分）MPEG7林準(zhǔn)的UK比以的1.5Mbit/s的骨率上輸電視順民的視頻信號rMPEG-2M準(zhǔn)克微井鼾決了MPEGI標(biāo)沖不能泌足的H面增長的多媒體儀術(shù)、敬中電視技術(shù)、多娓體分評率和化彳俞率等力向技術(shù)要求的缺餡:MPF.G4是步媒體借息描述的最新標(biāo)洪.它所涉及的雙川池崎包括仃線通訊、無線通訊、移動通行T和因特M符領(lǐng)域，UPEG4把以內(nèi)容為中心的描述方法。四、簡答：非媒體位術(shù)研先的內(nèi)容13dM哪些245分）寶綜體共小附兄（Yjf內(nèi)宣也新媒體仁媒體處刊“史術(shù)數(shù)叫J.嘛拄術(shù).名媒體4次史竹邛一拉小

13、.分媒體如fT系統(tǒng)收術(shù),分雙休伍總tt訓(xùn)技木.彩雙體WJtfi3分柞JBJ村收木0五.簡若sil$7叫分”UAL向N120x9。分涉#21<“支影也數(shù)7行觸小小縮的數(shù)Wirt1上再少?»附"叨“經(jīng)過力丫（5分2x60x25x120x9（）x24/X97.200.OOOR97.2MB八，茴將,U久任基丁內(nèi)在槍至？曲娃多媒體基內(nèi)容險(xiǎn)卷的過柑Y基于內(nèi)存核*的工翦指早卜內(nèi)存檢*足從艱小數(shù)1K中舐J卬H君定的后氏跳會,褊后根弼達(dá)普版俞從人aff儲點(diǎn)題據(jù)岸中的媒體中班行在捷.樟*at具有福母轉(zhuǎn)桿的母體數(shù)林;一前令媒體融如i來晚.每一種駕幃?dāng)?shù)揶郴LL/蠟以用符號化方法描述的信息魂索

14、.媒體的內(nèi)容語義工法I分捕喻.所皮驍采用相似性的匹配方法.莘士內(nèi)均檢索是一個(gè)斑拉求相2，J小二草本驟包括1J初像檢索說叫；用文好1髓*時(shí)，要形成個(gè)檢能的格屁祖Mn用或耨定的門詢用聘朱陪MUt2）41M以色一1小瞠；相於特征14中的村征按同一定的匹里滂法曲江匹配.膈足一定相似性的一加帔儂玷梟接相似收入小學(xué)1劑返加納JMJL忖川廣對柔統(tǒng)返回的劃滿足初始特枕的檢索結(jié)果避打潮爐.但dHI訥意的里果.除融過稈宛限1遍,M攸也”,小中選擇價(jià)M褶近的小網(wǎng)，也人的卅脾性，那小出成個(gè)新熊查珈史新檢嗡：通毋觸小內(nèi)加他FH.不新開始“口利用戶油W0符句前京的TT的外來時(shí)為ilk于內(nèi)鞘檢市的寸斤標(biāo)用育全率SrecHl

15、l；和方沛率fpreciKian）來融示.立金率至指數(shù)期摩中所書的位芯對處是再部0列了.宜誰率是指存列的時(shí)承是司都是在罐弛a均用直分出來,示.七、簡誓；為什么褊要多媒件著作工具？列舉幾個(gè)里地的多媒體著作T具軟付并分削疥出其.理創(chuàng)作庫式？105?）.而常川寐序設(shè)怔多媒體向H1索維比早期的喜媒體應(yīng)JH軟fl的制作，k缶掛依賴和Jr-語言股il算機(jī)族用條統(tǒng)的開發(fā)要難得名一為廣制效地提扁升發(fā)竄媒體應(yīng)用系統(tǒng)的質(zhì)量和速度.人們把注意力放在適合各種開發(fā)需曹的多媒體著作工具上，通過這些多媒體著作工具，使得普而應(yīng)用領(lǐng)域的開名人員也腓謔前如率用制件出jE竽幅可弓亞麗寺很體附小雜統(tǒng)舊丁泊二媒休喜作.IIfjMaci

16、vimcdiaAcrion-Muci-omahiiAuihunvare.MacromeJiaDirecicr,TbolBook.MST'owcrP5nL1.多媒體技術(shù)的主要特性有（D ）。(1)多樣性 （2）集成性 （3）交互性 （4）實(shí)時(shí)性A.僅（1） B. （1） （2） C. （1(2) (3) D.全部2.一般認(rèn)為，多媒體技術(shù)研究的興起,B ）開始。A.1972年，Philips 展示播放電視節(jié)目的激光視盤B.1984年，美國Apple公司推出 Macintosh系統(tǒng)機(jī)C.1986年，Philips 和Sony公司宣布發(fā)明了交互式光盤系統(tǒng)CD-I D.1987年，美國RCA么司

17、展示了交互式數(shù)字視頻系統(tǒng)DVI 3.請根據(jù)多媒體的特性判斷以下哪些屬于多媒體的范疇（ B）o （1）交互式視頻游戲（2）有聲圖書（3）彩色畫報(bào)（4彩色電視A.僅（1）B.(1), (2) C. (1), (2)(3) D. 全部4.超文本是一個(gè)（B）結(jié)構(gòu)。A.順序的樹形B.非線性的網(wǎng)狀C.線性的層次D.隨機(jī)的鏈?zhǔn)?.兩分鐘雙聲道、16位采樣位數(shù)、22.05kHz采樣頻率聲音的不壓縮的數(shù)據(jù)量是（A）oA.10.09MBB.10.58MBC.10.35KBD.5.05MB6.什么時(shí)候需要使用 MIDI, （B ）。（1）沒有足夠的硬盤存儲波形文件時(shí)（2）用音樂伴音，而對音樂質(zhì)量的要求又不是很高時(shí)（

18、3）想連續(xù)播放音樂時(shí)（4）想音樂質(zhì)量更好時(shí) A.僅(1) B. (1), (2) C. (1), (2), (3) D.全部7 .下述聲音分類中質(zhì)量最好的是（A ）o A.數(shù)字激光唱盤 B.調(diào)頻無線電廣播C.調(diào)幅無線電廣播D. 電話8 .在數(shù)字視頻信息獲取與處理過程中,下述順序（C ）是正確的。A.A/D變換、采樣、壓縮、存儲、解壓縮、D/A變換B.采樣、壓縮、A/D變換、存儲、解壓縮、D/A變換C.采樣、A/D變換、壓縮、存儲、解壓縮、D/A變換D.采樣、D/A變換、壓縮、存儲、解壓縮、A/D變換9.下列關(guān)于Premiere軟件的描述（C ）是正確的。（1） Premiere軟件與Photo

19、shop軟件是一家公司的產(chǎn)品（2） Premiere可以將多種媒體數(shù)據(jù)綜合集成為一個(gè)視頻文件(3)Premiere具有多種活動圖像的特技處理功能（4） Premiere 是一個(gè)專業(yè)化的動畫與數(shù)字視頻處理軟件 A. （1）, （3） B.(2), (4)C.(1),，(3)D.全部10.下列多媒體創(chuàng)作工具（B ）是屬于以時(shí)間為基礎(chǔ)的著作工具。(1)Macromedia Authorware(2) Macromedia Action(3) Tool Book(4) Macromedia Director A.(1)(3) B.(2),(4) C.(1),(2), (3)D.全部11 .下列（B ）

20、是Author ware 的功能特點(diǎn)（1）跨平臺體系結(jié)構(gòu)（2）高效的多媒體集成環(huán)境（3）面向?qū)ο蟮哪_本語言Lingo (4)靈活的交互方式 A. (1),(3), (4) B.(1),(2), (4)C.(1), (2) , (3)D.全部12 .數(shù)字視頻的重要性體現(xiàn)在（C ）（1）可以用新的與眾不同的方法對視頻進(jìn)行創(chuàng)造性編輯（2）可以不失真地進(jìn)行無限次拷貝（3）可以用計(jì)算機(jī)播放電影節(jié)目(4)易于存儲 A.僅(1) B. (1), (2)C.，(2), (3)D.全部13.要使CD-ROM區(qū)動器正常工作，必須有（B ）軟件（1）該驅(qū)動器裝置的驅(qū)動程序(2) Microsoft 的 CD-ROM

21、JT展軟件（3）CD-ROM試軟件（4）CD-ROM用軟件A.僅（1）B.（1）,（2）C.（1）,（2）,（3）D.全部14.下列關(guān)于數(shù)碼相機(jī)的敘述（C）是正確的。（1）數(shù)碼相機(jī)的關(guān)鍵部件是CCD（2）數(shù)碼相機(jī)有內(nèi)部存儲介質(zhì)（3）數(shù)碼相機(jī)拍照的圖像可以通過串行口、SCSI或USBg口送到計(jì)算機(jī)（4）數(shù)碼相機(jī)輸出的是數(shù)字或模擬數(shù)據(jù)A.僅（1）B.（1）,（2）C.（1）,（2）,（3）D.全部15.多媒體的引入，對多媒體數(shù)據(jù)庫會產(chǎn)生的影響是（B（1）影響數(shù)據(jù)庫的組織和存儲方法（2）種類繁多的媒體類型，增加了數(shù)據(jù)處理的困難（3）改變了數(shù)據(jù)庫的操作形式，其中最重要的是查詢機(jī)制和查詢方法，但不改變數(shù)

22、據(jù)庫的接口（4）必須增加處理長事務(wù)的能力A.（1）,（2）,（3）B.（1）,（2）,（4）C.（2）,（3）,（4）D.全部圖形和圖像的區(qū)別:.答：圖形一般指用計(jì)算機(jī)繪制的畫面，如直線、圓、圓弧、任意曲線和圖表等；圖像則是指由輸入設(shè)備捕捉的實(shí)際場景畫面或以數(shù)字化形式存儲的任意畫面。圖像都是由一些排成行列的像素組成的，一般數(shù)據(jù)量都較大。而圖形文件中只記錄生成圖的算法和圖上的某些特征點(diǎn)，也稱矢量圖。相對于位圖的大數(shù)據(jù)量來說，它占用的存儲空間較小。（解答時(shí)需從產(chǎn)生方法、組成、數(shù)據(jù)量等方面比較。）什么是變換編碼？變換編碼是將通常在空間域描寫的圖像信號，變換到另外一些正交矢量空間（即變換域）中進(jìn)行描寫

23、，而且通過選擇合適的變換關(guān)系使變換域中描寫的各信號分量之間相關(guān)性很小或者互不相關(guān)，從而達(dá)到數(shù)據(jù)壓縮的目的.說明多媒體創(chuàng)作工具的類型與特征：基于多媒體創(chuàng)作工具的創(chuàng)作方法和結(jié)構(gòu)特點(diǎn)的不同，可將其劃分為如下幾類：（1）基于時(shí)間的創(chuàng)作工具；（2）基于圖標(biāo)或流線的創(chuàng)作工具；（3）基于卡片或頁面的工具；（4）以傳統(tǒng)程序語言為基礎(chǔ)的多媒體創(chuàng)作工具。第1章緒論1、根據(jù)國際電聯(lián)（ITU-T）的定義，媒體共有五類：感覺媒體、表示媒體、顯示媒體、存儲媒體、傳輸媒體2、多媒體系統(tǒng)和多種媒體系統(tǒng)是不同的，多媒體系統(tǒng)中的媒體相互之間是有關(guān)聯(lián)的，是以時(shí)空同步的方式存在的；而多種媒體系統(tǒng)中媒體與媒體之間可以是毫無關(guān)系的。兩者

24、的重要區(qū)別在于媒體間的同步性。3、多媒體技術(shù)所涉及的媒體特指表示媒體，而且主要是指數(shù)字表示媒體。因此，也可以說多媒體就是多樣化的數(shù)字表示媒體。和多媒體概念相對應(yīng)的是單媒體，以往的信息技術(shù)基本上是以單媒體的方式進(jìn)行的，如音樂、廣播、電視等媒體技術(shù)大多都是如此。人們在獲取、處理和交流信息時(shí)，最自然的形態(tài)是以多媒體方式進(jìn)行的，往往表現(xiàn)為視覺、聽覺、嗅覺等感覺器官的并用。由此可見，單媒體方式難以滿足人們對信息交流和處理的要求，而多媒體方式能和人們的自然交流及處理信息的方式達(dá)到最好的匹配。4、多媒體通信的迅速發(fā)展主要得力于下列五項(xiàng)技術(shù)的發(fā)展：（1）隨著信息高速公路的興起和發(fā)展，傳統(tǒng)的單一媒體（如數(shù)據(jù)）通

25、信已難以適應(yīng)當(dāng)今多元化信息的發(fā)展需求，用戶希望從傳送的消息中獲取更加生動豐富的信息，即圖、文、聲并茂的信息。雖然這不算技術(shù)因素，但它卻是非常重要的市場需求的原動力。（2）高速設(shè)備、大容量存儲裝置、高性能計(jì)算機(jī)、多媒體工作站等為多媒體通信技術(shù)的發(fā)展奠定了良好的物質(zhì)基礎(chǔ)。（3）廣域網(wǎng)（WAN、城域網(wǎng)（MAN、局域網(wǎng)（LAN）、寬帶綜合業(yè)務(wù)數(shù)字網(wǎng)（BISDN）、分布式光纖數(shù)字接口（FDDI）和異步轉(zhuǎn)移模式（ATM的開發(fā)應(yīng)用已取得不少成功經(jīng)驗(yàn)。（4）通信技術(shù)，如個(gè)人通信、光纖通信、移動通信等已取得長足的進(jìn)步。這些都為多媒體通信提供了物理支撐環(huán)境。（5）語音識別與處理，文字語音合成，聲音數(shù)據(jù)壓縮，圖像識

26、別與處理，文字，數(shù)據(jù)、聲音和圖像在通信全過程中的同步、實(shí)時(shí)性要求和協(xié)同操作等信息處理方面的研究也取得不少有益的經(jīng)驗(yàn)和成果。這些都為多媒體通信的興起和發(fā)展奠定了良好的理論和實(shí)踐基礎(chǔ)。5、多媒體通信的特征：集成性、交互性、同步性6、提出建議和制定多媒體標(biāo)準(zhǔn)的組織很多，主要為ITU-T（國際電信聯(lián)盟電信標(biāo)準(zhǔn)部）、ISO（國際標(biāo)準(zhǔn)化組織）和IEC（國際電子技術(shù)委員會）三個(gè)機(jī)構(gòu)。7、多媒體通信的關(guān)鍵技術(shù)：多媒體信息處理技術(shù)、多媒體通信的網(wǎng)絡(luò)技術(shù)、多媒體通信的終端技術(shù)、移動多媒體通信的信息傳輸技術(shù)、多媒體數(shù)據(jù)庫技術(shù)第2章多媒體信息處理的必要性和可行性1、多媒體信息主要有三個(gè)特征：（1）數(shù)據(jù)量龐大（2）碼率

27、可變、突發(fā)性強(qiáng)（3）復(fù)合性信息多，同步性、實(shí)時(shí)性要求高2、信息壓縮的可行性1.空間冗余空間冗余是在圖像數(shù)據(jù)中經(jīng)常存在的一種冗余。在任何一幅圖像中，均有許多灰度或顏色都相同的鄰近像素組成的局部區(qū)域，它們形成了一個(gè)性質(zhì)相同的集合塊，即它們之間具有空間（或空域）上的強(qiáng)相關(guān)性，在圖像中就表現(xiàn)為空間冗余。2.時(shí)間冗余時(shí)間冗余是活動圖像和語音數(shù)據(jù)中經(jīng)常包含的冗余?；顒訄D像中的兩幅相鄰的圖像有較大的相關(guān)性，這反映為時(shí)間冗余。同理，在語音中，由于人在說話時(shí)其發(fā)出的音頻是一個(gè)連續(xù)和漸變的過程，而不是一個(gè)完全的時(shí)間上獨(dú)立的過程，因而存在著時(shí)間冗余。3.信息燧冗余（編碼冗余）所謂信息燧，是指數(shù)據(jù)所帶的信息量。信息量

28、是指從N個(gè)相等可能事件中選出一個(gè)事件所需要的信息度量或含量，即在N個(gè)事件中辨識一個(gè)特定事件的過程中需要提問“是”或“否”的最少次數(shù)。4.結(jié)構(gòu)冗余5.知識冗余人們通過認(rèn)識世界而得到某些圖像所具有的先驗(yàn)知識和背景知識，由此帶來的冗余稱為知識冗余。6.視覺冗余在多媒體技術(shù)的應(yīng)用領(lǐng)域中，人的眼睛是圖像信息的接收端。而人類的視覺系統(tǒng)并不能對圖像畫面的任何變化都能感覺到，視覺系統(tǒng)對于圖像場的注意是非均勻和非線性的，即注意主要部分質(zhì)量，同時(shí)取畫面的整體效果，不拘泥每一個(gè)細(xì)節(jié)。例如，人的視覺對于圖像邊緣的急劇變化不敏感，對圖像的亮度信息敏感，對顏色的分辨率較弱等。7.其他冗余多媒體數(shù)據(jù)除了具有上面所說的各種冗

29、余外，還存在一些其他的冗余類型。例如，圖像的空間非定常特性所帶來的冗余等?？臻g冗余和時(shí)間冗余是將圖像信號看作為隨機(jī)信號時(shí)所反映出的統(tǒng)計(jì)特征，因此有時(shí)把這兩種冗余稱為統(tǒng)計(jì)冗余。它們也是多媒體圖像數(shù)據(jù)處理中兩種最主要的數(shù)據(jù)冗余。3、數(shù)據(jù)壓縮技術(shù)的性能指標(biāo)1.壓縮比壓縮性能常常用壓縮比來定義，也就是壓縮過程中輸入數(shù)據(jù)量和輸出數(shù)據(jù)量之比。壓縮比越大，說明數(shù)據(jù)壓縮的程度越高。在實(shí)際應(yīng)用中，壓縮比可以定義為比特流中每個(gè)樣點(diǎn)所需要的比特?cái)?shù)。2.重現(xiàn)質(zhì)量重現(xiàn)質(zhì)量是指比較重現(xiàn)時(shí)的圖像、聲音信號與原始圖像、聲音之間有多少失真，這與壓縮的類型有關(guān)。壓縮方法可以分為無損壓縮和有損壓縮。無損壓縮是指壓縮和解壓縮過程中沒

30、有損失原始圖像或聲音的信息，所以對無損系統(tǒng)不必?fù)?dān)心重現(xiàn)質(zhì)量。有損壓縮雖然可獲得較大的壓縮比，但壓縮比過高，還原后的圖像、聲音質(zhì)量就可能降低。3.壓縮和解壓縮的速度壓縮與解壓縮的速度是兩項(xiàng)單獨(dú)的性能度量。有些應(yīng)用中，壓縮與解壓縮都需要實(shí)時(shí)進(jìn)行，這稱為對稱壓縮，如電視會議的圖像傳輸；在有些應(yīng)用中，壓縮可以用非實(shí)時(shí)壓縮，而只要解壓縮是實(shí)時(shí)的，這種壓縮稱為非對稱壓縮，如多媒體CD-ROM勺節(jié)目制作。從目前開發(fā)的壓縮技術(shù)看，一般壓縮的計(jì)算量比解壓縮要大。在靜止圖像中，壓縮速度沒有解壓縮速度要求嚴(yán)格。但對于動態(tài)視頻的壓縮與解壓縮，速度問題是至關(guān)重要的。動態(tài)視頻為保證幀間動作變化的連貫要求，必須有較高的幀速

31、。對于大多數(shù)情況來說動態(tài)視頻至少為15幀/s,而全動態(tài)視頻則要求有25幀/s或30幀/s。因此，壓縮和解壓縮速度的快慢直接影響實(shí)時(shí)圖像通信的完成。第3章音頻信息處理技術(shù)1、掩蔽效應(yīng)受四種要素的影響：時(shí)間、頻率、聲壓級、聲音品質(zhì)2、音頻信號的數(shù)字化過程就是將模擬音頻信號轉(zhuǎn)換成有限個(gè)數(shù)字表示的離散序列，即數(shù)字音頻序列，在這一處理過程中涉及到模擬音頻信號的采樣、量化和編碼。3、音頻信息編碼技術(shù)可分為三類：（1）波形編碼。這種方法主要基于語音波形預(yù)測，它力圖使重建的語音波形保持原信號的波形狀態(tài)。它的優(yōu)點(diǎn)是編碼方法簡單、易于實(shí)現(xiàn)、適應(yīng)能力強(qiáng)、語音質(zhì)量好等，缺點(diǎn)是壓縮比相對來說較低，需要較高的編碼速率。常

32、用的波形法編碼技術(shù)有增量調(diào)制（DM）、自適應(yīng)差分脈沖編碼調(diào)制（ADPC口子帶編碼（SBC）和矢量量化編碼（VQ等等。（2）參數(shù)編碼。這種方法主要基于參數(shù)的編碼方法。與波形編碼不同的是，這類編碼方法通過語音信號的數(shù)學(xué)模型對語音信號特征參數(shù)（主要是指表征聲門振動的激勵(lì)參數(shù)和表征聲道特性的聲道參數(shù)）進(jìn)行提取及編碼，力圖使重建的語音信號盡可能保持原信號的語意，而重建的語音信號波形同原信號的波形可能會有較大的區(qū)別?；谶@種編碼技術(shù)的編碼系統(tǒng)一般稱為聲碼器，它主要用于在窄帶信道上提供4.8kb/s以下的低速語音通信和一些對延時(shí)要求較寬的應(yīng)用場合（如衛(wèi)星通信等）。最常用的參數(shù)編碼法為線性預(yù)測編碼（LPC）。

33、（3）混合編碼。這種方法克服了原有波形編碼與參數(shù)編碼的弱點(diǎn)，并且結(jié)合了波形編碼的高質(zhì)量和參數(shù)編碼的低數(shù)據(jù)率，取得了比較好的效果。混合編碼是指同時(shí)使用兩種或兩種以上的編碼方法進(jìn)行編碼的過程。由于每種編碼方法都有自己的優(yōu)勢和不足，若是用兩種，甚至兩種以上的編碼方法進(jìn)行編碼，可以優(yōu)勢互補(bǔ)，克服各自的不足，從而達(dá)到高效數(shù)據(jù)壓縮的目的。無論是在音頻信號的數(shù)據(jù)壓縮中，還是后面章節(jié)將要描述的圖像信號的數(shù)據(jù)壓縮中，混合編碼均被廣泛采用。4增量調(diào)制1.一般增量調(diào)制當(dāng)輸入信號變化比較快時(shí)，編碼器的輸出無法跟上信號的變化，從而會使重建的模擬信號發(fā)生畸變，這就是所謂的“斜率過載”。當(dāng)輸入信號沒有變化時(shí)，預(yù)測信號和輸入

34、信號的差會十分接近，這時(shí)，編碼器的輸出是0和1交替出現(xiàn)的，這種現(xiàn)象就叫做增量調(diào)制的“散粒噪聲”。2.自適應(yīng)增量調(diào)制（ADM為減少斜率過載，希望增加階距；為減少散粒噪聲，又希望減少階距。5、自適應(yīng)差分脈沖編碼調(diào)制6、子帶編碼7、變換域編碼通過變換域編碼方法，將輸入信號直接轉(zhuǎn)換到頻域，然后在頻域劃分各頻段，根據(jù)不同的頻段能量大小分配碼字然后編碼，收方解碼后再用相應(yīng)的反變換轉(zhuǎn)換成時(shí)域信號。8、矢量量化矢量量化VQ（VectorQuantization）是一種有損的編碼方案，其主要思想是將輸入的語音信號按一定方式分組，把這些分組數(shù)據(jù)看成一個(gè)矢量，對它進(jìn)行量化。9、線性預(yù)測編碼線性預(yù)測編碼（LPC）方法

35、為參數(shù)編碼方式。參數(shù)編碼的基礎(chǔ)是人類語音的生成模型，通過這個(gè)模型，提取語音的特征參數(shù)，然后對特征參數(shù)進(jìn)行編碼傳輸。第4章圖像信息處理技術(shù)1、圖像信號按其內(nèi)容變化與時(shí)間的關(guān)系來分，主要包括靜態(tài)圖像和動態(tài)圖像兩種。圖像分類還可以按其他方式進(jìn)行：如按其亮度等級的不同可分為二值圖像和灰度圖像；按其色調(diào)的不同可分為黑白圖像和彩色圖像；按其所占空間的維數(shù)不同可分為平面的二維圖像和立體的三維圖像等等。（1）.彩色圖像信號的分量表示。常用的彩色空間表示法有YUVYIQ和YCbCr等。A、YUV彩色空間。YUV色空間的一個(gè)優(yōu)點(diǎn)是，它的亮度信號丫和色差信號U、V是相互獨(dú)立的，即丫信號分量構(gòu)成的黑白灰度圖與用U、V

36、兩個(gè)色彩分量信號構(gòu)成的兩幅單色圖是相互獨(dú)立的。因?yàn)閅UV是獨(dú)立的，所以可以對這些單色圖分別進(jìn)行編碼。此外，利用YUV之間的獨(dú)立性解決了彩色電視機(jī)與黑白電視機(jī)的兼容問題。YUV表示法的另一個(gè)優(yōu)點(diǎn)是，可以利用人眼的視覺特性來降低數(shù)字彩色圖像的數(shù)據(jù)量。人眼對彩色圖像細(xì)節(jié)的分辨能力比對黑白圖像細(xì)節(jié)的分辨能力低得多，因此就可以降低彩色分量的分辨率而不會明顯影響圖像質(zhì)量，即可以把幾個(gè)相同像素不同的色彩值當(dāng)做相同的色彩值來處理（即大面積著色原理）,從而減少了所需的數(shù)據(jù)量。在PAL彩色電視制式中，亮度信號的帶寬為4.43MHz,用以保證足夠的清晰度，而把色差信號的帶寬壓縮為1.3MHz,達(dá)到了減少帶寬的目的。

37、（2）.彩色圖像信號的分量編碼。目前分量編碼已經(jīng)成為圖像信號壓縮的主流，在20世紀(jì)90年代以來頒布的一系列圖像壓縮國際標(biāo)準(zhǔn)中均采用分量編碼方案。2、圖像信號數(shù)字化與音頻數(shù)字化一樣主要包括兩方面的內(nèi)容：取樣和量化。3、對均勻量化來講，量化分層越多，量化誤差越小，但編碼時(shí)占用比特?cái)?shù)就越多。4、數(shù)字圖像壓縮方法一般可分為：（1）可逆編碼（ReversibleCoding或InformationPreservingCoding）,也稱為無損壓縮。這種方法的解碼圖像與原始圖像嚴(yán)格相同，壓縮是完全可恢復(fù)的或無偏差的，無損壓縮不能提供較高的壓縮比。（2）不可逆編碼（Non-ReversibleCoding）

38、,也稱為有損壓縮。用這種方法恢復(fù)的圖像較原始圖像存在一定的誤差，但視覺效果一般是可接受的，它可提供較高的壓縮比。按照壓縮方法的原理，數(shù)字圖像壓縮方法可分為：（1）預(yù)測編碼（PredictiveCoding）。預(yù)測編碼是一種針對統(tǒng)計(jì)冗余進(jìn)行壓縮的方法，它主要是減少數(shù)據(jù)在空間和時(shí)間上的相關(guān)性，達(dá)到對數(shù)據(jù)的壓縮，是一種有失真的壓縮方法。預(yù)測編碼中典型的壓縮方法有DPCM和ADPC懵，它們比較適合于圖像數(shù)據(jù)的壓縮。（2）變換編碼（TransformCoding變換編碼也是一種針對統(tǒng)計(jì)冗余進(jìn)行壓縮的方法。這種方法將圖像光強(qiáng)矩陣（時(shí)域信號）變換到系數(shù)空間（頻域）上進(jìn)行處理。常用的正交變換有DFT（離散傅氏

39、變換）、DCT（離散余弦變換）、DST（離散正弦變換）、哈達(dá)碼變換和Karhunen-Loeve變換。（3）量化和矢量量化編碼（VectorQuantization量化和矢量量化編碼本質(zhì)上也還是一種針對統(tǒng)計(jì)冗余進(jìn)行壓縮的方法。當(dāng)我們對模擬量進(jìn)行數(shù)字化時(shí)，必然要經(jīng)歷一個(gè)量化的過程。在這里量化器的設(shè)計(jì)是一個(gè)很關(guān)鍵的步驟，量化器設(shè)計(jì)的好壞對于量化誤差的大小有直接的影響。矢量量化是相對于標(biāo)量量化而提出的，如果我們一次量化多個(gè)點(diǎn)，則稱為矢量量化。（4）信息燧編碼（EntropyCoding）。根據(jù)信息燧原理，用短的碼字表示出現(xiàn)概率大的信息，用長的碼字表示出現(xiàn)概率小的信息。常見的方法有哈夫曼編碼、游程編碼

40、以及算術(shù)編碼。（5）子帶編碼（Sub-bandCoding）。子帶編碼將圖像數(shù)據(jù)變換到頻域后，按頻率分帶，然后用不同的量化器進(jìn)行量化，從而達(dá)到最優(yōu)的組合。或者是分步漸近編碼，在初始時(shí)對某一頻帶的信號進(jìn)行解碼，然后逐漸擴(kuò)展到所有頻帶，隨著解碼數(shù)據(jù)的增加，解碼圖像也逐漸地清晰起來。此方法對于遠(yuǎn)程圖像模糊查詢與檢索的應(yīng)用比較有效。（6）結(jié)構(gòu)編碼（StructureCoding）,也稱為第二代編碼（SecondGenerationCoding）。編碼時(shí)首先求出圖像中的邊界、輪廓、紋理等結(jié)構(gòu)特征參數(shù)，然后保存這些參數(shù)信息。解碼時(shí)根據(jù)結(jié)構(gòu)和參數(shù)信息進(jìn)行合成，從而恢復(fù)出原圖像。（7）基于知識白編碼（Know

41、ledge-BasedCoding對于人臉等可用規(guī)則描述圖像，利用人們對其的知識形成一個(gè)規(guī)則庫，據(jù)此將人臉的變化等特征用一些參數(shù)進(jìn)行描述，從而用參數(shù)加上模型就可以實(shí)現(xiàn)人臉的圖像編碼與解碼。圖像壓縮算法的總體框圖如圖4.3-1所示。5、圖像壓縮算法的總體框圖P68圖4.46、香農(nóng)信息論已證明：信源燧是進(jìn)行無失真編碼的理論極限。低于此極限的無失真編碼方法是不存在的，這是燧編碼的理論基礎(chǔ)。7、哈夫曼（Huffman）編碼方法1.編碼步驟（1）先將輸入灰度級按出現(xiàn)的概率由大到小順序排列（對概率相同的灰度級可以任意顛倒排列位置）。（2）將最小兩個(gè)概率相加，形成一個(gè)新的概率集合。再按第（1）步方法重排（此

42、時(shí)概率集合中概率個(gè)數(shù)已減少一個(gè)）。如此重復(fù)進(jìn)行，直到只有兩個(gè)概率為止。（3）分配碼字。碼字分配從最后一步開始反向進(jìn)行，對最后兩個(gè)概率一個(gè)賦予“1”碼，一個(gè)賦予“0”碼。如概率0.60賦予“0”碼，0.40賦予“1”碼（也可以將0.60賦予“1”碼，0.40賦予“0”碼）。如此反向進(jìn)行到開始的概率排列。在此過程中，若概率不變，則仍用原碼字。如圖4.5中第六步中概率0.40到第五步中仍用“1”碼。若概率分裂為兩個(gè)，其碼字前幾位碼元仍用原來的。碼字的最后一位碼元一個(gè)賦予“0”碼元，另一個(gè)賦予“1”碼元。如圖中第六步中概率0.60到第五步中分裂為0.37和0.23,則所得碼字分別為“00”和“01”。

43、2.前例哈夫曼編碼的編碼效率計(jì)算P728、DPC痛統(tǒng)的基本原理是指基于圖像中相鄰像素之間具有較強(qiáng)的相關(guān)性。在DPCM系統(tǒng)中會出現(xiàn)一些圖像降質(zhì)現(xiàn)象。理想的運(yùn)動補(bǔ)償預(yù)測編碼應(yīng)由以下四個(gè)步驟組成：（1）圖像劃分：將圖像劃分為靜止部分和運(yùn)動部分。（2）運(yùn)動檢測與估值：即檢測運(yùn)動的類型（平移、旋轉(zhuǎn)或縮放等），并對每一個(gè)運(yùn)動物體進(jìn)行運(yùn)動估計(jì)，找出運(yùn)動矢量。（3）運(yùn)動補(bǔ)償：利用運(yùn)動矢量建立處于前后幀的同一物體的空間位置對應(yīng)關(guān)系，即用運(yùn)動矢量進(jìn)行運(yùn)動補(bǔ)償預(yù)測。（4）預(yù)測編碼：對運(yùn)動補(bǔ)償后的預(yù)測誤差、運(yùn)動矢量等信息進(jìn)行編碼，作為傳送給接收端的信息。9、變換編碼不直接對原圖像信號壓縮編碼，而首先將圖像信號映射到另

44、一個(gè)域中，產(chǎn)生一組變換系數(shù)，然后對這些系數(shù)進(jìn)行量化、編碼、生輸。10、二值圖像壓縮標(biāo)準(zhǔn)圖像壓縮標(biāo)準(zhǔn)化工作主要由國際標(biāo)準(zhǔn)化組織(ISO).國際電工委員會(IEC)和國際電信聯(lián)盟(ITU-T)進(jìn)行LHJ-T先后制定了G3和G4標(biāo)準(zhǔn)，其中G3使用MR(ModifiedREAD)編碼算法。而G4是G3的改進(jìn)型，使用MMR(ModifiedMR)算法.目前，這兩種二值圖像壓縮標(biāo)準(zhǔn)廣泛地應(yīng)用于傳真通信和文檔存儲領(lǐng)域。雖然已有了優(yōu)秀的WR的G4標(biāo)準(zhǔn)，但還是要制定JBIG,其主要原因是要改進(jìn)二值中間色調(diào)圖像的壓縮性能.主要原因是G3/G4不適合于中間色調(diào)圖像.11、靜止圖像壓縮標(biāo)準(zhǔn)JPEGJPEG(Joint

45、PhotographicExpertsGroup)成立于1986年，該標(biāo)準(zhǔn)于1992年正式通過.JPEG標(biāo)準(zhǔn)的目標(biāo)和適應(yīng)性為：有多種操作模式可供設(shè)計(jì)和使用時(shí)選擇：無損壓縮編碼模式(LosslessEncodingMode).此種模式保證準(zhǔn)確恢復(fù)數(shù)字圖像的所有樣本數(shù)據(jù)，與原數(shù)字圖像相比不會產(chǎn)生任何失真.基于DCT的順序編碼模式(DCT-basedSequentialEncoding)。它以DCT變換為基礎(chǔ)，按照從左到右、從上到下的順序?qū)υ瓐D像數(shù)據(jù)進(jìn)行壓縮編碼。圖像還原時(shí)，也是按照上述順序進(jìn)行?；贒CT的累進(jìn)編碼亮式(DCT-basedProgressiveEncoding)。它也以DC1變換為

46、基礎(chǔ)，但使用多次掃描的方法對圖像數(shù)據(jù)進(jìn)行編碼，以由粗到細(xì)逐步累加方式進(jìn)行.解碼時(shí)，在屏幕上可以先看到圖像的大致面貌，然后逐步細(xì)化直到全部還原出來為止?；贒CT的分層編碼模式(DCT-basedHierarchicalEncoding).它以彩種分辨率進(jìn)行圖像編碼，先從低分辨率開始，逐步提高分辨率直到與原圖像分辨率相向?yàn)橹菇獯a時(shí)，重建圖像的過程也是如此，效果與基于DCT的累進(jìn)編碼模式類似，但處理更復(fù)雜，壓縮比可更高一些.1.無損壓縮編碼JPEG選擇了一種簡單的線性預(yù)測技術(shù)，即差分脈沖調(diào)制(DPCM)作為無損壓縮編碼的方法.這種方法簡單、易于實(shí)現(xiàn),重建的圖像質(zhì)量好2.基于DCT的順序編碼模式基于

47、DCT的順序編碼模式是，先對源圖像中的所有8X8子圖像進(jìn)行DCT變換，然后再對DCT系數(shù)進(jìn)行量化，并分別對量化以后的系數(shù)進(jìn)行差分編碼和游程長度編碼，最后再進(jìn)行編編碼。12、基于DCT的累進(jìn)編碼模式累進(jìn)編碼模式卻與順序模式有所不同，在這種模式中，雖然壓縮編碼的算法相同，但每個(gè)圖像分量的編碼要經(jīng)過多次掃描才能完成，每次掃描均傳輸一部分DCT量化系數(shù)13、JPEG的實(shí)現(xiàn)JPEG標(biāo)準(zhǔn)規(guī)定，JPEG算法結(jié)構(gòu)由三個(gè)主要部分組成：(1)獨(dú)立的無損壓縮編碼.(2)基本系統(tǒng).(3)擴(kuò)充系統(tǒng)。14、目前世界上模擬彩色電視有PAL、NTSC、SECAM三種不同制式15、MB是作運(yùn)動估計(jì)的基本單元，B是作DCT的基本

48、單元.16、MPEGT標(biāo)準(zhǔn)由系統(tǒng)部分、視頻部分和音頻部分組成.17、(1)幀內(nèi)畫面(Intrapictures,I)：以靜止圖像的壓縮進(jìn)行處理，全部信息都必須進(jìn)行傳送，并作為以后隨機(jī)存取的存取點(diǎn)。(2)預(yù)測畫面(PredictedPictures,P)：只對預(yù)測誤差信息進(jìn)行編碼后傳送，并作為進(jìn)一步預(yù)測的參數(shù)之用。(3)插補(bǔ)畫面(BidirectionalPredictedPictures.B)：以前面和后面的畫面進(jìn)行插值處理而褥到，本身不作為參考畫面使用,所以不必傳送，但需要傳送運(yùn)動補(bǔ)償信息。(4)片：由若干宏塊組成。一幀圖像中片的數(shù)目越多，則對處理誤碼越有利，就可以跳過這一片到下一片。但片越

49、多，編碼效率就越低。片是圖像再同步的基本單元。(5)宏塊：由4個(gè)8X8亮度塊和2個(gè)8X8色度塊組成。宏塊是運(yùn)動補(bǔ)償?shù)幕締卧?6)塊，無論是亮度坎還是色度塊都由8X8像素組成.它是作DCT的基本單元.第5章多媒體同步技術(shù)1、多媒體同步就是保持和維護(hù)各個(gè)媒體對象之間和各個(gè)媒體對象內(nèi)部存在的時(shí)態(tài)關(guān)系，多媒體同步的核心基礎(chǔ)是為這些同步關(guān)系建立一個(gè)獨(dú)立于實(shí)現(xiàn)環(huán)境的抽象的描述模型.多媒體同步規(guī)范描述了媒體對象之間和各個(gè)媒體對象內(nèi)部存在的時(shí)態(tài)關(guān)系，確定了多媒體的時(shí)態(tài)說明，是多媒體系統(tǒng)的重要組成部分.多媒體同步規(guī)范通常包括：媒體對象內(nèi)的同步、媒體對象之間的同步以及業(yè)務(wù)品質(zhì)QoS描述.多媒體同步控制機(jī)制是開發(fā)

50、各種同步控制策略以及同步控制協(xié)議，解決由于網(wǎng)絡(luò)延遲、抖動、進(jìn)程調(diào)度等各種不確定因素帶來的負(fù)面影響，實(shí)現(xiàn)多媒體同步規(guī)范描述的多媒體時(shí)態(tài)說明。2、同步的類型：上層同步、中層同步、底層同步3、媒體同步關(guān)系主要受以下因素的影響，媒體間時(shí)延偏移、網(wǎng)絡(luò)抖動、端系統(tǒng)抖動、時(shí)鐘漂移和網(wǎng)絡(luò)條件變化。由于各個(gè)相關(guān)媒體流可能來自不問的信源，每個(gè)信源所處的地理位置可能不同，每個(gè)媒體流選擇的信道也不同，因此各個(gè)媒體流的時(shí)延也不同，這就是媒體間的時(shí)延偏移，這些偏移使媒體間的時(shí)間關(guān)系發(fā)生變化.解決辦法可以通過在信宿端設(shè)置緩存加以補(bǔ)償，也可使各個(gè)媒體流在不同時(shí)刻發(fā)送，但須保證在經(jīng)歷了不同時(shí)延后能夠同時(shí)到達(dá)接收端.后者特別適合

51、存儲數(shù)據(jù)，能夠充分利用存儲數(shù)據(jù)的靈活性，大大節(jié)省信宿端緩存。此外還可以將這兩種方法配合使用。抖動定義為最大時(shí)延與最小時(shí)延的差，也即時(shí)延的變化。網(wǎng)絡(luò)抖動是指數(shù)據(jù)包從發(fā)送方到接收方網(wǎng)絡(luò)I/O設(shè)備的傳輸過程中所經(jīng)歷的時(shí)延變化，這是由中間節(jié)點(diǎn)的緩存引入的。端系統(tǒng)抖動是指端系統(tǒng)中引起的時(shí)延變化，這些變化主要是由于系統(tǒng)負(fù)荷的改變以及媒體單元在各個(gè)協(xié)議層的打包拆包。抖動通常是在信宿端通過采用彈性銀沖區(qū)來補(bǔ)償?shù)摹r(shí)鐘漂移的問題可以通過在網(wǎng)絡(luò)中使用時(shí)間同步協(xié)議來解決，例如，網(wǎng)絡(luò)時(shí)間協(xié)議(NTP)為它的用戶提供一個(gè)全網(wǎng)(虛擬)時(shí)鐘。網(wǎng)絡(luò)條件的變化不是由抖動引入的，它是指網(wǎng)絡(luò)連接性質(zhì)的壽化。例如.平均時(shí)延的測變成媒

52、體單元丟失率的增高。處理美失單元的同步機(jī)制是重用播映前一個(gè)媒體單元的內(nèi)容。4、目前較為流行的多媒體同步模型有三種：參考點(diǎn)同步模型、時(shí)間軸同步模型、層次同步模型.參考點(diǎn)同步模型的缺點(diǎn)是將連續(xù)媒體離散化，從而破壞了連續(xù)媒體之間的相互依賴關(guān)系，破壞了連續(xù)媒體的整體特性.在層次同步模型中，對多媒體同步進(jìn)行了分層處理，這樣有利于得到一個(gè)比較完善、較為通用的多媒體同步模型。1.邏輯數(shù)據(jù)單元（LDU2.同步容限第6章多媒體通信網(wǎng)絡(luò)技術(shù)1、多媒體通信對通信網(wǎng)的要求1.吞吐要求2.實(shí)時(shí)性和可靠性要求3.時(shí)空約束4.分布處理要求2、目前的通信網(wǎng)絡(luò)大體上分為三類：一類為電信網(wǎng)絡(luò)，如公用電話網(wǎng)（PSTN、分組交換網(wǎng)（

53、PSPDN、數(shù)字?jǐn)?shù)據(jù)網(wǎng)（DDN、窄帶和寬帶綜合業(yè)務(wù)數(shù)字網(wǎng)（N-ISDN和B-ISDN）等；一類為計(jì)算機(jī)網(wǎng)絡(luò)，如局域網(wǎng)（LAN）、廣域網(wǎng)（WAN、光纖分布式數(shù)據(jù)接口（FDDI）、分布列隊(duì)雙總線（DQDB等；一類為電視傳播網(wǎng)絡(luò)，如有線電視網(wǎng)（CATV、混合光纖同軸網(wǎng)（HFC、衛(wèi)星電視網(wǎng)等。公共交換電話網(wǎng)（PSTN窄帶綜合業(yè)務(wù)數(shù)字網(wǎng)（N-ISDN）計(jì)算機(jī)局域網(wǎng)（LAN）有線電視（CATV）網(wǎng)3、多媒體通信的實(shí)時(shí)通信協(xié)議在Internet上實(shí)現(xiàn)實(shí)時(shí)多媒體通信是Internet發(fā)展到一定階段后的必然趨勢。然而，Internet原本并不是用于實(shí)時(shí)通信的，由于TCP/IP協(xié)議不能確保實(shí)時(shí)通信所需要的帶寬，傳

54、輸延遲所造成的時(shí)間抖動將使實(shí)時(shí)通信的質(zhì)量嚴(yán)重下降。另外，TCP協(xié)議負(fù)責(zé)數(shù)據(jù)的流量控制，保證傳輸?shù)恼_性，具有數(shù)據(jù)重發(fā)功能，這一點(diǎn)也不適合于實(shí)時(shí)通信。在Internet上傳送多媒體信息時(shí)，采用的都是UDP/IP協(xié)議，而UD可口IP均不提供鏈接保證，數(shù)據(jù)傳輸?shù)目煽啃詻]有保障。為了解決這個(gè)問題，IETF提出了多種實(shí)時(shí)通信協(xié)議，這里主要介紹應(yīng)用比較廣泛的實(shí)時(shí)傳輸協(xié)議（RTP、實(shí)時(shí)流協(xié)議（RTSP和資源預(yù)留協(xié)議（RSVP。4、RTP主要用于承載多媒體數(shù)據(jù)，并通過包頭時(shí)間參數(shù)的配置使其具有實(shí)時(shí)的特征。RTCP主要用于周期地傳送RTC咆，監(jiān)視RTP傳輸?shù)姆?wù)質(zhì)量。在RTC咆中，含有已發(fā)送的數(shù)據(jù)包的數(shù)量、丟失的數(shù)據(jù)包的數(shù)量等統(tǒng)計(jì)資料。5、多媒體通信對通信網(wǎng)絡(luò)提出了哪些要求？6、分析RTPRTSP、RSVP在多媒體通信中的作用。第7章多媒體數(shù)據(jù)格式及流媒體技術(shù)1、實(shí)現(xiàn)流式傳輸有兩種方法：實(shí)時(shí)流式（RealtimeStreaming）傳輸和順序流式（ProgressiveStreaming）傳輸。2、流媒體播放方式1.單播2.組播3.點(diǎn)播與廣播3、流媒體系統(tǒng)的基本構(gòu)