計算機(jī)應(yīng)用基礎(chǔ)-唐大仕

1、1,第8講 多媒體技術(shù)基礎(chǔ),主講教師：唐大仕dstang2000@263.net http://www.dstang.com,2,課前思考,你用過哪些多媒體設(shè)備及軟件？,3,本講內(nèi)容,多媒體計算機(jī) 多媒體信息的表示及處理 多媒體硬件 多媒體軟件,4,(一) 多媒體計算機(jī),,5,多媒體技術(shù),媒體是信息儲存、傳播表現(xiàn)的載體傳統(tǒng)媒體 計算機(jī)領(lǐng)域中的媒體 多媒體能同時采集、處理、編輯、存儲和展示兩個以上不同類型信息媒體的技

2、術(shù)。,6,多媒體 特點,集成性 交互性 實時性,7,多媒體個人計算機(jī)（MPC）,集聲、文、圖于一體具有多媒體功能的個人計算機(jī) 發(fā)展史 1984年，Apple推出第一臺具有多媒體特性的Macintosh機(jī)1987年引入超級卡 1986年，Philips和Sony聯(lián)合推出CD-I（Compact Disc Interactive） 1987年，RCA推出DVI系統(tǒng)（Digital Viedo Interacti

3、ve）MPC Ⅳ標(biāo)準(zhǔn),9,多媒體計算機(jī)的標(biāo)準(zhǔn),主頻為75MHz以上的Pentium級微處理器；內(nèi)存8MB以上；數(shù)據(jù)傳輸率為600KB/s的CD-ROM驅(qū)動器；配有16位聲卡且具有波表合成技術(shù)以及MIDI功能；在顯示輸出方面，要求具備顏色空間的轉(zhuǎn)換和縮放功能，能以65535色、352×240分辨率、30幀/秒播放動態(tài)視頻；硬盤容量不少于540MB。操作系統(tǒng)軟件是Windows3.11及更高版本或MS-DOS6.0及

4、更高版本,10,MPC的硬件系統(tǒng),主機(jī)接口卡存儲設(shè)備輸入輸出設(shè)備,11,MPC的軟件系統(tǒng),多媒體操作系統(tǒng)包含了設(shè)備驅(qū)動程序包含了多媒體設(shè)備接口處理程序（MCI） ）多媒體素材多媒體創(chuàng)作工具多媒體應(yīng)用系統(tǒng),12,MPC應(yīng)用領(lǐng)域,教育 電子出版物 信息服務(wù) 商業(yè) 娛樂 在虛擬現(xiàn)實中的應(yīng)用,13,(二)多媒體信息的表示及處理,音頻 圖像和視頻 動畫 超媒體,14,音頻,聲音信號： 音調(diào) 20-

5、20KHz 音色 音量,16,Figure 2-9,Audio representation,17,聲音的數(shù)字化,聲音數(shù)字化的三要素采樣頻率根據(jù)奈奎斯特理論，采樣頻率不低于聲音信號最高頻率的兩倍。這樣就能把數(shù)字表達(dá)的聲音還原成原來的聲音，稱為無損數(shù)字化。 采樣精度用樣本值的二進(jìn)制位數(shù)來表示。位數(shù)越多精度越高，數(shù)據(jù)也越大。量化等級聲道數(shù)例： CD音質(zhì)44.1kHz X 16位 X 2 =176KB/s （

6、約相當(dāng)于單倍速光驅(qū)， 150KB/s）,18,聲音的編碼,ADPCM(自適應(yīng)差分脈沖編碼）,19,MIDI音樂,Musical Instrument Digital Interface記錄 音符、節(jié)拍、樂器種類及音量等FM合成方式波形表合成方式,20,圖像,圖像分辨率顏色深度(位數(shù)）如：640＊480＊256色(即8位) ≈ 300k,21,矢量圖(Vector)與位圖(bitmap),,22,顏色表示,RGB（彩色

7、最基本模型,適合于計算機(jī)系統(tǒng)）CYMK（cyan/magenta/yellow/black)，用于印刷HSL （hue/saturation/luminance) 適合于人的視覺YUV (亮度、色差) 用于電視信號傳輸,23,彩色空間——RGB,R，G，B分別代表紅(red)、綠(green)、藍(lán)(blue)三色。彩色最基本的表示模型通過對R、G、B三個顏色通道的變化以及它們相互之間的疊加可得到各式各樣的顏色。,24,彩

8、色空間——RGB,RGB是計算機(jī)系統(tǒng)使用的彩色模型。24位真彩 當(dāng)顯示器可顯示256*256*256=16,777,216種顏色常用：RGB5：5：5方式和RGB8：8：8方式。  注意：R、G、B三分量中不僅包含色彩信息，而且還包含了亮度、飽和度特別地，當(dāng)R=G=B時，該象素是灰度，無顏色更特別，當(dāng)R=G=B=0時，該象素是黑色 當(dāng)R=G=B=255時，該象素是白色

9、,25,Figure 2-7,Bitmap graphic 位圖,26,彩色圖的像素 pixels,27,彩色空間——HSI彩色空間,用三個分量來表示一種顏色H（Hue，色調(diào)）S（Saturation，飽和度）I（Intensity，光強(qiáng)度）HSI彩色空間更適合人的視覺特性,28,顏色編輯器,29,顏色編輯器,方形區(qū)域為色度圖，可對色度進(jìn)行調(diào)節(jié)（包括色調(diào)和飽和度）,,色調(diào)值 0 ~ 255,,255,0,,亮度0~255,,

10、飽和度,從,到,,條形區(qū)域為亮度圖，可調(diào)節(jié)亮度,30,彩色空間——YUV,Y為亮度信號， U（B-Y）和V（R-Y）是色差信號YUV的最初作為電視系統(tǒng)信號編碼 優(yōu)點之一是亮度信號和色差信號分離，容易使彩色電視系統(tǒng)與只對亮度敏感的黑白電視機(jī)亮度信號兼容；否則，如果用RGB傳輸，雖然黑白電視機(jī)可以正常接受彩色電視信號（只顯示出黑白圖像），但YUV系色感較均勻，當(dāng)不發(fā)生偏移時色調(diào)飽和度上的變化近似相同。 中國和西歐采用的PAL制式

11、電視系統(tǒng)就采用該空間進(jìn)行傳輸，電視機(jī)接收到后，再轉(zhuǎn)換成RGB空間,31,彩色空間——YUV彩色空間,國際無線電咨詢委員會(CCIR)根據(jù)實驗認(rèn)為，采用雙倍度采樣4：2：2方案效果較好，提出了CCIR 601標(biāo)準(zhǔn)：,——線性關(guān)系,32,彩色空間轉(zhuǎn)換： YUVRGB,RGB ? YUV（這里系數(shù)有小的改變）　　 Y = 0.3R + 0.59G + 0.11B U = B – Y V = R – Y

12、顯然，在視頻信號采集時，RGB；而在傳送時，只傳送：一個寬頻亮度信號Y——包含有所有細(xì)節(jié)二個窄頻色差信號（B-Y，R-Y）—— 代表彩色，經(jīng)進(jìn)一步處理成為U，V信號而原來，是三個寬頻帶的基色信號,33,彩色空間轉(zhuǎn)換：YUVRGB,當(dāng)接收時， YUV ? RGB R = Y + Ｖ G = Y – 0.19U – 0.51Ｖ B = Y + Ｕ,34,彩色空間——YIQ彩色空

13、間,YIQ彩色空間是在廣播電視系統(tǒng)中另一種常用的亮度與色差分離的模型。美國的電視系統(tǒng)采用NTSC制式，其彩色空間即為YIQY是亮度，I和Q共同描述圖像的色調(diào)和飽和度。YUV與RGB的相互關(guān)系為：,35,視頻,視頻的三要素：空間分辨率（即屏幕上的點數(shù)）顏色分辨率（即每個點的顏色位數(shù)）時間分辨率（即每秒的幀數(shù)）電視：NTSC(美國、日本）30幀/秒，525行/幀PAL (西歐、中國）25幀/秒， 625行/幀SECAM

14、（俄、法）注：電影是24幀/秒,36,聲音文件的格式（要求掌握）,WAV (Win平臺）AU (unix平臺)MIDI記錄MIDI信息MP3它的優(yōu)點是在保證音質(zhì)近乎完美的情況下，文件的尺寸卻非常小。,37,圖像文件的格式（要求掌握）,JPEG (Joint Photographic Expert Group)有損壓縮；多用于照片GIF (Graphics Interchange Forma

15、t)無損壓縮，最多256色，可透明，可動畫；多用于小圖標(biāo) TIFF(Tag Image File Format)未壓縮或簡單壓縮；多用于掃描及傳真BMP (Bitmap)Windows中的位圖，一般未壓縮,38,視頻文件的格式（要求掌握）,MPG(MPEG:Motion Photographic Expert Group) AVI(Audio Video Interactive)其他格式,39,流媒體,流媒體文件流

16、媒體簡單來說就是應(yīng)用流技術(shù)在網(wǎng)絡(luò)上傳輸?shù)亩嗝襟w文件，而流技術(shù)就是把連續(xù)的影象和聲音信息經(jīng)過壓縮處理后放上網(wǎng)站服務(wù)器，讓用戶一邊下載一邊觀看、收聽，而不需要等整個壓縮文件下載到自己機(jī)器后才可以觀看的網(wǎng)絡(luò)傳輸技術(shù)。該技術(shù)先在使用者端的電腦上創(chuàng)造一個緩沖區(qū)，于播放前預(yù)先下載一段資料作為緩沖，于網(wǎng)路實際連線速度小于播放所耗用資料的速度時，播放程序就會取用這一小段緩沖區(qū)內(nèi)的資料，避免播放的中斷，也使得播放品質(zhì)得以維持。 目

17、前在這個領(lǐng)域上，競爭的公司主要有三個：Microsoft、Real Networks、Apple，而相應(yīng)的產(chǎn)品就是：Windows Media 、Real Media、QuickTime。常用流式媒體格式RM .rm .rmvb (Real格式)wma, asf（微軟的格式）,40,動畫,什么是動畫活動的畫面動畫制作如 Flash （二維動畫） 擴(kuò)展名為.swf廣泛用于網(wǎng)絡(luò)閃客如 3D MAX， Maya（三維

18、動畫）,42,（三）相關(guān)硬件,,43,多媒體計算機(jī)的硬件設(shè)備,主要設(shè)備：CD-ROM / DVD-ROM驅(qū)動器和光盤 聲卡 顯卡視頻卡顯示器、音箱（耳機(jī)）、麥克風(fēng)、攝像頭、數(shù)碼相機(jī)、數(shù)碼攝像機(jī)、掃描儀、游戲手柄等其它外設(shè),44,聲音卡,結(jié)構(gòu)與功能 聲音數(shù)字處理器 DSP 混聲器 合成器 波表存儲器 總線接口聲卡的技術(shù)指標(biāo)采樣能力合成器、MIDI功能、音效總線類型、標(biāo)準(zhǔn)支持、即插即用、芯片類型,4

19、5,視頻卡,視頻捕獲卡視頻疊加卡MPEG解壓卡電視接收卡,46,光盤技術(shù),CD-ROM（Compact Disk Read-Only Memory） CD-WORM（Write Only Read Memory） 其他如：CD-ETOM（Electron Trapping Optical Memory）,47,CDROM 標(biāo)準(zhǔn),CD-DA（紅皮書） CD-ROM(黃皮書） VCD DVD, xDVD

20、 其他：CD-I， PhotoCD, CD-TV，。。。,48,,,49,掃描儀,工作原理：掃描過程中，掃描儀提供光源給圖像，光線從圖像反射進(jìn)掃描儀的光學(xué)系統(tǒng)，在此過程中不同層次的光得到調(diào)節(jié)，圖像以數(shù)字形式重新組合并顯示在屏幕上掃描儀性能指標(biāo)： 幅面，分辨率，顏色數(shù)，速度,50,語音處理,實現(xiàn)語音處理的軟硬件條件：硬件：語音卡(加速卡)、麥克風(fēng)、揚聲器軟件：配套軟件系統(tǒng)語音技術(shù)API:語音應(yīng)用程序接口(SR 和 TT

21、S)SR:語音識別器TTS:文本—語音轉(zhuǎn)換器相關(guān)軟件中自公司的“漢王”系列IBM公司的ViaVoice,51,數(shù)碼像機(jī),數(shù)碼像機(jī)：Digital Camera以CCD電荷耦合器或互補(bǔ)金屬氧化物半導(dǎo)體CMOS為感光器件，將客觀景物以數(shù)字方式記錄在存儲器中的照像機(jī)。照片以數(shù)字文件格式存儲存儲體是數(shù)字化存儲器件，可重復(fù)使用成像質(zhì)量取決于CCD圖像傳感器和A/D轉(zhuǎn)換部件如“中國人自己的800萬－愛國者V80”3624

22、15;2448,52,觸摸屏,用途：多媒體信息查詢特點：直接、方便、快捷、直觀、生動實例：1)商場導(dǎo)購系統(tǒng) 2)火車站信息查詢系統(tǒng)工作原理：一種定位設(shè)備，通過一定的物理手段，使用戶觸摸觸摸屏?xí)r，所摸的位置（以坐標(biāo)形式）被控制器檢測到，并通過串口或其他接口送到CPU，從而確定用戶所輸入的信息,53,觸摸屏,系統(tǒng)組成觸摸屏控制卡作用：從觸點檢測裝置上接收觸摸信息，將其轉(zhuǎn)化為觸點坐標(biāo)，送給主機(jī)，同時可接收主機(jī)

23、發(fā)來的命令并執(zhí)行觸摸檢測裝置檢測用戶的觸摸位置，并將信息傳遞給觸摸屏控制卡。常用介質(zhì)電阻式、電容式、紅外式、壓力式電阻式：兩層膜之間有網(wǎng)格狀觸點陣列，膜的壓力會造成電阻變化，從而定位壓點位置電容式：屏上有一層金屬膜，觸摸金屬膜會使電流發(fā)生變化，從而定位壓點位置,54,存儲與接口,存儲光盤、磁帶、DV帶、Memory StickU盤、移動硬盤閃存卡Smart Media(SM卡), Compact Flash(CF卡)

24、, Multi Media Card(MMC卡), Secure Digital Card(SD卡), Memory Stick(MS卡), Extreme Digital Card(XD卡), Trans Flash Card (TF卡) 接口USB接口、1394接口紅外、藍(lán)牙,55,（四）相關(guān)軟件,,56,軟件及資源,參考：北大BBS之multimedia、NetResource、Software版軟件：ftp://ft

25、p.cs.pku.edu.cn (162.105.30.133) 推薦！ftp://marxismdown:marxismdown@162.105.194.99/http://edu.onlinedown.net (華軍軟件園)資源：使用baidu、google、sheenk使用maze、BThttp://www.51music.org/ http://www.9ymp3.com/http://bn.sina.com.c

26、n,57,幾個小軟件,* 圖像抓取軟件：SnagIt; FlashCam* 圖像瀏覽軟件：AcdSee* 簡單動畫軟件：GIF Constructor;*簡單動畫軟件: AnimaGif* 簡單3D動畫軟件：Cool3D,58,音頻相關(guān)的軟件,播放器：CD播放器Media PlayerWinAmpReal Player超級解霸編輯器CoolEdit錄音機(jī)Mp3制作、格式轉(zhuǎn)換AltoMP3 MakerCDex

27、,59,Windows 錄音機(jī)的使用,選擇【開始】→【所有程序】→【附件】→【娛樂】→【錄音機(jī)】命令，會出現(xiàn)Windows錄音工具單擊【錄音】按鈕可以錄音；單擊【停止】按鈕可停止錄音。選擇【文件】→【保存】菜單命令即可保存剛剛錄制的信息。,60,播放音樂常用軟件Winamp,播放音樂文件添加其他文件夾中的音樂文件保存音樂文件列表,61,瀏覽圖像的常用軟件ACDSee,ACDSee 的安裝與啟動 利用圖像觀察器瀏覽圖片圖片格

28、式轉(zhuǎn)換桌面背景設(shè)置利用圖像瀏覽器管理圖片文件圖片文件的復(fù)制、移動、重命名和格式轉(zhuǎn)換屏保和幻燈演示文件的制作,62,圖像圖形處理軟件,圖像處理PhotoShopPhotoDraw PhotoDeluxe PhotoExpress圖形處理Firework FreeHand,63,PhotoShop,菜單欄工具箱控制面板工作區(qū)狀態(tài)欄,,64,動畫處理軟件,二維動畫FlashMacromedia Flash現(xiàn)

29、已被Adobe收購三維動畫3D MaxMaya,65,視頻處理軟件,播放：Windows Media Player, RealOne, 金山影霸,DivXPro, HappyShow, Media Player ClassicQuickTime, DivX解碼器及mpeg4、ac3相關(guān)插件編輯、制作、轉(zhuǎn)換：Premiere, VirtualDub，EoVideo, helix producer RealProduce,

30、Easy Video JoinerNo1 Vedio Convertor,66,媒體播放器Windows Media Player,視頻方面支持.avi、.mpg、.asf和VCD、DVD光碟音頻方面支持.mp3、.wav、MIDI以及CD光碟播放選擇【文件】→【打開】菜單命令，在彈出的對話框中選擇需要播放的文件即可,67,其它常用的視頻播放工具,RealPlayer 可以播放.rm和.rmvb格式的視頻文件(流媒體) 豪杰超

31、級解霸主要用于播放VCD/DVD光碟，此外還支持CD、mp3等上百種影音格式的播放Media Player Classic我常用的一款播放軟件，支持多種格式,68,光盤相關(guān)軟件,光盤刻錄：Nero虛擬光驅(qū)：daemon，金山模擬光驅(qū)光盤文件制作：WinISO文件名.bin或.iso,69,網(wǎng)絡(luò)上的多媒體資源,網(wǎng)絡(luò)上有豐富的資源可通過http、ftp、bt、maze等多種工具下載 DVD下載中心

32、http://202.112.10.43流媒體下載工具：StreamBox, Woof, FlashGet, NetTransport, PubdlOffline Explorer,70,多媒體的共享: P2P,如 www.ppcn.netBT (BitTorrent) www.btchina.net www.manfen.net Mazemaze.pku.cneDonkey, eMuleNapster, ez

33、Peer, KuroM3, KuGoo,71,流媒體下載,大多數(shù)流媒體文件都不提供直接的下載方式，需要用特殊的軟件。如：Streambox vcrNet Transport,72,多媒體創(chuàng)作工具,AuthorwareToolBookDirectorAction!方正奧思,73,(五) 多媒體技術(shù)前沿（了解）,,74,數(shù)據(jù)壓縮,數(shù)據(jù)壓縮可分成兩種類型，一種叫做無損壓縮，另一種叫做有損壓縮。 無損壓縮是指使用壓縮后的數(shù)據(jù)進(jìn)

34、行重構(gòu)(或者叫做還原，解壓縮)，重構(gòu)后的數(shù)據(jù)與原來的數(shù)據(jù)完全相同；無損壓縮用于要求重構(gòu)的信號與原始信號完全一致的場合。一個很常見的例子是磁盤文件的壓縮。根據(jù)目前的技術(shù)水平，無損壓縮算法一般可以把普通文件的數(shù)據(jù)壓縮到原來的1/2～1/4。一些常用的無損壓縮算法有霍夫曼(Huffman)算法和LZW(Lenpel-Ziv & Welch)壓縮算法。 有損壓縮是指使用壓縮后的數(shù)據(jù)進(jìn)行重構(gòu)，重構(gòu)后的數(shù)據(jù)與原來的數(shù)據(jù)有所不同，但不

35、影響人對原始資料表達(dá)的信息造成誤解。有損壓縮適用于重構(gòu)信號不一定非要和原始信號完全相同的場合。,75,信息冗余,統(tǒng)計冗余編碼冗余結(jié)構(gòu)冗余視覺冗余,76,數(shù)據(jù)壓縮的方法簡介,統(tǒng)計編碼如：霍夫曼編碼 游程長度編碼 基于字典：LZW預(yù)測編碼 如：序列量化變換編碼 如：DCT（離散余弦變換）分析綜合編碼 如：特征抽取,77,壓縮工具WinRAR的操作,壓縮：選中一個或多個文件、文件夾，點右鍵解

36、壓縮選中.rar文件，點右鍵或：雙擊打開，然后進(jìn)行文件的拖放操作還可以創(chuàng)建自釋放文件(exe文件),78,多媒體的新技術(shù),大容量信息的光盤存儲技術(shù)多媒體數(shù)據(jù)庫及數(shù)據(jù)檢索多媒體通信和網(wǎng)絡(luò)化技術(shù)超媒體 = 超級鏈接+多媒體 虛擬現(xiàn)實技術(shù)(Virtual Reality)語言 VRML數(shù)字地球國家信息基礎(chǔ)設(shè)施 NII全球信息基礎(chǔ)設(shè)施 GII數(shù)字地球 DE,79,INTERNET電話,網(wǎng)絡(luò)電話,80,INTERNET

37、電話,Internet Phone可以使任何一 位Internet互聯(lián)網(wǎng)上裝備有聲卡的多媒體電腦用戶撥叫國際長途電話。,Net2Phone、MediaRing、CollTalk、NetMeeting,網(wǎng)絡(luò)電話,81,網(wǎng)絡(luò)電視,iptv.pku.edu.cnhttp://tv.qq.com其他網(wǎng)絡(luò)電視工具如FireTV,82,本章小結(jié),多媒體概述 多媒體信息的表示及處理 多媒體硬件 多媒體軟件,83,要點：多媒體文件格式

38、,圖片文件Jpeg, gif, tiff, bmp, wmf聲音文件Wav, midi, mp3, rm，wma視頻文件從現(xiàn)實世界采集，經(jīng)過數(shù)字化處理得到Avi, mpeg, asf, rm, mov動畫文件由計算機(jī)生成Avi, Gif, flic, swf(Flash文件）,84,要點：相關(guān)軟件,播放Windows Media playerRealOne PlayerWinampAcdsee(圖片）制作P