1、数字媒体技术教材及参考书教材及参考书l教材l刘清堂等著，数字媒体技术导论，清华大学出版社，2008年l参考书l钟玉琢等著，多媒体计算机技术基础及应用（第3版），高等教育出版社，2009年l胡晓峰等著，多媒体技术教程，人民邮电出版社，2002年课程内容课程内容l第 一 章 数字媒体技术概述l第 二 章 数字音频技术l第 三 章 数字图像技术l第 四 章 数字视频技术l第 五 章 数字媒体压缩技术l第 六 章 数字媒体存储技术l第 七 章 数字媒体管理与保护第一章第一章 数字媒体技术概述数字媒体技术概述l媒体的基本概念l数字媒体及其特性l媒体的种类和特点l数字媒体技术的研究领域媒体媒体l媒体的概念
2、l媒体（mediamedia，mediummedium）l承载信息之载体lITU-TITU-T（原（原CCITTCCITT）对媒体的分类l感觉、表示、显示、存储、传输媒体媒体l感觉媒体感觉媒体：用户接触信息的感觉形式l视觉、听觉、触觉等l表示媒体表示媒体：信息的表示形式l文字、图像、声音、视频、动画等l显示媒体显示媒体：表现和获取信息的物理设备l显示器、打印机、扬声器、键盘等媒体媒体l存储媒体存储媒体：存储数据的物理设备l磁带、磁盘、光盘等l传输媒体传输媒体：传输数据的物理设备l光缆、电缆、电磁波、交换设备等CPUOutputDeviceStorageInputDevice表示媒体存储媒体表现
3、媒体表现媒体感觉媒体感觉媒体表示媒体传输媒体媒体媒体第一章第一章 数字媒体技术概述数字媒体技术概述l媒体的基本概念l数字媒体及其特性l媒体的种类和特点l数字媒体技术的研究领域数字媒体及特性数字媒体及特性l数字媒体概念l计算机存储、处理和传播的信息媒体为数字媒体（digital media）。l数字媒体包括两个方面，l（1）信息，内容采用二进制表示；l（2）媒介，能存储、传播二进制信息。数字媒体概念（续）数字媒体概念（续）l数字媒体概念l数字媒体是数字化的内容作品以现代网络为主要传播载体，通过完善的服务体系，分发到终端和用户进行消费的全过程。l数字媒体是指最终以二进制数的形式记录、处理、传播、获
4、取的信息媒体。这些媒体包括数字化的文字、图形、图像、声音、视频影像和动画及其编码等逻辑媒体和存储、传输、显示逻辑媒体的物理媒体。但常常指逻辑媒体。数字媒体特性数字媒体特性l数字化数字化l多样性多样性l交互性交互性l集成性集成性l趣味性趣味性l技术与艺术的融合技术与艺术的融合数字化数字化l我们过去熟悉的媒体几乎都是以模拟的方式进行存储和传播的，而数字媒体却是以比特的形式通过计算机进行存储、处理和传播。多样性多样性l信息载体的多样性l融合两种或两种以上媒体。连续媒体（音频和视频）是人机交互最自然的媒体，是对计算机更人性化的要求65%65%20%20%10%10%2%2%3%3%视觉味觉嗅觉触觉听觉
5、多媒体是技术与应用发展的必然多媒体是技术与应用发展的必然l在计算机发展的初期，人们只能用数值这种媒体承载信息l只能通过“0”和“1”表示信息l纸带机和卡片机是主要的I/O设备l机器语言时代l计算机的应用只限于极少数计算机专业人员多媒体是技术与应用发展的必然多媒体是技术与应用发展的必然l1950s1970s，出现了高级程序设计语言，开始用文字作为信息的载体l用文字（如英文）编程，输入计算机，处理结果也可用文字表示输出l这时的I/O设备主要是打字机、键盘和显示终端l计算机的应用扩大到具有一般文化程度的科技人员多媒体是技术与应用发展的必然多媒体是技术与应用发展的必然l1980s开始，人们致力于研究将
6、声音、图形和图像作为新的信息媒体输入输出计算机，这将使计算机的应用更为直观、容易l1984年Apple公司的Macintosh个人计算机首次引进“位映射”的图形机理，用户接口开始使用Mouse驱动的窗口技术和图符（Windows and Icon）l这使得文化水平较低的公众，包括儿童在内都能够使用计算机多媒体是技术与应用发展的必然多媒体是技术与应用发展的必然l今天，国际上下述几项技术又有了突破性的进展lVLSI 的密度和速度的增加；CD-ROM、DVD等低成本、大容量存储器的出现；双通道VRAM、RDRAM的引进；网络技术的广泛使用l以上技术有效带动了视频压缩算法和视频处理器结构的改进l促使十
7、多年前单色文本/图形子系统转变成今天的色彩丰富、高清晰度显示子系统l同时能做到全屏幕、全运动视频图像，高清晰度的静态图像，视频特技，三维实时的全电视信号以及高速真彩色图形，高保真度音响信息多媒体是技术与应用发展的必然多媒体是技术与应用发展的必然l综上所述，无论从半导体的的发展还是从计算机进步的角度，或者从普及计算机应用、拓宽计算机处理信息类型看，利用多媒体是计算机技术发展的必然趋势交互性交互性l交互性能的实现，在模拟域中是相当困难的，而在数字域中却容易得多。因此，具有计算机的“人机交互作用”是数字媒体的一个显著特点。数字媒体就是以网络或者信息终端为介质的互动传播媒介。交互性（续）交互性（续）l
8、交互性l传统媒体（电视、广播）：被动接受信息l多媒体：是一种人机交互式媒体，向用户提供交互式的使用、加工和控制信息的手段l简单的交互式应用：如视频点播（VOD）、从数据库中检索出某人的照片等l高级的交互式应用：虚拟现实（Virtual Reality，VR），又称“灵境”技术交互性（续）交互性（续）l虚拟现实（Virtual Reality）：是一种逼真的视、听、触觉一体化的计算机生成环境，用户可以借助必要的装备（如头盔显示器、数据手套等）以自然的方式与虚拟环境中的物体进行交互作用、相互影响，从而获得亲临等同真实环境的感受和体验。趣味性趣味性l互联网、IPTV、数字游戏、数字电视、移动流媒体等
9、为人们提供了宽广的娱乐空间，媒体的趣味性真正体现出来。如观众可以参与电视互动节目，观看体育赛事的时候可以选择多个视角，从浩瀚的数字内容库里搜索并观看电影和电视节目，分享图片和家庭录像，浏览好品质内容。集成性集成性l集成性l多种信息媒体的集成l处理这些媒体的设备与设施的集成技术与艺术的融合技术与艺术的融合l信息技术与人文艺术、左脑与右脑之间都有着明显差异，但数字媒体传播却可以在这些领域之间架起桥梁。计算机的发展与普及已经使信息技术离开了纯粹技术的需要，数字媒体传播需要信息技术与人文艺术的融合。l例如，在开发多媒体产品时，技术专家要负责技术规划，艺术家/设计师要负责所有可视内容，清楚观众的欣赏要求
10、。数字媒体传播模式数字媒体传播模式l数字媒体是利用数字电视技术、网络技术，通过互联网、宽带局域网、无线通信网和卫星等渠道，以电视、电脑和手机为终端，向用户提供视频、音频、语音数据服务、连线游戏、远程教育等集成信息和娱乐服务的一种传播形式。大众传播模式大众传播模式l传统的大众传播媒体，是一对多的传播过程，由一个媒介出发达到大量的受众。译码 释码 编码 信源 媒体组织 反馈 受众 2 受众 1 受众N 庞杂的受众 数字媒体传输模式数字媒体传输模式l在数字媒体传播模式中，信源和信宿都是计算机。因此，信源和信宿的位置是可以随时互换的。这与传统的大众传播如报纸、广播电视等相比，发生了深刻的变化和革命。信
11、源 信宿 信源 信宿 编码 译码 编码 译码 信道 噪声 信息 信息 比特 比特 发送/接受方 发送/接受方 数字媒体传输模式（续）数字媒体传输模式（续）l数字媒体传播的理想信道是具有足够带宽的、可以传输比特流的高速网络信道。网络可能由电话线、光缆或卫星通信构成。数字媒体可以是多点之间的传播。计算机 计算机 计算机 计算机 计算机 计算机 网 络 第一章第一章 数字媒体技术概述数字媒体技术概述l媒体的基本概念l数字媒体及其特性l媒体的种类和特点l数字媒体技术的研究领域媒体的种类媒体的种类l人类利用视觉、听觉、触觉、嗅觉和味觉来感受各种信息，因此媒体可分为：l视觉类媒体(70%-80%)l听觉类
12、媒体(10%)l触觉、嗅觉和味觉类媒体(10%)视觉类媒体视觉类媒体l视觉是人类感知信息最重要的途径l百闻不如一见l视觉类媒体元素l文本(Text)、图像(Image)、图形(Graphic)、视频(Video)、动画(Animation)文本文本l文本是使用最早的计算机媒体信息l英文文本：由ASCII码表示，每个字母、数字、标点或数学符号各占一个字节l中文文本：由国标GB2312-80的双字节编码表示，每个字符占两个字节lWPS(.wps)、Word(.doc)、Notepad(.txt)l非格式化文本文件、格式化文本文件图像图像l一幅图像可定义为一个二维函数f(x,y)l(x,y)为空间坐
13、标；f(x,y)为图像在点(x,y)处的强度l数字图像：当x,y和f都是有限的、离散的l像素：构成数字图像的基本元素图形图形l图形一般是指计算机绘制的画面，如直线、圆、圆弧、矩形、任意曲线和图表等l不直接描述数据的每一点，而是描述产生这些点的过程和方法。图形的格式是一组描述点、线、面等几何图形的大小、形状、位置的指令，如:line(x1,y1,x2,y2,color)Circle(x,y,r,color)图形图形 vs 图像图像l虽然对用户而言是一样的，但是两者的存储结构和表示方法完全不同l图形是矢量结构的画面存储形式，抽象，数据量小，但显示成本高l图像是栅格结构的画面形式，基本元素是像素，逼
14、真，数据量大l图形是更加抽象化的图像图形图形 vs 图像图像视频和动画视频和动画l一幅幅有联系的静态图像的连续播放，利用了人眼的视觉暂留性，即每秒连续播放20-30帧(frame)，产生运动画面的效果l视频：单帧是采集的真实图像l动画：单帧是由计算机产生或人工画出的图像或图形，动画包括：二维动画、三维动画、真实感三维动画等视频和动画视频和动画l一个动画例子（共6帧，10帧/秒）听觉类媒体听觉类媒体l波形声音（Wave）l2020kHz，波形声音是对自然界声音进行采样和量化的结果，是自然界所有声音的拷贝l语音（Speech）l3003.4kHz，语音（或称话音）是指人的说话声，它除了是声音的载体
15、外，还包含语意和情感等信息，语音信号处理可能涉及语言学、社会学、声学等l音乐（Music）l符号化了的声音，多媒体中专指 MIDI 音乐第一章第一章 数字媒体技术概述数字媒体技术概述l媒体的基本概念l数字媒体及其特性l媒体的种类和特点l数字媒体技术的研究领域数字媒体技术研究领域数字媒体技术研究领域l数字媒体涉及的技术范围很广，是多种学科和多种技术交叉的领域。主要技术范畴包括：l数字媒体表示与操作，包括数字声音及处理、数字图像及处理、数字视频及处理、数字动画技术等。l数字媒体压缩，包括通用压缩编码、专门压缩编码（声音、图像、视频）技术等。l数字媒体存储与管理，包括光盘存储（CD技术、DVD技术等
16、）、媒体数据管理、数字媒体版权保护等。l数字媒体传输，包括流媒体技术、P2P技术等。数字媒体技术主要的研究方向数字媒体技术主要的研究方向l数字媒体的技术范畴规划了数字媒体技术的研究领域，其主要的研究方向包括：l数字声音处理数字声音处理：包括音频及其传统技术（记录、编辑技术）、音频的数字化技术（采样、量化、编码）、数字音频的编辑技术、话音编码技术（如PCM、DA、ADM）。数字音频技术可应用于个人娱乐、专业制作、数字广播等。l数字图像处理数字图像处理：包括数字图像的计算机表示方法（位图、矢量图等）、数字图像的获取技术、图像的编辑与创意设计。常用的图像处理软件有Photoshop等。数字图像处理技
17、术可应用于家庭娱乐、数字排版、工业设计、企业徽标设计、漫画创作、动画原形设计、数字绘画创作。数字媒体技术主要的研究方向（续）数字媒体技术主要的研究方向（续）l数字视频处理数字视频处理：包括数字视频及其基本编辑技术、后期特效处理技术。常用的视频处理软件有Premiere等。数字视频处理技术可应用于个人、家庭影像记录、电视节目制作、网络新闻。l数字动画设计数字动画设计：包括动画的基本原理、动画设计基础（包括环节：构思、剧本、情节链图片、模板与角色、背景、配乐）、数字二维动画技术、数字三维动画技术、数字动画的设计与创意。常用的动画设计软件有3DMAX、Flash等。数字动画可应用于少儿电视节目制作、
18、动画电影制作、电视节目后期特效包装、建筑和装潢设计、工业计算机辅助设计、教学课件制作等。l数字游戏设计数字游戏设计：包括游戏设计相关软件技术（DirectX、OpenGL等）、游戏设计与创意。数字媒体技术主要的研究方向（续）数字媒体技术主要的研究方向（续）l数字媒体压缩数字媒体压缩：包括数字媒体压缩技术及分类、通用的数据压缩技术（行程编码、字典编码、熵编码等）、数字媒体压缩标准，如用于声音的MP3、MP4、用于图像的JPEG、用于运动图像的MPEG。l数字媒体存储数字媒体存储：包括内存储器、外存储器、光盘存储器等。l数字媒体管理与保护数字媒体管理与保护：包括数字媒体的数据管理、媒体存储模型及应
19、用、数字媒体版权保护概念及框架、数字版权保护技术，如加密技术、数字水印技术、权利描述语言等。l数字媒体传输技术数字媒体传输技术：包括流媒体传输技术、P2P技术、IPTV技术等。数字媒体应用领域数字媒体应用领域l数字媒体有着广泛的应用和开发领域l教育培训l电子商务l信息发布l游戏娱乐l电子出版l创意设计等数字媒体应用领域数字媒体应用领域教育培训教育培训l在教育培训方面，可以开发远程教育系统、网络多媒体资源、制作数字电视节目等。l数字媒体因能够实现图文并茂、人机交互、反馈，从而能有效地激发受众的学习兴趣。l用户可以根据自己的特点和需要来有针对性地选择学习内容，主动参与。以互联网为基础的远程教学，极
20、大地冲击着传统的教育模式，把集中式教育发展成为使用计算机的分布式教学。l学生可以不受地域限制，接受远程教师的多媒体交互指导。因此，教学突破了时空的限制，并且能够及时交流信息，共享资源。数字媒体应用领域数字媒体应用领域电子商务电子商务l在电子商务领域，开发网上电子商城，实现网上交易。网络为商家提供了推销自己的机会。通过网络电子广告、电子商务网站，能将商品信息迅速传递给顾客，顾客可以订购自己喜爱的商品。l目前，国际上比较流行的电子商务网站有网上拍卖电子湾eBAY、网络书店amazon，国内的电子商务网站有卓越网、阿里巴巴、淘宝网等。数字媒体应用领域数字媒体应用领域信息发布信息发布l在信息发布方面，
21、组织机构或个人都可以成为信息发布的主体。l各公司、企业、学校及政府部门都可以建立自己的信息网站，通过媒体资料展示自我和提供信息。超文本链接使大范围发布信息成为可能。l讨论区、BBS可以让任何人发布信息，实时交流。如清华大学的BBS水木清华站拥有广泛的国内外用户。l另外，博客、播客等形式提供了展示自我和发布个人信息的舞台。数字媒体应用领域数字媒体应用领域个人娱乐个人娱乐l开发娱乐网站，利用IPTV、数字游戏、影视点播、移动流媒体等为人们提供娱乐。l通过数字电视，不仅可以看电视、录像，实现视频点播，而且微机、互联网、联网电话、电子邮箱、电脑游戏、家居购物和理财都可以使用。l电脑游戏已成为流行的娱乐
22、方式，特别是网络在线游戏因其新颖、开放、交互性好和娱乐性强等特点，受到越来越多人的青睐。数字媒体应用领域数字媒体应用领域电子出版电子出版l在电子出版方面，开发多媒体教材，出版网上电子杂志、电子书籍等。实现编辑、制作、处理输出数字化，通过网上书店，实现发行的数字化。电子出版是数字媒体和信息高速公路应用的产物。l我国新闻出版署对电子出版物曾有以下界定：“电子出版物系指以数字代码方式将图、文、声、像等信息存储在磁、光、电介质上，通过计算机或类似设备阅读使用，并可复制发行的大众传播媒体。”l目前，电子出版物基本上可以分为两大类：l封装型的电子书刊，以光盘等为主要载体l电子网络出版物，以多媒体数据库和I
23、nternet为基础。电子出版与传统出版的比较电子出版与传统出版的比较 比较方面出版物出版形式内容编辑制作介质发行方式阅读方式传统出版物有纸印刷文字、图片电子照排纸张传统传统电子出版物光盘出版多媒体信息多媒体制作光盘传统多媒体计算机电子出版物网络出版多媒体信息多媒体制作硬磁盘Internet 网络多媒体计算机数字媒体应用领域数字媒体应用领域创意设计创意设计l创意设计方面，包括工业设计，企业徽标设计，漫画创作、动画原形设计、数字绘画创作，游戏设计等。l创意设计是多媒体活泼性的重要来源，好的创意不仅使应用系统独具特色，也大大提高了系统的可用性和可视性。精彩的创意将为整个多媒体系统注入生命与色彩。l多媒体应用程序之所以有巨大的诱惑力，主要是其丰富多彩的多种媒体的同步表现形式和直观灵活的交互功能。数字媒体应用领域数字媒体应用领域虚拟现实虚拟现实l虚拟现实(Virtual Reality，VR)综合了计算机图形学、人机交互技术、传感技术、人工智能等领域的最新成果，用以生成一个具有逼真的三维视觉、听觉、触觉及嗅觉的模拟现实环境。用户投入这种环境中，就可与之交互作用。l虚拟现实在娱乐、医疗、工程和建筑、教育和培训、军事模拟、科学和金融可视化等方面获得了应用，有很大的发展空间。仿真训练仿真训练娱乐娱乐游戏半条命2
