多媒体计算机技术-2
多媒体技术应用教程2

2.1.1 人类听觉特性
3.响度和响度级 响度(Loudness) 人耳感受声音强弱的主观感觉 响度(Loudness)是人耳感受声音强弱的主观感觉 程度,这种感觉与音强、频率和波形都有关系, 程度,这种感觉与音强、频率和波形都有关系, 其度量单位为宋(Sone), ),定义一个声压级为 其度量单位为宋(Sone),定义一个声压级为 40dB,频率为1kHz的纯音的响度为1Sone 1kHz的纯音的响度为1Sone。 40dB,频率为1kHz的纯音的响度为1Sone。 响度级( Level) 响度级(Loudness Level)是指某响度与基准响度相 比的等级,其度量单位为方(Phon),定义1kHz ),定义 比的等级,其度量单位为方(Phon),定义1kHz 纯音的响度级为1Phon 1Phon。 纯音的响度级为1Phon。
17
2.1.2 数字音频 音频信号是时间和幅度都连续变化的一维模拟信号 时间和幅度都连续变化的一维模拟信号, 音频信号是时间和幅度都连续变化的一维模拟信号, 要想在计算机中对它进行处理, 要想在计算机中对它进行处理,就要将它变成时 间和幅度都是离散的数字信号,所以数字音频是 间和幅度都是离散的数字信号,所以数字音频是 指音频信号经过离散化处理后再用一系列的数字 来表示的信号,其特点是保真度好,动态范围大。 来表示的信号,其特点是保真度好,动态范围大。 数字音频可分为波形声音 语音和音乐。 波形声音、 数字音频可分为波形声音、语音和音乐。波形声音 实际上包含了所有的声音形式, 实际上包含了所有的声音形式,因此数字音频有 时也泛称为声音。 时也泛称为声音。
7
听阈图2-1 听阈-频率曲线
8
2.1.1 人类听觉特性
2.音调 音调(Pitch)在物理学中是指声音的高低 声音的高低, 音调(Pitch)在物理学中是指声音的高低,实际上 就是指人耳对不同频率声音的一种主观感受。 就是指人耳对不同频率声音的一种主观感受。音 调主要由声音的频率决定, 调主要由声音的频率决定,同时也与声音强度有 频率高的声音,人感觉其音调也较高, 关。频率高的声音,人感觉其音调也较高,反之 人感知音调低的声音其频率也低。 ,人感知音调低的声音其频率也低。 对音调可以进行定量的判断,其度量单位为美( 对音调可以进行定量的判断,其度量单位为美 Mel),定义一个声压级为40dB 频率为1kHz ),定义一个声压级为40dB, 1kHz的 Mel),定义一个声压级为40dB,频率为1kHz的 纯音的音调为1000Mel 1000Mel。 纯音的音调为1000Mel。
计算机多媒体技术

8.2.1多媒体计算机系统构成
1.多媒体计算机的硬件系统 计算机的硬件系统在整个系统的最底层,包括多媒体计算机中的 所有硬件设备和由这些设备构成的一个多媒体硬件环境。 2.多媒体软件平台 多媒体软件平台是多媒体软件核心系统,其主要任务是提供基本 的多媒体软件开发的环境,它要具有图形和音视频功能的用户接口, 应具有实时任务调度、多媒体数据转换和同步算法等功能,能完成对 多媒体设备的驱动和控制,对图形用户界面、动态画面的控制。多媒 体软件平台依赖于特定的主机和外围设备构成的硬件环境,一般是专 门为多媒体系统而设计或是在已有的操作系统的基础上扩充和改造而 成的。 典型的多媒体操作系统有Commodore公司为专用Amiga系统研制 的多任务Amiga操作系统,Intel和IBM公司为DVI系统开发的AVSS和 AVK操作系统,Apple公司在Macintosh上的System7.0中提供的Quick Time操作平台。在个人计算机上运行的多媒体软件平台,应用最广泛 的是Microsoft公司的Windows 9X/NT/2000/XP操作系统。
8.2.1多媒体计算机系统构成
3.多媒体开发系统 多媒体开发系统是多媒体系统的重要组成部分,是开发多媒体应用系统 的软件工具的总称。多媒体开发系统主要包括多媒体数据准备工具和著作工 具。多媒体数据准备工具的功能是收集和整理多媒体素材;多媒体著作工具的 功能是把多媒体素材组织成一个结构完整的多媒体应用系统。 (1)多媒体数据准备工具 多媒体数据准备工具由各种采集和创作多媒体信息的软件工具组成,用 于多媒体素材的收集、整理和制作。通常按照多媒体素材的类型对多媒体数 据准备工具进行分类,如声音录制编辑软件、图形图像处理软件、扫描软件、 视频采集编辑软件、动画制作软件等。 (2)多媒体著作工具 多媒体著作工具又称多媒体创作工具或多媒体编辑工具,它为多媒体开 发人员提供组织编排多媒体数据和连接形成多媒体应用系统的软件工具。多 媒体著作工具除了具有编辑、写作等一般编辑软件具备的信息控制能力外, 还必须有将各种媒体信息编入程序的能力,并具有时间控制、调试能力以及 动态文件输入或输出的能力。
模块二、多媒体技术-选择题(二)

模块二、多媒体技术•选择题(二)姓名:[填空题]*多媒体课件能够根据用户答题情况给予正确或错误的回复,突出显示了多媒体技术的()[单选题]*A.集成性B.交互性(正确答案)C.非线性D.多样性多媒体信息不包括0 o [单选题]*A.图像B.光盘(正确答案)C.音频D视频在信息技术领域,媒体的含义是()。
[单选题]求A.各种信息的编码B.电视剧C.计算机输入与输出的信息D.表示和传递信息的载体(正确答案)答案解析:用于表示和传递信息的载体称为媒体刘丽同学想为自己制作的网站搜集一些声音素材,她可以通过以下哪些方法获取()。
①从光盘上获取②从网上下载③直接录制④从视频中截取[单选题]*A.①②③④(正确答案)B.③④C.①②④D.①②③动画和电影要想达到自然平滑的动态放映效果,播放速率应为()。
[单选题]*A.不确定B.12帧/秒C.24帧/秒正确答案)D.6帧/秒下列软件中,不能用于视频编辑的软件是()o [单选题]*A.会声会影B. WindowsliveC.MoviemakerD. Goldwave(正确答案)答案解析:GoldWave是音频编辑软件下列文件格式中,视频文件是()。
[单选题]求A.bmpB .txtC.wavD.avi(正确答案)答案解析:bmp文件是图像文件、txt文件是文本文件、wav文件是音频文件下列关于模数(A/D)转换的顺序描述,正确的是()[单选题]*A.模拟信号->量化,采样-> 数字信号B.模拟信号-,采样->量化-> 数字信号(正确答案)C.数字信号采样,量化模拟信号D.数字信号->量化,采样-> 模拟信号模拟音频信号经过声卡的采样、量化与编码转换为数字音频信息。
以下列方式采集的波形声音,质量最好的是()。
[单选题]*A.双声道、8位量化、22.05kHz采样频率B.单声道、16位量化、22.05kHz采样频率C.单声道、8位量化、44.1kHz采样频率D.双声道、16位量化、44.1kHz采样频率〔正确答案)在计算机中,完成声音模数转换(A/D)的设备是()[单选题]*A.声卡(正确答案)B.音箱C.耳麦D.光驱答案解析:音响只用于播放声音,耳麦用于语音输入,光驱用于读取光盘信息小明同学利用"影音制作"编辑影片时,添加了3段视频组合在一起,他想在视频之间设置一些过渡效果,应()o [单选题]*A.单击视觉效果选项卡,在效果组中选择相应的效果B.单击开始"选项卡,在添加组中选择相应的效果C.单击"动画"选项卡,在"平移和缩放"组中选择相应的效果D.单击"动画"选项卡,在"过渡特效"组中选择相应的效果(正确答案)下列天于影音制作(Windowslive)软件说法正确的是()o[单选题]*A.影音制作能够将绝大多数的视频文件转换为"AVI "格式B.影音制作只能用于视频编辑,不能转换视频格式C.影音制作的工作区域由预览区和情节区构成确答案)D.影音制作是windows7自帚的视频编辑软件,无需安装在影音制作(Windowslive)软件中截取一段视频,应选择的选项卡是()[单选题]*A.动画B.开始C.编辑(正确答案)D.视觉效果利用“影音制作”编辑影片时,单击功能区”开始“选项卡中的()按钮可以为影片增加一个新片头。
北邮多媒体计算机技术阶段作业一二

一、判断题共5道小题,共分在20世纪70年代左右,工作站是最重要的一类计算机;正确错误知识点: 第九章测试学生答案: B; 标准答案: B;得分: 5 试题分值:提示:宏节点是链接在一起的结点群,更确切地说,就是超文本网络的一部分,即子网;正确知识点: 第十三章测试学生答案: A; 标准答案: A;得分: 5 试题分值:提示:错误链的起始结点称为锚结点,终止结点称为目的节点;正确错误知识点: 第十三章测试学生答案: B; 标准答案: A;得分: 0 试题分值:提示:错误超文本是由信息结点和表示信息结点间相关性的链构成的一个具有一定逻辑结构和语义的网络;正确错误知识点: 第十三章测试学生答案: 标准答案: A;得分: 0 试题分值:提示:超文本和超媒体技术是一种新的多媒体数据管理技术;正确知识点: 第十三章测试学生答案: A; 标准答案: A;得分: 5 试题分值:提示:二、多项选择题共5道小题,共分错误Macintosh多媒体计算机包括哪些软件Macintosh操作系统多媒体软件HyperCard脚本语言Hyper Talk多媒体平台Quick Time知识点: 第九章测试学生答案: A;B;D; 标准答案: A;B;C;D; 得分: 0 试题分值:提示:错误3DS MAX是一种:;运行于WINDOWS平台的软件一个支持多线程,可充分发挥对称多处理器的软件主要运行在工作站上的软件常见的三维动画软件知识点: 第十二章测试学生答案: 标准答案: A;B;D;得分: 0 试题分值:提示:常见的三维动画软件中,低端软件有:;lightwave3dsmaxmayasoftimageSumatra知识点: 第十二章测试学生答案: A;B; 标准答案: A;B;得分: 5 试题分值:提示:错误哪些文件描述了一个标记语言的语法和词汇表,也就是定义了文件的整体结构以及文件的语法DTDSchemaCSSXSL知识点: 第十四章测试学生答案: B;D; 标准答案: A;B;得分: 0 试题分值:提示:错误常见的多媒体合成与制作软件中基于流程图理念的软件是:;AuthorwareIconAuthorDirectorAction知识点: 第十六章测试学生答案: A;C; 标准答案: A;B;得分: 0 试题分值:提示:三、单项选择题共10道小题,共分操作最方便的多轨录音软件是:;Vegas VideoSam2496 和NuendoCool Edit知识点: 第十章测试学生答案: B; 标准答案: B;得分: 5 试题分值:提示:错误对于喜欢自己动手DIY歌曲和专辑的普通音乐爱好者,最适合的多轨录音软件是:;Vegas VideoSam2496 和NuendoCool Edit知识点: 第十章测试学生答案: C; 标准答案: B;得分: 0 试题分值:提示:对专业和半专业的多媒体制作者和录音师来说,首选的单轨录音软件是:; Sound ForgeWaveLabWaveCNGoldWave知识点: 第十章测试学生答案: A; 标准答案: A;得分: 5 试题分值:提示:错误可以直接在视频序列的任何帧上绘图的视频编辑软件是:;Adobe PremierePinnacle Express会声会影5Ulead MediaStudio知识点: 第十一章测试学生答案: B; 标准答案: D;得分: 0 试题分值:提示:软件ACDSee不可以:;对图像格式文件进行格式转换对音频格式文件进行格式转换读取某些压缩文件格式读取某些视频、声音和音乐格式知识点: 第十一章测试学生答案: B; 标准答案: B;得分: 5 试题分值:提示:错误哪一种矢量绘图软件为各类用户,如商业、办公、软件开发、工程设计提供了丰富的预先绘制好的图形VisioAutoCADIllustratorCorelDraw知识点: 第十二章测试学生答案: C; 标准答案: A;得分: 0 试题分值:提示:错误一个形式良好的XML文件要求其标记:;标记必不可少大小写有所区分当一对标记之间没有任何文本内容时,可以不写结束标记,而在开始标记的最后加上斜杠“/”来确认;不允许使用“空标记”;知识点: 第十四章测试学生答案: B; 标准答案: A;得分: 0 试题分值:提示:错误具有扩展性/保值性的标记语言是:;SGMLHTMLXMLVRML知识点: 第十四章测试学生答案: D; 标准答案: C;得分: 0 试题分值:提示:错误被专业人士用来作多媒体排版的软件是:;PageMaker几何画板PowerpointAutoCAD知识点: 第十六章测试学生答案: C; 标准答案: A;得分: 0 试题分值:提示:多媒体应用软件的开发过程中最后一步是:; 确定任务和目标设计脚本准备各种多媒体素材多媒体合成知识点: 第十五章测试学生答案: D; 标准答案: D;得分: 5 试题分值:提示:。
多媒体技术及应用数字音频技术02

4. WMA文件
WMA(Windows Media Audio)是 Windows Media格式中的一个子集(音频 格式)。
特点:压缩到MP3一半
多媒体技术及应用数字音频技术02
2-11
2.1 数字音频基础
5. MIDI和RMI文件 MIDI(乐器数字接口)是由一组音乐、乐 谱或乐器符号的数字集合。 特点:播放效果与硬件相关,数据量很小, 音质不高、音色单调等 6.VOC文件 创新公司开发的声音文件格式,由文件头 块和音频数据块组成。
音乐是符号化的声音。
多媒体技术及应用数字音频技术02
2.1 数字音频基础
二、声音的数字化 1.声音信号的类型 模拟信号(自然界、物理) 数字信号(计算机) 2.声音数字化过程
模拟信号
采样
量化
编码
数字信号
模拟信号
A/D ADC D/A DAC
数字信号
多媒体技术及应用数字音频技术02
2.1 数字音频基础
霍夫曼编码、算术编码、行程编码 ②有损压缩
波形编码--PCM、DPCM、ADPCM 子带编码、矢量量化
参数编码--LPC 混合编码--MPLPC、CELP
多媒体技术及应用数字音频技术02
2.2 数字音频压缩标准
二、音频压缩技术标准
分类
电话语 音质量
调幅广 播质量 高保真 立体声
标准 G.711 G.721 G.723 G.728
多媒体技术及应用数字 音频技术02
2020/11/14
多媒体技术及应用数字音频技术02
第二章 数字音频技术
2.1 数字音频基础 2.2 数字音频压缩标准 2.3 声卡与电声设备 2.4 MIDI与音乐合成 2.5 音频编辑软件 2.6 语音识别技术 本章小结
多媒体计算机技术试题及答案

一、单项选择题(每题1分,共50分)1.MP3代表的含义(B)A、一种视频格式B、一种音频格式C、一种网络协议D、软件的名称2.超文本标记语言是指BA、WWWB、HTTLC、HTMLD、VRML3.CD-ROM是指BA、数字音频B、只读存储光盘C、交互光盘D、可写光盘4.数码相机是利用__B______感受光信号,使转变为电信号,再经模/数转换变成数字信号,储存在相机内部的存储器中。
A、OCRB、CCD、C、MPEGD、RGB5.在计算机内,多媒体数据最终是以___A_____形式存在。
A、二进制代码B、特殊的压缩码C、模拟数据D、图形图像、文字、声音6.最基本的多媒体计算机是指安装了___B_____部件的计算机。
A、高速CPU和高速缓存B、光盘驱动器和音频卡C、光盘驱动器和视频卡D、光盘驱动器和TV卡7.对于WA V波形文件和MIDI文件,下面________的叙述不正确。
A、WA V波形文件比MIDI文件的音乐质量高B、存储同样的音乐文件,WA V波形文件比MIDI文件的存储量大C、一般来说,背景音乐用MIDI文件,解说用WA V文件D一般来说,背景音乐用WA V文件,解说用MIDI文件8.Authorware是一种__C______。
A、多媒体演播软件B、多媒体素材编辑软件C、多媒体制作工具D、不属于以上三种9.建立一个计算机网络需要有网络硬件设备和 D 。
A、体系结构B、资源子网C、传输介质D、网络操作系统10.两台计算机之间利用电话线路传送数据信号时,必须的设备是 B 。
A、网卡B、调制解调器C、中继器D、同轴电缆11.调制解调器(Modem)的功能是C 。
A、数字信号的编码B、模拟信号的放大C、模拟信号与数字信号的转换D、数字信号的整形12.OSI参考模型将网络的层次结构划分为 D 。
A、三层B、四层C、五层D、七层13.通讯设备中的Hub中文全称是 D 。
A、网卡B、中继器C、服务器D、集线器14.在局域网中以集中方式提供共享资源并对这些资源进行管理的计算机称为A 。
东师-多媒体计算机技术20春在线作业2答案

多媒体计算机技术19春在线作业2-0001试卷总分:100 得分:100一、单选题(共30 道试题,共60 分)1.请根据多媒体的特性判断以下()属于多媒体的范畴。
(1)交互式视频游戏(2)有声图书(3)彩色画报(4)彩色电视A.仅(1)B.(1)(2)C.(1)(2)(3)D.全部答案:D2.多媒体数据具有()特点。
A.数据量大和数据类型多。
B.数据类型问区别大和数据类型少。
C.数据量大、数据类型多、数据类型问区别小、输入和输出不复杂。
D..数据量大、数据类型多、数据类型问区别大、输入和输出复杂答案:D3.如果按三个色差信号B-Y,R-Y,G-Y来传输彩色全电视信号,会造成()失真。
A.幅度B.传输C.色彩D.图像答案:A4.国际上常用的视频制式有:(1)PAL制(2)NTSC制(3)SECAM制(4)MPEGA.(1)B.(1)(2)C.(1)(2)(3)D.全部答案:C5.在数字音频信息获取与处理过程,下述正确的顺序是()。
A.A/D变换、采样、压缩、存储、解压缩、D/A变换B.采样、压缩、A/D变换、存储、解压缩、D/A变换C.采样、A/D变换、压缩、存储、解压缩、D/A变换D.采样、D/A变换、压缩、存储、解压缩、A/D变换答案:C6.下面()不是图像和视频编码的国际标准。
A.JPEGB.MPEG-1C.ADPCMD.MPEG-2答案:C7.扫描仪所产生的颜色范围不会是()种。
A.2048B.1000C.16.8M(2的24次方)D.1024答案:B8.窗体中有3个命令按钮,分别命名为Command1、Command2和Command3。
当单击Command1按钮时,Command2按钮变为可用,Command3按钮变为不可见。
下列Command1的单击事件过程中,正确的是A.private sub Command1_Click() Command2.Visible = true Command3.Visible = falseB.private sub Command1_Click() Command2.Enable = true Command3.Enable = falseC.private sub Command1_Click() Command2.Enable = true Command3.Visible = falseD.p答案:C9.超文本技术提供了另一种对多媒体对象的管理形式,它是一种()的信息组织形式。
(2024年)《计算机多媒体技术》课件(完整版)

视频编辑软件介绍及应用
1
Adobe Premiere Pro
专业的视频编辑软件,提供丰富的剪辑、特效、 音频处理等功能,支持多种格式导入和输出。
2 3
Final Cut Pro
适用于Mac系统的专业视频编辑软件,具有直观 的界面和强大的剪辑功能,支持多轨道编辑和多 种特效处理。
DaVinci Resolve
编码标准
介绍国际通用的音频编码 标准,如MPEG音频编码 标准等。
9
音频编辑与处理软件介绍
专业音频编辑软件
音频处理插件
如Adobe Auditபைடு நூலகம்on、Audacity等,提供音 频录制、编辑、混音等功能。
如WAVES、iZotope等,可用于音频降噪 、均衡、压缩等处理。
音频工作站
手机APP
如Pro Tools、Logic Pro等,集音频录制、 编辑、混音、母带处理等功能于一体。
21
虚拟现实系统硬件设备简介
输入设备
如数据手套、三维鼠标等,用于捕捉用户的 动作和指令。
跟踪定位设备
如光学跟踪器、超声波定位器等,用于确定 用户在虚拟环境中的位置和方向。
2024/3/26
输出设备
如头盔显示器、立体投影仪等,提供沉浸式 的视觉体验。
其他辅助设备
如力反馈装置、声音系统等,增强用户的沉 浸感和交互体验。
16
视频编码与压缩标准
2024/3/26
MPEG-1
用于VCD的视频编码标准,采用帧内压缩和帧间压缩技术,支持多 种分辨率和帧率。
MPEG-2
用于DVD和高清电视的视频编码标准,提供更高的压缩比和图像 质量。
H.264/AVC
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
•
媒体食物(价值)链
媒体消费
媒体 准备 媒体 准备 媒体 准备 媒体 准备 媒体 编辑 媒体 编辑 媒体 编辑 媒体 编辑
返回
媒 体 显 示
文本 媒体通信 图像
网络 媒体 集成
多媒体作 品(文档)
音频
内容 (content)
视频 数字项 (digital item)
媒体 显示
媒体消费
几种媒体的关系
CD-ROM
150kB/s 最大寻址时间1s 8bit数字声音 8个合成音 MIDI 640×480 16色 30MB MIDI I/O,摇杆端 口,串并联端口
声卡
显示 硬盘容量 彩色视频播放 输入输出端口
MIDI I/O,摇杆端 MIDI I/O,摇杆端 口,串并联端口 口,串并联端口
多媒体的软硬件平台
思 考 题
• 多媒体技术的应用
• 多媒体技术促进了计算机、通讯和大众媒体的融合
媒体的定义和分类
• 什么是媒体? ? 媒体(Medium)在计算机领域中有两种含义,一 是指用以存储信息的实体,如磁盘、磁带、光盘和 半导体存储器;一是指信息的载体,如数字、文字、 声音、图形图像和视频等。 CCITT曾给媒体做了如下的分类:
感觉媒体
类 型 视觉媒体 名称 景象 分类` 分类 文字 景象 声音 语言 声音
听觉媒体
触觉媒体 嗅觉媒体 味觉媒体
力,运动,温度 气味 滋味
表示媒体
表示媒体是为了加工、处理和传输 感觉媒体而人为地研究、构造出来的一 种媒体。其目的是能将感觉媒体从一个 地方向另一个地方传送,以便于加工和 处理。表示媒体有各种编码方式如语音 编码、文本编码、静止和运动图像编码 等。
合成媒体
创建 符号表示 真实感有限 全部 数据量很小 容易 要求低 处理复杂
显示媒体
返回
显示媒体是指感觉媒体与用于通信 的电信号之间转换用的一类媒体。它包 括输入显示媒体(如键盘、摄像机、话 筒等)和输出显示媒体(如显示器、喇 叭和打印机等)。
存储媒体
返回
存储媒体是用来存放表示媒体,以 方便计算机处理加工和调用,这类媒体 主要是指与计算机相关的外部存储设备。
多媒体信息处理空间
应用模式 离散媒体: text, image,… 连续媒体: audio, video, ... 网络应 用模式 单机应 用模式
获 取 明 码 创 建 ) ( 说 编 辑 理 编 管 描 述 索 输 现 检 传 展
返回
媒体处理
媒体类型
多媒体计算机技术 及其发展历史
• 1984年Apple公司在苹果机Macintosh(也称为 Mac)上引入了位图(Bitmap)概念进行图形处理, 并使用了窗口(Windows)和图标(Icon)作为用 户界面,标志了多媒体及多媒体技术的产生 和应用。 • 1986年,Philips公司和Sony公司联合推出了交 互式紧凑光盘系统CD-I(Compact Disc Interactive),能够将声音、文字、图形图像 等多媒体信息数字化并存储到光盘片上
多媒体计算机技术 及其发展历史
• 1987年,RCA公司推出了交互式数字视频系 统DVI(Digital Video Interactive),以计算机为 基础,使用标准光盘来存储、检索多媒体数 据; • 1989年IBM公司推出AVC系统(Audio Visual Connection),提供了多媒体编辑功能; • 1990年Philips等十多家厂商成立了多媒体市 场协会,并制定了MPC(多媒体计算机)的市场 标准MPC1
MPC2 4MB 25 MHz 486SX 300kB/s 最大寻址时间 400ms CD-ROM XA 16bit数字声音 8个合成音 MIDI 640×480 65536色 160MB -
MPC3 8MB 75 MHz Pentium 同等级X86 600kB/s 最大寻址时间 200ms CD-ROM XA 8bit数字声音 Wavetable(波表) MIDI 640×480 65536色 540MB 352×240 30fps
多媒体计算机技术 及其发展历史
返回
• 1993年5月MPC联盟又制定了第二代多媒 体计算机标准-MPC2,主要是提高了基 本部件的性能指标 • 1995年6月制定了MPC第三代的标准。增 加了全屏幕、全动态(30帧/秒)视频及 增强版CD音质的视频和音频硬件标准
返回
项目 RAM 运算处理器
MPC1 2MB 16MHz 386SX
交互性
返回
• 这是人们获取和使信息变被动为主动的 最为重要的特征。 • 多媒体信息空间中的交互性向用户提供 更加有效地控制和使用信息的手段,同 时也为应用开辟了更广阔的领域,交互 可以增加对信息的注意和理解,延长保 留的时间。
多媒体信息处理的总目标
返回
• 使能跨越各种不同网络和设备, 透明地、 强化地使用多媒体资源。
表示媒体举例
时间属性/空间属性 生成属性 时间属性 空间属性/生成属性 空间属性 图象(image) 图形(graphics) 文本(text) text 视频(video) 动画(animation) 波形声音(wave) 合成语音 MIDI音乐(MIDI) MP3音乐
表示媒体的时间属性
• time-indepen体,值不会随着时间而变化) – text , graphics , static image, …. • time-dependent ( continuous ) media (连 续媒体,值随着时间而变化) – speech , music , video , animation, ….
驱动软件(Driver)
驱动器接口模板
视频/音频支撑系统 或视频/音频核心部件
多媒体计算机的核心软件
专用芯片
• 数字化后的音频和视频数据量非常大,因此 必须进行压缩并需要大容量的存储器;音频 和视频的输入和输出是实时的,需要高速度。 要实现以上最基本的要求,在很多情况下, 需要专用硬件支持。 • 多媒体计算机专用芯片可归纳为两种类型: 一种是固定功能的芯片;一种是可编程的处 理器 • 片上系统(System on a chip,SOC)适应了人们对 于提高性能、缩小尺寸、降低能耗、快速上 市和降低成本等诸多方面的需求
– 取样声音 , image , video
• 合成媒体(使用计算机创建的媒体)
– 合成语音, MIDI , graphics , animation
返回
自然媒体与合成媒体的区别
自然媒体
来源 表示方法 表现能力 可编辑性 存储 检索 传输 展现 获取 取样表示 真实感强 有限 数据量很大 困难 要求高 处理容易
传输媒体
返回
传输媒体是用来将媒体从一个地方 传送到另一个地方的物理载体。传输媒 体是通信的信息载体,如双绞线、同轴 电缆、光纤等。
多媒体的定义
• “多媒体”译自20世纪80年代初产生的英文词 “multimedia”,最早出现于美国麻省理工学 院(MIT)递交给国防部的一个项目计划报告中。 • 多媒体是指信息表示媒体的多样化,常见的 多媒体有文字、图形、图像、声音、音乐、 视频、动画等多种形式。 • 多媒体技术是利用计算机技术把文本、声音、 视频、动画、图形和图像等多种媒体进行综 合处理,使多种信息之间建立逻辑连接,集 成为一个完整的系统。
集成性
返回
• 这不仅是指多媒体设备集成,而且也包含多 媒体信息集成或表现集成。 • 早期的各项技术都可以单一使用和应用,但 很难有大的作为,因为它们是单一的、零散 的,如声音、图像和交互式技术等。 • 信息空间的不完整(例如,仅有静态图像而 无动态视频、仅有声音而无图形等)都限制 了信息空间中的信息组织,也就限制了信息 的有效使用。
表示媒体 显示媒体 感觉 媒体 显示媒体
Input Device
CPU
Output Device
感觉 媒体
表示媒体
Storage
存储媒体 传输 媒体
感觉媒体
感觉媒体是指能直接作用于人的感 官,使人能直接产生感觉的一类媒体。 感觉媒体有人类的各种语言、音乐,自 然界的各种声音、图形、静止和运动的 图像等。
返回
• 软件及硬件平台是实现多媒体系统的物质基础,其中每一项重 要的技术突破都直接影响到多媒体的发展与应用的进程。
视频信号I/O接口卡 音频信号I/O接口板 多媒体硬件 视频、音频压缩解压缩 视频、音频信号实时处理 在初始化引导程序作用下把它安装到系统RAM 中常驻内存。一个驱动器对应一种硬件设备的接 口。
表示媒体的空间属性
• 1D媒体
– 单声道speech , music ,
• 2D媒体
– 双声道music ; text , image , 2D graphics ,
• 3D及多维媒体
– 3D graphics , 全景图像 , 空间立体声music ,
表示媒体的生成属性
• 自然媒体(使用数字化方法从现实世界 获取的媒体)
多媒体计算机技术
第一章 多媒体技术概述
• 多媒体技术基本概念
– 媒体的定义和分类 – 多媒体的定义和特征 – 多媒体信息处理的总目标
• 多媒体计算机技术及其发展历史 • 多媒体技术的主要内容
– 多媒体的软硬件平台 – 专用芯片 – 多核处理器 – 数据压缩及编码技术 – 多媒体同步 –多媒体网络与分布式处理技术 –信息的组织与管理 –多媒体数据存储 –虚拟现实技术 –人机界面技术 –高速多媒体通信技术
多核处理器
• 双核或多核处理器早已有之,SOC、多媒体、 网络等一些嵌入式处理器中都采用了多核技 术 • IBM Power 4处理器一样,将两颗完全一样的 处理器封装在一个芯片内,达到双倍或接近 双倍的处理性能,由于共享了缓存和系统总 线,因此这种做法的优点是能节省运算资源。 而Sun公司明年即将发布的双核处理器Ultra SPARC IV则将两颗处理器集成在一个硅片上, 这样封装面积更小,相对功耗也更低