(中职)多媒体技术应用模块3 多媒体信息处理技术教学课件.ppt
《(中职)多媒体技术应用模块3 多媒体信息处理技术教学课件.ppt》由会员分享,可在线阅读,更多相关《(中职)多媒体技术应用模块3 多媒体信息处理技术教学课件.ppt(64页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、YCF正版可修改PPT(中职)多媒体技术应用模块3 多媒体信息处理技术教学课件模块模块3 多媒体信息处理技术多媒体信息处理技术任务任务1 音频处理技术音频处理技术任务任务2 图形图形/图像处理技术图像处理技术任务任务3 数字视频处理技术数字视频处理技术任务任务4 多媒体动画处理基础多媒体动画处理基础任务任务1 音频处理技术音频处理技术3.1.1声音的基本概念声音的基本概念1.声音的本质声音的本质 声音的本质是机械振动或气流扰动引起周围弹性物质发生波声音的本质是机械振动或气流扰动引起周围弹性物质发生波动。声音可以沿着弹性物质向外传播,因此在物理学上,声动。声音可以沿着弹性物质向外传播,因此在物理
2、学上,声音又被称为声波或弹性波。引起声波的物体称为声源。声波音又被称为声波或弹性波。引起声波的物体称为声源。声波所及的空间范围称为声场。所及的空间范围称为声场。声音是一种常见的物理现象。既然声音是一种波,那么它就声音是一种常见的物理现象。既然声音是一种波,那么它就具有一般波动现象所具有的特性。具有一般波动现象所具有的特性。简单的机械振动是简谐振简单的机械振动是简谐振动,在数学上可以用一个正弦函数来描述。对于单一频率的动,在数学上可以用一个正弦函数来描述。对于单一频率的声音来说也是一个简谐振动,将其称为简谐声。简谐声的图声音来说也是一个简谐振动,将其称为简谐声。简谐声的图像如像如图图3-1所示。
3、所示。下一页返回任务任务1 音频处理技术音频处理技术2.人对声音强弱的感觉人对声音强弱的感觉声压级声压级 人对声音强弱的感觉,就是人们平时说的声音的大小。人对人对声音强弱的感觉,就是人们平时说的声音的大小。人对声音强弱的感觉与外界声音的强弱成正相关的关系,但是人声音强弱的感觉与外界声音的强弱成正相关的关系,但是人对声音的感觉与声音的强度并不是成正比的,它们之间的关对声音的感觉与声音的强度并不是成正比的,它们之间的关系是非线性的。通过实验发现,人对声音的感觉与对声音的系是非线性的。通过实验发现,人对声音的感觉与对声音的强度值取对数后基本呈线性关系,所以通常将声强值取对数强度值取对数后基本呈线性关
4、系,所以通常将声强值取对数来表示声音的强弱。这种表示声音强弱的数值,称为声压级来表示声音的强弱。这种表示声音强弱的数值,称为声压级或声强级,单位是分贝,用或声强级,单位是分贝,用dB表示。表示。上一页 下一页返回任务任务1 音频处理技术音频处理技术3.人对声音频率的感觉人对声音频率的感觉音高和音阶音高和音阶人们对声音频率的感觉,就是人们平时说的声音粗和细。人人们对声音频率的感觉,就是人们平时说的声音粗和细。人对声音频率的感觉在声学上称为音调的高低,在音乐中称为对声音频率的感觉在声学上称为音调的高低,在音乐中称为音高。声音的频率越高,人感觉到的声音就越细,即音调越音高。声音的频率越高,人感觉到的
5、声音就越细,即音调越高高;反之,则越粗,即音调越低。反之,则越粗,即音调越低。图图3-2是在一个倍频程是在一个倍频程(8度音度音)的频率范围内按频率的对数的频率范围内按频率的对数刻度分成刻度分成12个等分而得到的音阶,称之为个等分而得到的音阶,称之为12平均律。平均律。上一页 下一页返回任务任务1 音频处理技术音频处理技术 4.人类听觉的频率响应人类听觉的频率响应人耳对不同频率的声音所感觉到的强弱是不同的。人类对声人耳对不同频率的声音所感觉到的强弱是不同的。人类对声音的频率有一个响应的范围,即人听觉频率响应不是平直的。音的频率有一个响应的范围,即人听觉频率响应不是平直的。此外,当声压级不同时人
6、的频率响应也不同,如此外,当声压级不同时人的频率响应也不同,如图图3-3所示。所示。5.几种声音的频率范围与带宽几种声音的频率范围与带宽1)声音的频率范围声音的频率范围频率范围是衡量声音质量的重要指标。现在,常将声音质量频率范围是衡量声音质量的重要指标。现在,常将声音质量分为四个等级,见分为四个等级,见表表3-2。2)带宽带宽带宽是无线电技术、通信工程和计算机网络技术中的术语,带宽是无线电技术、通信工程和计算机网络技术中的术语,是指频率的覆盖范围。带宽表示一条通信线路是指频率的覆盖范围。带宽表示一条通信线路(包括有线和无包括有线和无线线)可以传输的载波频率范围。可以传输的载波频率范围。上一页
7、下一页返回任务任务1 音频处理技术音频处理技术3.1.2音频数据的压缩与编码音频数据的压缩与编码1.音频信号的冗余度音频信号的冗余度1)频域冗余度频域冗余度(1)非均匀长时功率谱密度。在较长的时间间隔内对音频信非均匀长时功率谱密度。在较长的时间间隔内对音频信号进行平均统计,可以得到音频信号的功率谱密度函数。通号进行平均统计,可以得到音频信号的功率谱密度函数。通过对该函数的分析,可以发现音频信号的功率谱是非常不平过对该函数的分析,可以发现音频信号的功率谱是非常不平坦的,就是说音频信号在给定的频段上呈现出非常的不均匀坦的,就是说音频信号在给定的频段上呈现出非常的不均匀性。这说明音频信号存在着固有的
8、冗余度。性。这说明音频信号存在着固有的冗余度。上一页 下一页返回任务任务1 音频处理技术音频处理技术(2)语音信号特有的短时功率谱密度。人类语音信号在短时语音信号特有的短时功率谱密度。人类语音信号在短时功率谱上有着非常强烈的不均匀性。在某些频率上出现峰值,功率谱上有着非常强烈的不均匀性。在某些频率上出现峰值,在另外一些频率上则出现低谷。出现峰值的频率称为共振峰在另外一些频率上则出现低谷。出现峰值的频率称为共振峰频率。在给定的频段上会出现几个这样的共振峰频率。这些频率。在给定的频段上会出现几个这样的共振峰频率。这些共振峰频率决定了不同的语音特征。由于共振峰频率的峰值共振峰频率决定了不同的语音特征
9、。由于共振峰频率的峰值随着频率的升高递减,所以前两个共振峰频率谱决定了语音随着频率的升高递减,所以前两个共振峰频率谱决定了语音特征。这说明,可以对语音信号的高频部分进行适当地压缩。特征。这说明,可以对语音信号的高频部分进行适当地压缩。2)时域冗余度时域冗余度(1)样本间相关样本间相关(2)幅度的非均匀分布。幅度的非均匀分布。(3)静止系数。静止系数。上一页 下一页返回任务任务1 音频处理技术音频处理技术(4)周期之间的相关性。周期之间的相关性。(5)基音之间的相关性。基音之间的相关性。2.音频信号压缩编码的分类音频信号压缩编码的分类通过上述对音频信号冗余度的分析,可以知道对于音频信号通过上述对
10、音频信号冗余度的分析,可以知道对于音频信号来说,有很多对音频信号进行压缩编码的切入点。因此音频来说,有很多对音频信号进行压缩编码的切入点。因此音频信号压缩编码就可分为很多不同的类型。信号压缩编码就可分为很多不同的类型。1)根据压缩编码对语音信号的质量是否有损失对语音压缩编根据压缩编码对语音信号的质量是否有损失对语音压缩编码进行分类码进行分类(1)无损压缩无损压缩:音频信号的压缩仅仅根据可完全恢复的冗余度音频信号的压缩仅仅根据可完全恢复的冗余度进行。进行。上一页 下一页返回任务任务1 音频处理技术音频处理技术(2)有损压缩有损压缩:音频信号的压缩不仅仅根据可完全恢复的冗余音频信号的压缩不仅仅根据
11、可完全恢复的冗余度进行,还可以基于各种声学参数、相关性等进行压缩。度进行,还可以基于各种声学参数、相关性等进行压缩。2)根据压缩编码的理论和方法的不同时,语音压缩编码进行根据压缩编码的理论和方法的不同时,语音压缩编码进行分类分类(1)基于统计特性的压缩基于统计特性的压缩:通过对音频信号进行抽样统计分析,通过对音频信号进行抽样统计分析,得出音频幅度的分布规律和相邻样本所具有的相关性,从而得出音频幅度的分布规律和相邻样本所具有的相关性,从而找出压缩算法。找出压缩算法。(2)基于声学参数的压缩基于声学参数的压缩:通过对音频的参数,如共振峰、线通过对音频的参数,如共振峰、线性预测系数、滤波器组等的分析
12、,对音频信号进行压缩编码。性预测系数、滤波器组等的分析,对音频信号进行压缩编码。上一页 下一页返回任务任务1 音频处理技术音频处理技术(3)基于人类听觉特性的压缩基于人类听觉特性的压缩:利用人类听觉系统的特点和人利用人类听觉系统的特点和人类听觉心理特点以及掩蔽效应等讲行压缩编码,可以得到很类听觉心理特点以及掩蔽效应等讲行压缩编码,可以得到很高的压缩效率。高的压缩效率。3.1.3音乐设备数字接口技术音乐设备数字接口技术1.MIDI技术简介技术简介 人们在说到多媒体音频技术时总会提起人们在说到多媒体音频技术时总会提起MIDI(Musical Instrument Digital Interface
13、,音乐设备数字接口音乐设备数字接口)音音频技术。这里所说的音乐设备一般指的是带有键盘的电子乐频技术。这里所说的音乐设备一般指的是带有键盘的电子乐器。器。MIDI是由音乐家制定的播放录制电子音乐的国际标准。是由音乐家制定的播放录制电子音乐的国际标准。MIDI为各种电子乐器与各种计算机的连接建立了一个共同为各种电子乐器与各种计算机的连接建立了一个共同的软件和硬件标准。的软件和硬件标准。上一页 下一页返回任务任务1 音频处理技术音频处理技术 MIDI标准的建立和推广给电子乐器的应用和计算机多媒体标准的建立和推广给电子乐器的应用和计算机多媒体技术的进一步发展创造了条件。技术的进一步发展创造了条件。MI
14、DI接口和计算机音频卜接口和计算机音频卜的声音合成能力为音乐创作、存储、传输和播放都带来了极的声音合成能力为音乐创作、存储、传输和播放都带来了极大的好处和方便。大的好处和方便。MIDI并不仅仅是一个简单的接口标准,应该说它代表着计并不仅仅是一个简单的接口标准,应该说它代表着计算机电子音乐子系统的构成。以算机电子音乐子系统的构成。以MIDI为接口标准的计算机为接口标准的计算机电子音乐子系统的配置示意如电子音乐子系统的配置示意如图图3-4所示。所示。2.MIDI音乐的合成方式音乐的合成方式1)调频合成方式调频合成方式2)波表合成方式波表合成方式上一页 下一页返回任务任务1 音频处理技术音频处理技术
15、 3.MIDI消息与消息与MIDI文件文件MIDI传送的信息不是声音波形本身,而是电子乐器操作指传送的信息不是声音波形本身,而是电子乐器操作指令和控制代码。令和控制代码。MIDI文件是由一系列文件是由一系列MIDI指令组成的。一个指令组成的。一个MIDI指令通指令通常由常由3个字节组成,其中第一个字节是指令状态字节,状态字个字节组成,其中第一个字节是指令状态字节,状态字节后面紧跟着两个数据字节。状态字节的最高有效级被设置节后面紧跟着两个数据字节。状态字节的最高有效级被设置为为“1”,低,低4位是通道信息,一共可以表示位是通道信息,一共可以表示16个通道个通道;其余其余3位表示消息的类型。位表示
16、消息的类型。MIDI的消息类型如的消息类型如图图3-5所示。所示。上一页 返回任务任务2 图形图形/图像处理技术图像处理技术3.2.1计算机图形技术基本知识计算机图形技术基本知识1.计算机图形的定义计算机图形的定义计算机图形的基本定义是计算机图形的基本定义是:使用计算机通过特定的算法和程序,使用计算机通过特定的算法和程序,在显示设备上构造出视觉形象来。在显示设备上构造出视觉形象来。2.计算机图形系统的基本功能计算机图形系统的基本功能计算机图形系统至少应该具备以下计算机图形系统至少应该具备以下5个基本功能:计算、存储、个基本功能:计算、存储、输入、输出、对活。这输入、输出、对活。这5个功能之间的
17、关系如个功能之间的关系如图图3-6所示。所示。下一页返回任务任务2 图形图形/图像处理技术图像处理技术3.计算机图形系统的组成部分计算机图形系统的组成部分计算机图形系统由硬件设备和软件系统组成。计算机图形系统由硬件设备和软件系统组成。计算机图形系统的硬件设备包括主机、图形显示器以及一些计算机图形系统的硬件设备包括主机、图形显示器以及一些图形输入输出设备,如图形的数字化输入板、绘图机、图形图形输入输出设备,如图形的数字化输入板、绘图机、图形打印机等。打印机等。计算机图形系统的软件系统包括支持图形格式的操作系统、计算机图形系统的软件系统包括支持图形格式的操作系统、图形生成和编辑软件、图形应用软件。
18、如图形生成和编辑软件、图形应用软件。如图图3-7所示为计算所示为计算机图形系统的软硬件结构示意图。机图形系统的软硬件结构示意图。上一页 下一页返回任务任务2 图形图形/图像处理技术图像处理技术(1)计算机图形系统的输入设备。图形输入设备可以将用户计算机图形系统的输入设备。图形输入设备可以将用户所需的图形数据以及各种命令转换成计算机所能识别的符号,所需的图形数据以及各种命令转换成计算机所能识别的符号,并且输送到计算机。并且输送到计算机。(2)计算机图形系统的输出设备。图形输出设备的功能是将计算机图形系统的输出设备。图形输出设备的功能是将图形软件系统制作的图形结果显示出来或制作成硬拷贝得以图形软件
19、系统制作的图形结果显示出来或制作成硬拷贝得以长期保留。常见的图形输出设备有计算机显示器、图形打印长期保留。常见的图形输出设备有计算机显示器、图形打印机机(激光打印机和喷墨打印机激光打印机和喷墨打印机)、绘图机等。、绘图机等。3.2.2数字图像的基本概念数字图像的基本概念1.数字图像的定义数字图像的定义图像这个概念很难用简单的形象文字来解释或定义。图像这个概念很难用简单的形象文字来解释或定义。上一页 下一页返回任务任务2 图形图形/图像处理技术图像处理技术一般而言,图像可以定义为一般而言,图像可以定义为:用某一种技术方法获取,并可以用某一种技术方法获取,并可以重现于二维媒体上的视觉信息。数字图像
20、可以进一步定义为重现于二维媒体上的视觉信息。数字图像可以进一步定义为:以数字的形式记录和存储的图像。数字图像处理以数字的形式记录和存储的图像。数字图像处理(Digital Image Processing)是指用数学方法,利用计算机技术对是指用数学方法,利用计算机技术对数字图像进行各种图像信息提取、图像变换和图像识别等操数字图像进行各种图像信息提取、图像变换和图像识别等操作。作。2.数字图像的属性数字图像的属性1)分辨率分辨率经常遇到的分辨率有两种经常遇到的分辨率有两种:显示分辨率和图像分辨率。显示分辨率和图像分辨率。(1)显示分辨率。显示分辨率是指显示器上能够显示出的像显示分辨率。显示分辨率
21、是指显示器上能够显示出的像素数目。素数目。上一页 下一页返回任务任务2 图形图形/图像处理技术图像处理技术(2)图像分辨率。图像分辨率是指组成一幅图像的像素密度图像分辨率。图像分辨率是指组成一幅图像的像素密度的度量方法。的度量方法。显示分辨率与图像分辨的区别如下。显示分辨率与图像分辨的区别如下。图像分辨率与显示分辨率是两个不同的概念。图像分辨率是图像分辨率与显示分辨率是两个不同的概念。图像分辨率是确定组成一幅图像的像素数目确定组成一幅图像的像素数目;而显示分辨率是确定显示图像而显示分辨率是确定显示图像的区域大小。图像分辨率由图像获取时的分辨率决定。的区域大小。图像分辨率由图像获取时的分辨率决定
22、。2)像素深度像素深度(1)像素深度的概念及表示。像素深度是指存储每个像素所像素深度的概念及表示。像素深度是指存储每个像素所用的二进制位数,它也是反映图像分辨率的指标之一。像素用的二进制位数,它也是反映图像分辨率的指标之一。像素深度决定彩色图像的每个像素可以表示的颜色数量,或者确深度决定彩色图像的每个像素可以表示的颜色数量,或者确定灰度图像的每个像素可以表示的灰度等级数量。定灰度图像的每个像素可以表示的灰度等级数量。上一页 下一页返回任务任务2 图形图形/图像处理技术图像处理技术(2)图像像素的属性位。在用二进制数表示彩色图像的像素图像像素的属性位。在用二进制数表示彩色图像的像素时,除时,除R
23、,G,B分量用固定位数表示外,往往还增加分量用固定位数表示外,往往还增加1位或几位或几位作为属性位作为属性(Attribute)位。位。属性位用于指定该像素应具有的性质。属性位用于指定该像素应具有的性质。用这种办法定义一个像素的属性在实际中很有用。如在一幅用这种办法定义一个像素的属性在实际中很有用。如在一幅彩色图像上面加文字说明,而又不想让文字把图像盖掉,就彩色图像上面加文字说明,而又不想让文字把图像盖掉,就可以用这种办法来定义像素,而该像素显示的颜色又有人把可以用这种办法来定义像素,而该像素显示的颜色又有人把它称为混合色它称为混合色(Key Color)。上一页 下一页返回任务任务2 图形图
24、形/图像处理技术图像处理技术3)真真/伪彩色伪彩色(1)真彩色真彩色(true color)。真彩色是指在组成一幅彩色图像。真彩色是指在组成一幅彩色图像的每个像素值中,有的每个像素值中,有R,G,B三个基色分量,每个基色分量直三个基色分量,每个基色分量直接确定显示设备的基色强度,这样产生的彩色称为真彩色。接确定显示设备的基色强度,这样产生的彩色称为真彩色。灰度图像灰度图像黑白图像黑白图像彩色图像彩色图像256色色(彩色索引彩色索引)彩色图像的每个像素用一个字节表示,它彩色图像的每个像素用一个字节表示,它不是直接表示颜色的像素值,而是一个彩色调色板的入口地不是直接表示颜色的像素值,而是一个彩色调
25、色板的入口地址址(索引号索引号)。上一页 下一页返回任务任务2 图形图形/图像处理技术图像处理技术(2)伪彩色伪彩色(pseudo color)。伪彩色图像是每个像素的颜。伪彩色图像是每个像素的颜色不是由每个基色分量的数值直接决定,而是把像素值当作色不是由每个基色分量的数值直接决定,而是把像素值当作彩色查找表彩色查找表(Color Look Up Table,CLUT)的表项入口的表项入口地址,去查找一个显示图像时使用的地址,去查找一个显示图像时使用的R,G,B强度值,用查找强度值,用查找出的出的R,G,B强度值确定显示设备的基色强度,这样产生的彩强度值确定显示设备的基色强度,这样产生的彩色称
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 中职多媒体技术应用模块3 多媒体信息处理技术教学课件 多媒体技术 应用 模块 多媒体信息 处理 技术 教学 课件
限制150内