多媒体应用设计师 第2章 多媒体信息处理及编辑技术

1.多媒体信息的种类与特点

视觉类：文字、图像、图形、视频、动画、其他（视频、符号表示的数值、图形表示的某种数据曲线、数据库的关系数据）
听觉类：波形声音、语音、音乐

多媒体信息特点：
多媒体是有格式的。
越接近原始新媒体形式，信息量就越大:越是抽象，信息量就越小但越精确。
多媒体之间可以相互转换，但可能会丢失部分原始信息，或增加一些伪信息。
多媒体之间的关系也具有丰富的信息。

2.多媒体文字信息的处理与编辑

文字信息的表示与存储：
英文字符用ASCII编码(利用7位二进制数表示，共128个元素)汉字使用GB2312编码方式(收录6763个汉字)文字使用Unicode编码(又称国际码，统一码，单一码，是计算机科学领域中的业内标准)，只规定了符号的二进制代码，Unicode编码的实现方式为UTF(Unicode转换格式)，最常用的实现编码为UTF-8，除此外还有UTF-16,UTF-32
纯文本:只保存文本，不保存格式。常见纯文本格式扩展 txt,asp,bat,c,prg,cmd等。编辑软件一一记事本Notpad,TXT Editor,Notpad++,Quickpad
富文本:包括大量符号标记，用于标记粗体，下划线，斜体，或特殊字符及特殊打印格式。常见富文本格式扩展–RTF,DOCDOCX,PDF等。编辑软件-Word,WPS等。

文字类型：
根据具有编辑排版格式：纯文本和富文本

3.多媒体音频的处理与编辑

声音三要素:音调，响度(音量/音强)，音色
音调:声音的高低，由频率决定。单位—Hz
响度:人主观感觉声音的大小，由振幅和人与声源的距离决定。单位一分贝/dB
音色:由发声物体的材料，结构决定

音效种类：波形音乐WAV、MIDI音频（仅有音乐场合）、数字音频

压缩原理划分：波形编码（脉冲编码调制PCM、自适应增量调制ADM、自适应差分脉冲编码调制ADPCM）、参数编码（线性预测编码LPC。语音的基本参数：基音周期、共振峰、语音谱、声强）、混合编码（码本激励线性预测CELP、多脉冲线性预测MP-LPC、矢量和激励线性预测VSELP）

波形声音处理软件：WaveEdit 、Creative WaveStudio、Adobe Audition
MIDI处理软件：MIDI Orchestrator

人耳听觉：20Hz~20kHz
人发出的声音：80~3400Hz
人说话的声音：300~3000Hz

PCM按量化方式划分：均匀量化、非均匀量化、自适应量化

MIDI信息：键名、力度、时值长短等
MIDI标准：GS标准（日本罗兰公司1984年）、GM标准（国际MIDI生产协会MMA指定通用MIDI标准）、XG标准（YAMAHA公司1994年）
MIDI合成方法：频率调制FM、波形合成
MIDI系统桑基本要素：音序器或音序软件、主键盘、音源

数字音频文件格式：WAV、CD、MP3、MP3 Pro、MIDI、WMA、RA

音频处理软件：Cakewalk、Cool EditPro/Adobe Audition、Sound Forge、Wave CN、 、FL Studio、Cubase、Nuendo、Vegas Audio、Wavelab

音频编辑方式：数字录音、数字音乐创作、声音剪辑、声音合成、增加特效、文件操作

4.多媒体图形图像的处理与编辑

颜色空间：
RGB：彩色显示器、计算机图形学。是最常用的颜色表示方法颜色范围0-255。是一种发光的色彩模式。又称加色模型
CMYK：主要用于印刷，是一种依靠反光的色彩模式，又称减色模型。青一(互补)一红品一(互补)一绿;黄一(互补)一蓝
YIQ、YUV、YCrCb：用于电视的颜色空间。模拟PAL和SECAM彩色电视用YUV；NTSC用YIQ、数字电视用YCrCb。
HSI、HSV：从人的视觉系统发出的
CIE色度模型：国际照明委员会CIE，1931年

图像格式：PSD、TIFF、JPEG、BMP、GIF、PNG、EPS、PDF
图像处理技术：指纹识别系统、文字识别技术
图形格式：TIF、TGA、PSD、UFO、RIF、CDR、EPS

图形图像处理软件：Photoshop、CorelDRAW、Illustrator

图像处理技术：图像增强、图像恢复、图像识别、图像编码、点阵图转换为矢量图等。
图形图像特技处理：图形图像的模糊、锐化、浮雕、旋转、透射、变形、水彩化、油画化

5.多媒体视频的处理与编辑

一般需要保持的频率：24~30帧/秒
现代电影：24帧/秒
电视节目美国NTSC：近30帧/秒
PAL中国：25帧/秒

分辨率：
手机视频:240320
SDTV 480i/p NTSC:360480
SDTV 576i/p PAL:720576
HDTV 720p:1080720
HDTV1080i/p:1920*1080
注:i指的是interlaced(交织的)，理解为“隔行扫描”，而1080p的P意为逐行扫描(Progressive scanning)。数字1080表示垂直方向有1080条扫描线
日本、韩国及东南亚地区与美国等欧美国家使用NTSC制式(一图像总行数为525行)，使用YIQ模型，视频信号帧速率为 29.97顿/秒，隔行扫描方式约为60 场/秒。
法国，东欧地区则使用SECAM制式。PAL是德国制定的彩色电视标准( 一图像总行数为625行)，中国大部分地区使用PAL制式。SECAM和PAL均使用YUV模型，视频信号速率为25 顿/秒，隔行扫描方式为50场/秒
通常胶片电影的快门速率为24顿/秒
H261标准中为了解决电视制式不同的问题而定义了CIF视频格式为了使同一标准既能用于PAL(625)和NTSC(525)两种电视制式系统，源编码基于中间格式CIF(Common Inermediate Format)格式，这是一种折中的定义，其分辨率来源于PAL制式定义为352x288像素，而顿速率则来源于NTSC制式，定义为30/秒
模拟视频信号通常可以采用三种方式传输:分量视频信号、复合视频信号和分离视频信号(S-Video)。彩色重现质量从高到低分别为:分量视频信号 >分离视频信号>复合视频信号
视频编辑分为:线性编辑和非线性编辑

NTSC：采用正交平衡调幅的技术。美国，中国台湾等。
PAL：QAM，逐行倒相正交平衡调幅的技术，克服NTSC制式相位敏感造成的色彩失真的缺点。进一步划分G、I、D三种制式。中国采用PAL-D制式。
SECAM：顺序采用彩色信号和存储恢复彩色信号制式。法国。

宽高比
4：3全屏格式，1.33：1
Cinemascope 2.35
Warnerscope 1.85
Technicscope 1.75
Panascope 1.67

本地影像视频文件格式：AVI、DV-AVI、MPEG、DIVX、MOV
网络流媒体影像视频文件格式：ASF、WMV、RM、RMVB、3GP、Flash

视频编辑软件：AE、Microsoft Video For Windows、Adobe Premiere

视频显示输出方式5代：
CBVS：复合视频广播信号。
S-Video：两分量视频信号。
VGA：RGB分量视频信号以及同步信号等。
DVI：数字，同时支持模拟。
HDMI：数字音视频。最高2.25GB/s

6.多媒体信息的组织

超媒体3个特性：多媒体信息、网络结构模式、交互特性。
超文本和超媒体系统的结构三个层次：数据库层、超文本抽象机层、用户接口层
超文本和超媒体组成要素：节点、链、网络

超媒体的链分类：基本链、移动链、缩放链全景链、视图链

口诀

信处文音图视信（信息处理与编辑：文字信息的处理与编辑、音频处理与编辑、图形图像的处理与编辑、视频的处理与编辑、信息的组织）
颜空显印电觉色（颜色空间：显示器、印刷、电视、视觉、色度CIE）
超特信息网结交（超媒体3个特性：多媒体信息、网络结构模式、交互特性。）
超层数抽接（超文本和超媒体系统的结构三个层次：数据库层、超文本抽象机层、用户接口层）
超要节点链网络（超文本和超媒体组成要素：节点、链、网络）
链类基移缩全视（超媒体的链分类：基本链、移动链、缩放链、全景链、视图链）