多媒体知识整理1分解.doc

数字音频信息的获取与处理的原理过程、音频卡的工作原理。 1.数字化音频的质量取决于采样频率和量化位数这两个重要参数。 反映音频数字化质量的另一个因素是通道（或声道）个数 样频率（Hz）×量化位数（位）×声道数/8 2.例如，数字激光唱盘（CD-DA，红皮书标准）的标准采样频率为44.1kHz，量化位数为16位，立体声（这就是所谓的CD音质，CD-Quality Sound），可以几乎无失真地播出频率高达22kHz的声音，这也是人耳所能听到的最高声音频率。1分钟CD-DA音乐所需的存储量为： 44.1×1000×16×2×60/8=10 584 000B 数字音频格式：WAV、 MP3、 RA、RAM、RPM 、WMA、 MIDI、VOC 1.音频信号处理的特点 (1) 音频信号是时间依赖的连续媒体 (2) 理想的合成声音应是立体声 (3) 对语音信号的处理，要抽取语意等其它信息 2.声卡的分类 1．按应用环境分类 2. 从技术角度分类 3. 根据采样和量化的位数分类（根据采样量化的位数，常用有8位、16位和32位声卡。位数越高，量化精度越高，质量越好。 ） 3.音频卡的工作原理 2) 音色 6.音乐合成技术P57页。 MIDI是音乐与计算机结合的产物 利用MIDI文件演奏音乐，所需的存储量最少。 使用MIDI谱曲比使用波形音频更合适， 1）需要播放长时间高质量音乐 2）需要以音乐作背景音响效果 3）需要以音乐作背景音响效果 7.本章小结 只有当信源本身具有冗余度，才能对其进行压缩。根据统计分析结果，语音信号存在着多种冗余度，其最主要部分可以分别从时域和频域来考虑。另外由于语音主要是给人听的，所以考虑了人的听觉机理，也能对语音信号实行压缩。 2）成熟的压缩编码技术和算法，较常用的有脉冲编码调制（PCM）；差分脉冲编码调制（DPCM）和自适应差分编码调制（ADPCM）等其它编码算法和标准等. 第三章： 一.三基色(RGB)的原理:红色+绿色=黄色 红色+蓝色=品红 绿色+蓝色=青色 红色+绿色+蓝色=白色 2. RGB相加混色与CMY相减混色的关系(互为补码的关系) 二： 颜色的表示 1.亮度、色调、饱和度 I(Y) 亮度：光的强和弱。 H 色调：光的波长、人眼的感觉(反映)颜色(的基本特征)。 S 饱和度：颜色渗入白光的程度(表示)颜色深浅的程度 2.X Y的离散化称为采样 f（x，y）值的离散化称为量化 数字化：两种离散化结合在一起，叫做数字化. 离散化的结果称为数字图像。 3.图像是二维数据 视频是三维数据 三：彩色空间： 1）RGB 彩色空间 YUV 彩色空间 转换见P78页 YIQ 彩色空间 （ R、G、B和Y、U、V或YIQ (RGB=红绿蓝；Y亮度，UV或IQ是色差信号) HSI 彩色空间 2）黑白和彩色全电视信号 显示图像 扫描方式：隔行扫描和逐行扫描 隔行扫描奇数场+偶数场=1帧 每一行有正程和逆程。 每一场有正程(显示)和逆程（消隐） 3）视频信息获取技术 黑白视频信号获取器的工作原理 同步分离电路 锁相和时序电路 A/D变换器 帧存储器的设计 D/A变换及显示输出 彩色视频信号获取器的工作原理 1.A/D变换和数字解码 2.窗口控制器 3.帧存储器系统 4.数模转换和矩阵变换 5.视频信号和VGA信号的叠加 6.数字式多制式视频信号编码部分 4）1．静态图形与图像文件格式 常见的静态图形与图像格式包括BMP、TIF、GIF、PSD、WMF、TGA、PNG、PCX、JPG、MPT、DIB、PCP、PCD等。 2．动态动画与数字视频文件格式 常见的动态动画文件：FLIC文件格式、MMM文件格式、SWF文件格式等 常见的数字视频文件格式：AVI文件格式，ASF文件格式 、 MOV文件格式 、MPG文件格式 、DAT文件格式 等 四： 1.在数字视频信息获取与处理过程中，采样、A/D变换、压缩、存储、解压缩、D/A变换 2.NTSC制的帧频为30帧每秒，PAL制和SECAM制的帧频率为25帧每秒。 3.全电视信号主要由（图像信号、复合同步信号、复合消隐信号 ）组成。 4.彩色全电视信号主要由（亮度信号、色度信号、复合同步信号、复合消隐信号）组成 5.在全电视信号中，把（奇数场同步信号 ）的前沿作为一场的起点。 第4章 多媒体数据压缩编码技术 一、数据压缩基本概念 1.数据压缩就是以最少的数码表示信源所发的信号，减少容纳给定消息集合或数据采样集合的信号空间。 2. 多媒体数据压缩的必要性 多媒体数据数字化后的海量性 3.多媒体数据压缩的可能性 数据冗