第3章-2视频信号的获取与处理

2020/2/151第三章多媒体信息的表示与处理视频信号的获取与处理2020/2/152考核目的：考核学生对视频信息获取与处理的基本原理、彩色空间的表示及转换、彩色全电视信号的组成、视频卡的组成和工作原理以及图像文件格式的转换等内容的理解和掌握。2020/2/153考核的知识点：什么是彩色空间的表示及转换、什么是彩色全电视信号、视频卡的组成及工作原理、图像文件格式的转换等内容。2020/2/154考核要求：掌握：视频信息的获取与处理的基本原理、彩色全电视信号的组成、视频卡的工作原理。理解：彩色空间的表示及转换、图像文件格式及转换。2020/2/1553-1数字图像多媒体计算机处理图像和视频，首先必须把连续的图像函数f(x,y)进行空间和幅值的离散化处理，空间连续坐标(x,y)的离散化，叫做采样；f(x,y)颜色的离散化，称之为量化。两种离散化结合在一起，叫做数字化，离散化的结果称为数字图像。2020/2/156彩色可用亮度、色调、饱和度来描述。三基色(RGB)的原理：自然界常见的各种颜色光，都是由：红(R)、绿(G)、蓝(B)三种颜色光按不同比例相配而成，同样绝大多数颜色也可以分解成红、绿、蓝三种色光，即三基色原理。2020/2/157彩色空间的表示常用：RGB，YUV，YIQ，HSI它们是多媒体计算机彩色图形、静止图像以及动态图像处理算法的基础。2020/2/1583-2用YUV和YIQ的好处(1)亮度信号Y解决了彩色电视机与黑白电视的兼容问题。(2)大量实验表明，人眼对色差信号不敏感，而对亮度信号特别敏感。用亮度信号Y传送细节，用色差信号UV进行大面积涂色。2020/2/1593-3选YIQ好处大量实验统计，人眼对红黄之间的颜色变化最敏感，而分辨蓝和紫之间颜色变化最不敏感。所以把相角为123°的橙色及其相反相角的303°的青色定义为I轴，它表示人眼最敏感的色轴。与I正交的色度信号轴，通过33°—0°—213°线，叫Q轴，它表示人眼最不敏感的色轴。在传送分辨率弱的Q信号是，可用较窄的频带，而传送分辨率较强的I信号是，可用较宽的频带。2020/2/15103-4黑白全电视信号摄象机把图象信号转变成的最后输出信号就是全电视信号。全电视信号主要由三个部分组成：图象信号（视频信号）、复合消隐信号、复合同步信号。2020/2/15113-5彩色全电视信号彩色全电视信号主要由：亮度信号、色度信号、复合同步信号、复合消隐信号组成。2020/2/1512彩色电视制式：PAL：每秒25帧，电视扫描线为625线，分辨率为720*576，画面的宽高比为4：3；NTSC：每秒29.97帧（简化为30帧），电视扫描线为525线，分辨率为720*486,24比特的色彩位深，画面的宽高比为4：3；SECAM：每秒25帧,每帧625行,隔行扫描，宽高比例4:3。与PAL制式是一样的，不同点主要在于色度(色调和饱和度的合成)信号的处理上。2020/2/15133-6多媒体计算机最常用的图象有三种：图形、静态图象和动态视频（也称视频）获得这三种图象可用下述方法：（1）计算机产生彩色图形、静态图象和动态图象；（2）用彩色扫描仪，扫描输入彩色图形和静态图象；（3）用视频信号数字化仪，将彩色全电视信号数子化后，输入到多媒体计算机中，可获得静态和动态图象。2020/2/1514视频卡的功能:全活动数字图像的显示、抓取、录制。从视频源中抓取定格，存储输出图像。按比例缩放、减切、移动、扫描视频图像色度、饱和度、亮度、对比度及RGB三色比例可调。可用软件选端口地址和IRQ具有若干个可用软件相互切换的视频输入源，以显示其中一个做活动显示。2020/2/15153-7视频采集卡的工作原理视频信号源（摄象机、录象机或激光视盘）的信号首先经过A/D变换，送到多制式数字解码器进行解码得到Y、U、V数据，然后由视频窗口控制器对其进行裁剪，改变比例后存入帧存储器。帧存储器的内容在窗口控制器的控制下，与VGA同步信号或视频编码器的同步信号同步，再送到D/A变换器模拟彩色空间变换矩阵，同时送到数字式视频编辑器进行视频编码，最后输出到VGA监视器及电视机或录象机。(图3－7)2020/2/1516（1）A/D变换（TDA8708或TDA8709）和数字解码（SAA7191）（2）窗口控制器（PCVIDEO82C9001A）（3）帧存储器系统（VRAM－TC524256Z-10）（4）数模转换和矩阵变换(SAA9065、TDA4680)（5）视频信号和VGA信号的叠加（6）数字式多制式视频信号编码部分论述视频信息获取的流程，并画出视频信息获取的流程框图。①彩色全电视信号经过采集设备分解成模拟的R、G、B信号或Y、U、V信号；②各个分量的A/D变换、解码、将模拟的R、G、B或Y、U、V信号变换成数字信号的R、G、B或Y、U、V信号，存入帧存储器；(1)视频信息获取的基本流程概述为：③主机可通过总线对帧存储器中的图像数据进行处理，帧存储器的数据R、G、B或Y、U、V经过D/A变换转换成模拟的R、G、B或Y、U、V信号；④经过编码器合成彩色电视信号，输出到显示器上。(2)视频信息获取流程框图主机处理采集设备Ａ/Ｄ变换与解码帧存储器显示设备Ｄ/Ａ变换与编码模拟GRBYUV数字GRBYUV数字GRBYUV模拟GRB彩色全电视信号2020/2/15213-8视频采集卡的安装1.视频采集卡的硬件安装2.视频采集卡的软件安装3-9视频采集卡的使用2020/2/1522多媒体计算机可用三种形式形成数字化的图形、图像及视频信息存放在机器中。扫描仪、视频设备、专用软件。一、静态图像文件；二、动态视频图像文件；2020/2/15233-10静态图像文件格式当前比较流行的图像格式：GIF（图形变换格式）、TIFF（标记图像文件格式）、TGA（目标图像格式）、BMP（位图Windows）、PCX（Zsoft公司）及MMP(Ani-Video公司)。2020/2/15243-11动态图像压缩编码文件格式动态图像的文件格式目前在多媒体计算机中常用的有：MPG、AVS及AVI等。2020/2/15253-12MPEG数据流结构的六个层次（1）序列层（Sequencelayer）（2）图像组层（GroupofPicture）（3）图像层（Picture）（4）片层（Slice）（5）宏块层（Macroblock）（6）块层（Blocklayer）2020/2/1526AVS和AVI动态图像文件格式：AVS和AVI是Intel和IBM公司共同研制的DVI（数字视频交互）系统动态图像文件格式。AVS文件格式只能在DVI系统硬件支撑下才能读写，系统的硬设备投资比较大。Intel公司最近又推出了Indeo系统，可以在Microsoft公司的VideoforWindows支持下，用软件播放AVI文件。AVS文件格式比起图像文件格式能够提供较多的灵活性，能够支持多个数据流同时操作。在DVI和Indeo系统中，保存AVS和AVI文件的介质，通常是CD-ROM，硬盘和RAM，只能使用二进制代码的单数据流。2020/2/15273-13数字视频图象数据量的计算（不压缩）PAL制25帧/秒；NTSC制30帧/秒）（时间帧率彩色深度（位）图象分辨率（像素）MBsS)(102410248