电视技术4

计算机与通信学院电视原理4.1数字彩色电视制式概述模拟彩色电视制式的缺陷高清晰度电视的需求数字技术的发展国际电信联盟(ITU)对高清晰度电视的定义：①垂直和水平方向的空间分解力大致是CCIR601号建议书中规定值的两倍，例如水平1920像素，垂直1080像素；②宽高比为16:9，屏幕对角线长度大于1米，并配有多声道优质伴音；③观看距离为屏幕高度的三倍时，图像的主观质量接近或达到观看真实景物的效果，相当于35mm电影放映的图像质量。4.1.1多极化的传输标准•美国1986年以前支持日本的MUSE制1987年提出发展ATV(AdvancedTelevision，高级电视)1990年5月,美国GI公司正式发表全数字HDTV传输制式——DigiCipher1993年5月成立HDTV大联盟(GrandAlliance,GA)，着手制定统一的美国HDTV标准1995年4月通过了ATSC(AdvancedTelevisionSystemCommittee)数字电视标准•欧洲1981年英国独立广播公司研制出C-MAC(MultipledAnalogueComponent)制:亮度、色差时分，两个色差逐行轮换，射频载波调频传送，视频带宽8.4MHz1986年提出HD-MAC制受美国数字制式影响，1993年开展DVB(DigitalVideoBroadcasting)研究1995年，欧洲成立了DVB联盟，共同制定数字电视的DVB标准：DVB-S(Satellite)、DVB-C(Cable)、DVB-T(Terrestrial)•日本–日本广播协会(NHK)1970-80年代提出模拟高清晰度电视制式——MUSE制（多重亚奈抽样编码）：1125行，60场，隔行扫描，16:9幅型比；色度信号与亮度信号时分复用：TCI（时间压缩合成）；多重亚奈抽样压缩信号频带：4场传送1幅HDTV图像；8.1MHz带宽，调频传送–1996年启动数字电视研制–1998年9月制订ISDB-T(IntegratedServicesDigitalBroadcasting-Terrestrial)数字电视地面广播系统标准，与欧洲的DVB-T类似•中国–2002年组建音视频技术（AVS）标准工作组–2006年视频部分正式颁布为国家标准•需要注意：上述标准适用于HDTV和SDTV4.1.2通用的压缩编码标准A/D转换信源编码信道编码信道解码信源解码D/A转换信道模拟彩色电视信号输入解码器编码器•数据压缩的必要性4:2:2，PAL：864×625×25×2×8=216Mb/s(108MHz)•数字电视系统框图通用的信源编码标准MPEG-2•MPEG(MovingPicturesExpertsGroup)即活动图像专家组，建立于1988年•MPEG-1：4:2:0采样压缩，每秒1.5Mbps的传输码率，图像大小352×240，扫描频率30场/秒。图像质量比电视略强，适合于非专业视频领域，如VCD等。•MPEG-4：一种广域传输标准，传输码率10kbps-1Mbps，于2000年正式成为国际标准:内容的交互性,高效的压缩性，通用的访问性•MPEG-2：1994-1996年提出的用于广播电视的视频压缩标准。•“Profile”和“Level”(“型”和“级”)按视频格式分四个级按编码工具分五个型“级”与“型”的若干组合构成MPEG-2视频编码标准在某种特定应用下的子集：对某一输入格式的图像，采用特定集合的压缩编码工具，产生规定速率范围内的编码码流。在20种可能的组合中，目前有11种是已获通过的，称为MPEG-2适用点。图像输入格式最大输出码率主型高型低级LLITU-R601标准的1/44Mb/s352×240×30pel/s352×288×25pel/s主级ML符合ITU-R601标准15Mb/s20Mb/s720×480×30pel/s720×576×25pel/s高1440级H14LITU-R601标准的4倍（4:3）60Mb/s80Mb/s1440×1152×30pel高级HLITU-R601标准的4倍(16:9)80Mb/s100Mb/s1920×1152×30pel码率简单型SP主型MP信噪比可分级型SNRP空间可分级型SSP高型HP低级LL44主级ML15151520高1440级H14L606080高级HL80100SimpleProfileMainProfileSNRScalableProfileSpstiallyScalableProfileHighProfile020406080100HighLevelHigh-1440LevelMainLevelLowLevelSimpleProfileMainProfileSNRScalableProfileSpstiallyScalableProfileHighProfileMPEG-2适用点4.2.1视频信源编码的理论依据•原始图像数据在空间及时间上的统计冗余度很大，存在大量无需传送的多余信息：–图像的相邻像素、相邻行之间存在很强的相关性——空间相关性–相邻场或帧对应像素间存在相关性——时间相关性–信息保持无损压缩编码•人眼对图像细节、幅度的变化、图像的运动不同时具有最高的分辨力：–信息非保持有损压缩编码4.2视频信源编码原理4.2.2预测编码原理•预测编码概述–预测编码也称为差分脉冲编码调制(DPCM，DifferentialPulseCodeModulation)，使用已编码像素的线性组合对未编码像素进行预测，传送其预测误差（残差）。–约80%-90%以上的残差信号的绝对值落在16-18个量化级以内。可以用较少的比特表示差值，达到数据压缩的目的。–帧内预测采用1阶前值预测，利用空间相关性；帧间预测采用1阶前向预测或2阶双向预测，利用时间相关性。–预测编码的主要缺点是抗误码能力差。若传输中产生误码，由于递归预测算法，对于帧内编码会使误差扩散到图像中一个较大的区域，对于帧间编码会使误差扩散到后续的若干帧中。为便于联合运用帧内编码和帧间编码技术，把由连续的电视画面组成的视频序列（sequence）划分为许多图像组（GOP,GroupofPicture），每个图像组由几帧或十几帧图像组成，这些图像相互间存在预测和生成关系。采用帧内预测编码的图像称为I图像(Intra-CodedPicture)采用前向帧间预测编码的图像称为P图像(Predictively-CodedPicture)采用双向帧间预测编码的图像称为B图像(Bidirectionally-CodedPicture)下页为由9帧图像组成的GOP示意图编码器输入端或解码器输出端的显示顺序编码器输出端或解码器输入端的编解码顺序视频数据结构块:Block8×8像素块宏块:Macroblock16×16像素块像条:Slice——由多个Macroblock组成图像组：GOP视频序列：Sequence图像：Picture宏块的组成124350YCrCb12375460YCrCb12437568910110YCrCb4:2:0格式的宏块4:2:2格式的宏块4:4:4格式的宏块宏块的三种构成方式，其中亮度块的数目均为4，而色度块的数目分别为2、4和8。0000ˆ(1)()ynyn在对I图像进行帧内预测编码之前，首先对每一个8×8的像块进行二维离散余弦变换（DCT，DiscreteCosineTransform），将像块变换为由8×8个变换系数组成的系数块。位于系数块左上角的第一个系数是像块中8×8个像素的平均值，代表像块的直流分量，称为DC系数，其余系数为AC系数。帧内预测编码是对各个系数块的DC系数进行的，目的是去除在相邻像块的直流分量之间较强的相关性。帧内预测编码只在像条所在的区域进行。帧内预测编码采用前值预测：帧间预测编码是以图像组GOP为单位进行的I图像——帧内编码图像，其编码不依赖于其它图像，它还是P图像和B图像编码、解码的参考图像。使用周期性的I帧便于初始化接收机和捕获频道。I帧出现的频度可以变化，由编码器选择。P图像——前向编码预测图像，像素的预测值为其前面一帧I图像或P图像中相应像素值，即帧间运动补偿前值预测。B图像——双向预测编码图像，像素的预测值为其前后相邻帧相应像素值的加权平均。B图像不能作为其它图像的编码参考图像。使用B帧可提高压缩效率，但需要帧存储器。•帧间预测编码中的运动补偿最简单的时域预测就是用前一帧作为当前帧的预测参考帧。一个视频序列里两个相邻帧如右图所示。第一帧作为第二帧的参考帧，残差是第二帧与参考帧之差。在右图中，中间灰度代表差值为零，浅灰和深灰分别对应正、负差值。这种简单预测的明显问题是残差帧中剩余能量太多，也就是说预测后还有很多信息需要压缩。多数残差是由于两帧之间物体运动引起的，所以更好的预测是在两帧之间进行运动补偿。运动补偿预测示意图•运动矢量：表示从编码帧到参考帧像素运动的方向和距离。•运动估值：通过比较参考帧与编码帧中的图像，求出运动物体像素的运动矢量。•运动补偿：考虑了运动矢量的帧间预测称为具有运动补偿的帧间预测。•采用块匹配算法进行运动估值–摄像机所摄取的景物的运动可能是十分复杂的，精确对每个像素进行运动估值是十分困难的。–在许多情况下物体上的各个像素均做相同的运动，这时只需估计其整体的运动就可以了。块匹配算法：对每个编码帧宏块中的16×16亮度块，在参考帧中一定搜索范围内，搜索与它最相似的亮度块——匹配块，并根据匹配块与它的坐标差，确定运动矢量。像块匹配程度的判定常采用平均绝对差准则（MAD，MeanAbsoluteDifference），即在搜索范围内按下式求帧间像素块亮度差的绝对值的平均值。16161111(,)(,)(,)256kkmnMADijfminjfmn当MAD(i,j)达到最小时，两个像素块匹配。此时运动矢量为MV（i,j）。这种搜索方法称为全搜索，运算量相当大。为加快搜索过程，提出了三步法、共轭方向法、正交搜索法等，但效果不如全搜索，全搜索仍然是通用的方法。;MiMNjNHunanUniversityofTechnologyMPEG-2中运动补偿的精度是半像素，H.264中运动补偿的精度是四分之一像素，都需要在参考帧中根据已知整像素值，用线性内插的方法得到半像素和四分之一像素值以后，再进行块匹配计算。HunanUniversityofTechnologyHunanUniversityofTechnology•B帧图像的帧间预测编码预测值是其前面参考帧的前向预测值与其后面参考帧的后向预测值的平均值——双向预测。在进行运动补偿时，需要前向和后向两个运动矢量。图4-9在图像序列中，P帧和B帧传送的是像素值与预测值的差值和每个宏块的运动矢量。考虑到邻近宏块间运动矢量存在相关性，对运动矢量也采用预测编码。•帧间预测模式为了既能处理逐行扫描图像，又能处理隔行扫描图像，数字电视的帧间预测编码主要有两类：帧预测和场预测。帧预测：预测来自于最近的重构参考图像。ReferenceFramePossibleInterveningB-pictures(Notyetdecoded)ReferenceFramePossibleInterveningB-pictures(Notyetdecoded)ReferenceFramePossibleInterveningB-pictures(Alreadydecoded)P帧预测示意B帧预测示意•P场预测：预测来自于最近的重构参考图像。编码帧中第一场图像的预测TopReferenceFieldBottomReferenceFieldPossibleInterveningB-pictures(Notyetdecoded)TopReferenceFieldBottomReferenceFieldPossibleInterveningB-pictures(Notyetdecoded)编码帧中第二场图像为底场的预测•B场预测：用于预测的两个