VOLTE语音质量评估测试

MOS：MeanOpinionScore，平均意见分PAMS：PerceptualAnalysisMeasurementSystem，知觉分析测量系统PSQM：PerceptualSpeechQualityMeasure，知觉通话质量测试PESQ：PerceptualEvaluationofSpeechQuality，知觉通话质量评估•ITU-TP.800–知觉分析测量系统–PerceptualAnalysisMeasurementSystem(PAMS)由英国电信最早提出，在大量主观测试的基础上，通过波形对比建立波形差与主观评分的客观算法，因此提供一个预测主观评分的手段。•ITU-TP.861–知觉通话质量测试-PerceptualSpeechQualityMeasure(PSQM)由荷兰KPN最早提出，在大量主观测试的基础上，分析现代通信系统中的设备性能等基础上（如信噪比，误码率，编码压缩损伤，传输损伤）建立语音质量与主观评分的算法。•ITU-TP.862–知觉通话质量评估–PerceptualEvaluationofSpeechQuality(PESQ)当今通信领域通用的标准，是前两者的结合产物。截至2014年1月，全球已经有超过40家运营商开始部署VoLTE服务。中国移动也宣布将在2014年底之前全网部署VoLTE服务。VoLTE和高清语音服务预期可以给客户提供更佳的语音用户体验，帮助运营商应对OTT语音冲击和ARPU值下降的不利趋势。对运营商而言，部署VoLTE将带来两方面的价值，一是提升无线频谱利用率、降低网络成本。二是提升用户体验。VoLTE的体验明显优于传统电路域语音。首先，高清语音和视频编解码的引入显著提高了通信质量；其次，VoLTE的呼叫接续时长大幅缩短，测试表明VoLTE比CS呼叫缩短一半以上。VoLTE通过全IP的4G网络和IMS服务器提供语音服务，服务的部署需要网络侧和终端侧都作出大量投资和研发。其实现原理和传统的2G、3G语音服务有很大不同，给运营商，终端厂商，芯片厂商带来了很大挑战。如何判断重金投资的网络和研发的终端真正带来了更好的用户体验？如何衡量新的VoLTE语音服务语音质量优于2G、3G网络和几乎免费OTT应用？如何衡量评估多种操作系统多种种类的终端在4G网络中语音性能孰优孰劣？回答以上问题需要采用相应测试系统对VoLTE服务进行准确，标准，可重复，自动化的专业测试评价。通常我们可以采用表一的KPI作为衡量VoLTE服务用户体验的指标。用户体验关键性能指标呼叫可靠性起呼成功率，掉话率起呼时间呼叫建立时间语音质量MOS分延迟口到耳语音延迟其中语音质量的至关重要，本文第二、第三节将分别介绍常用语音质量评价方法和Nomad-HD语音测试解决方案。二、语音质量评估方法介绍语音质量的评估方法包括主观评价和客观评价两大种类。主观评价指以人为主体进行语音质量评价，由参与评听的评听人根据预先约定的评估准则对语音质量进行打分，它反映了评听人对语音质量好坏的一种主观印象。主观评价方法比较繁杂，为了排除偶然因素，减少评价波动方差，需要参与评价的评听人数量较多（一般40人以上）。但是由于人是语音的最终接受者，这种评价方法是语音质量的真实反映。客观评估是指用机器自动判别语音质量．它从原理上又可分为两类评价方式：基于输入输出方式的主动式评估和基于输出方式的被动式评估。主动式的评价是建立在原始语音信号和失真语音信号的误差对比上，大多数这种方式的客观评估采用数值距离或者描述听觉系统如何来感知质量的听觉模型来量化语音质量的好坏；被动式的客观评价是仅以语音系统的输出信号来评估语音质量的好坏。主观评价国内外使用较多的主观评价方法包括平均意见分MOS（MeanOpinionScore）法，韵母可懂度测量DRT（DiagnosticRhymeTests），失真平均意见分DMOS（DegradationMeanOpinionScore），满意度测量DAM（DiagnosticAcceptabilityMeasure）等。在实际语音质量评价中，MOS法最为常见。ITUP.800标准定义了MOS评价方法。参加评价的评听人在听完测试语音后从下表5个等级中选择某一级作为他对语音质量的评价。全体实验者的平均分就是所测语音质量的MOS值。级别用户满意度4.0-5.0很好，听得清楚，延迟很小，交流流畅3.5-4.0稍差，听得清楚，延迟小，有点杂音3.0-3.5可以接受，有一定延迟，可以交流1.5-3.0勉强，听不太清，交流重复多次0-1.5极差，听不懂主观性测试的的优势是符合人对语音的感受，缺点是耗时，昂贵，可重复性低，受人的主观影响较大。主动式评价主动式评价方法主要由ITU标准组织定义，评价方法的发展沿革历史如图2.1。其中PESQ和POLQA是目前仍然广泛使用的语音质量评价方法。PSQM由于种种缺陷目前在实际中已经很少采用。图2.1ITU组织感知语音评价方法发展历史PESQ（PerceptualEvaluationofSpeechQuality）由英国电信和KPN共同开发，并在2001年被ITU采纳为P.862规范。它比较声源信号和退化信号并给出一个类似人工听力评估测试的MOS分值。PESQ不仅能测试像解码器这样的网络单元的效果，也能测量端到端的声音质量。它着重针对不同的信号退化原因，如编解码失真、错误、丢包、延时、抖动和过滤，给出-0.5到4.5的分值范围内的值。大多数情况下正常的分值范围在2到4.5之间。PESQ总的思路是对源信号和通过测试系统的退化信号进行电平调整到标准听觉电平，再用输入滤波器模拟标准电话听筒进行滤波。对通过电平调整和滤波后的两个信号在时间上对准，并进行听觉变换，这个变换包括对系统中线性滤波和增益变化的补偿和均衡。两个听觉变换后的信号之间的不同作为扰动（即差值），分析扰动曲面提取出两个失真参数，在频率和时间上累积起来，映射到对主观平均意见分的预测值。PESQ算法将话音的频率、响度等物理特性与人类心理上的感知特性的对应关系用数学模型来表示，即用客观数学模型的评价来模拟主观的评价。该算法采用时频映射、频率弯折和响度弯折等方法，尽可能将语音中可以感知的特性在数学上完美的表达。在PESQ模型中，提取出的语音特征都是与主观感觉直接相关的。PESQ算法有如下主要缺点：处理CDMA编码（如EVRC）不够准确；在特定的GSM/WCDMA网络条件下过于敏感；不能处理超宽带语音信号。为了解决PESQ的问题，更好的适应4G/LTE时代的语音质量测试需求，ITU-T于2006年开始了POLQA的开发工作2011年初正式发布为ITU-TP.863标准。主要特点可以覆盖最新的语音编码和网络传输技术，在用于3G，4G/LTE，VoIP网络时具有更高的准确性支持超宽带（50Hz~14KHz）语音传输，高质量语音传输。PESQ和POLQA算法的对比如图2.2所示。图2.2PESQ和POLQA算法特性对比从主动式评价方法的发展历程以及各种方法的性能来看基于输入一输出的客观评价的一些方法与主观评价的相关度已达到了0．95左右，能够比较真实的衡量语音质量。被动式评价被动式语音质量评价方法主要有两种：其一是直接从变化的IP网络损伤参数（如丢包、抖动和延迟）预测语音质量，如R-factor方法；其二是根据音频信号测量语音流量的语音质量（例如编解码器、回声、语言和／或讲话人），如ITU组织P.563标准。被动式评价的目的是建立感知语音质量和网络或音频语音流相关参数的关系，从而通过网络参数或语音参数来评价感知语音质量。被动式评价并非真实测量最终用户的实际体验，而是通过抓取网络参数或语音参数通过数学模型“预测”感知语音质量。三、NomadHD语音质量测试解决方案思博伦通信研发的SpirentNomadHD呼叫及语音测试系统能够针对任意网络上任意设备的高清语音和VoLTE服务，提供关键的语音质量分析能力。NomadHD可为高清语音质量测量和呼叫性能测试提供完整的测试包。该系统通过在高清语音和VoLTE语音质量测试中使用POLQA算法，可以在同一运营商的传统线路交换与分组交换语音之间进行切实可行的对比，并且可以对多种网络和技术进行跨越式对比。Nomad-HD支持带宽20KHz以上的高清语音和宽带POLQA评价算法。可以测试包括OTT语音在内的任何高清语音通话。云服务器部署在北美，欧洲，亚太等地区，包括美国，中国，中国台湾地区，日本，英国，德国等多个国家和地区；同时支持实验室测试和现网测试。优势：•理解VoLTE服务部署需求，广泛应用于运营商准入测试和芯片、终端厂商研发测试•客观比较VoLTE高清语音，OTT语音，2G、3G语音服务质量•支持现网和实验室测试，支持所有制式，操作系统手机•同时关联分析IP网络对语音质量、语音延迟、呼叫性能的影响，帮助寻找系统瓶颈•作为Fit4Launch的预测试，帮助加快通过运营商准入测试的周期。架构：Nomad桌面代理：Nomad桌面代理包括便携Nomad硬件，PC控制软件和IP分析模块。Nomad硬件单元包括4路语音测试接口，可以通过耳机接头或蓝牙接口同时测试最多4部终端。PC控制软件可以测量语音MOS分，语音延迟，起呼成功率，掉话率。Nomad桌面代理支持终端到终端呼叫，终端到服务器呼叫等多种测试方式。Nomad系统可以同时记录IP日志，结合语音质量进行IP分析。Nomad语音服务器：Nomad语音服务器由思博伦通信公司架设，通过E1或T1连接到PSTN网络。Nomad语音服务器支持窄带语音测试，包括VoLTE，2G/3G或者OTT语音服务。NomadVoLTE服务器：NomadVoLTE服务器连接到运营商IMS核心网，通过SIP协议进行语音通话，支持WBAMR（g.722.2）语音编码方式。Nomad-HD可以部署在实验室或者现网，可以跟思博伦通信CS8网络仿真系统进行集成，在仿真网络环境下对语音质量进行测试。