ICS35.040 L 71 SJ 备案号： 中华人民共和国电子行业标准 SJ/T116892017 音频编码质量主观测试规范 Specification for subjectivetest of audio codingquality 2017-11-07发布 2018-01-01实施 发布 中华人民共和国工业和信息化部 SJ/T11689-2017 目 次 II 前言 1范围 2规范性引用文件 3术语和定义 4 缩略语 测试方法的适用性 5 6 测试方法。 6.1 ACR 6.2 DCR 及价 6.3 比较 CCR 8 6.4 带隐 参考和基准自 CMUSHRA 带队 6.5 三次明 义盲听评法 11 6.6 用 真选测 式的双！进较听详方法 12 意见测 6.7 13 7 测试环 15 8 测试材料 15 8.1 15 8.2 语音利 15 8.3 音乐材 17 8.4 噪声材料 17 数据分析 17 9.1 基本数据分析 17 活分ND 9.2 对话意见测试的补充数据 18 19 9.3 数据有效性 10不同测试条件间的比较 20 10.1 概述。 20 10.2 统计分析 20 10.3 假设检验 21 附录A（资料性附录） 对话意见测试问题设计参考 22 附录B（资料性附录） 测试条件间比较示例 24 参考文献 26 SJ/T11689—2017 前言 本标准按照GB/T1.1一2009《标准化工作导则第1部分：标准的结构和编写》给出的规则起草。 请注意本文件的某些内容可能涉及专利。文件的发布机构不承担识别这些专利的责任。 本标准由工业和信息化部电子工业标准化研究院归口。 本标准主要起草单位：北京理工大学、工业和信息化部电子工业标准化研究院。 本标准主要起草人：王晶、谢湘、李婧欣、董桂官、高麟鹏。 II SJ/T116892017 音频编码质量主观测试规范 1范围 下列文件树于文件的应用是必不可少 凡是日期的引用文件，仅注月 期版 反本适用于本文件。 凡是不注日期的引用文件， 其最新版木（包所有的修改单适用 手本文件 ITU-T5GJ终端和主 客观评价方法 观测量设备一话音领 (Terminals and subjective and objeg Objectivemeas uringapparatus pjectvemeasurementof activespeechlevel ITU-RBS.1N6-11997 包括多声道系统内在的音频系统小损伤的主观评价方法（Methodsforthe subjectiveassessmentof small impairments in audio systems includingmultidbannelsound systems) 3术语和定义 下列术语和定义适用于本文件。 3. 1 测试条件testcondition 不同编码方式或者一种编码方式下的不同编码条件。 3.2 测试序列testsequence 用于主观测试的语音或音频信号样本。 注：包括尚未经测试条件处理和经测试条件处理的语音材料、音乐材料、噪声材料。 3.3 测试人员testsubject 主观测试中对测试序列进行评价和打分的人员。 SJ/T11689—2017 3. 4 平均意见分 meanopinionscore 测试人员对测试序列进行打分的分数平均值 3. 5 听音意见测试 listening opiniontest 主观测试中由每一名测试人员仅对播放的测试序列进行听音和打分的测试方法。 3.6 对话意见测试 conversationalopiniontest 主观测试中由两到多名测试入员进行对话后根据交谈过程的主观感受给出评分意见的测试方法。 3. 7 绝对等级 absolutecategory 测试人员对单个测试序列的主观音质进行评判的级别。 3.8 失真等级 及degradationcategory 经过处理后的测试序列相比处理前的测试序列在主观质量上的失真程度。 3, 9 比较等级 comparisoncategory 测试人员对两个测试序列的主观音质进行对比评判的级别。 3.10 听音质量 量listeningquality 测试人员对测试序列中语音或音频样本质量的主观听觉感受。 3. 11 听音努力度 listening-effort 测试人员对测试序列中语句内容的意思进行理解所需要付出努力的程度。 3.12 响度偏好loudness-preference 测试人员对测试序列的音量等级在主观听觉上的偏好程度。 3.13 参考条件 reference condition 为比较不同测试条件下测试结果所设定的作为对比的基准条件。 3.14 待测样本samplesundertest 测试过程中需要测试人员进行打分的测试序列。 注：包含作为对比的原始样本，以及测试序列中经过测试条件处理的语音材料、音乐材料、噪声材料。 3.15 测试小节testsection 主观测试中包含若干测试序列的每一部分。 3.16 隐藏参考hiddenreferences 主观测试中每个测试小节的测试序列所隐含的原始音频样本。 3.17 隐藏基准hiddenanchors 主观测试中每个测试小节的测试序列所隐含的至少一个窄带音频信号。 2 SJ/T11689-2017 3.18 预测试preliminarytest 在正式主观测试之前进行的测试。 注：预测试的目的是让测试人员熟悉测试过程和评分尺度， 3.19 对话式材料conversationalmaterial 用于对话意见测试，不需要事先录制测试序列，而是将交谈双方的对话任务进行一定的约束并给出 实例的材料。 4缩略语 下列缩略语适用于本文件。 ND ACR：绝对等级评价（Abblute Cate tegeryrRatmg) BT：优于(BeuerPhan) CCR：比软等级价(eomparisonCategoryRating) DCR: 失真等评桥(Degradation CategoryRating) 当正quvalent EQU: FB: 频带（FBal MNR 上调制操声参 元(ModulatedNoiseReferencenit) MOS 意见分 OpmionScong MUSHRA: 带隐藏参 和基准的多激奶 武(Mmlti-Stimuluest withHidde cesandAnchor) NB: arrowBand) NWT F(Not WorseThan) SNR Noise Ratlo) SWB SuperWide Band) VoIP: 网络 即通过IP网络传送语音的形式（VoiceoverIntem Peotoc WB: 宽带（Wiee Band) WT：次于WotseThan) 5测试方法的适用性 RDS 出的建议性约定，见表1。 3 SJ/T11689—2017 表1不同测试方法的适用范围 序号 名称 类别 适用场合 适用的编码方式举例 - ACR 听音意见 主要适用于语音信号的主观质量测试， 广 ITU-TG系列语音编码器（例如TTU-T 测试 泛用于模拟和数字电话线路以及电信设备 G729），MPEG-4音频编码中语音编解 的输出声音质量评价，主要面向数字语音 码选项（ISO/EC14496-3），3GPP的 编解码器 AMR系列语音编码器（3GPPTS26.071 2 DCR 昕音意见 主要适用于语音信号的主观质量测试，因 AMR-NB,3GPPTS26.171AMR-WB), 测试 DCR对于较高质量语音系统比ACR的灵 语音和音频混合编码（3GPPTS26.290 敏度更高，评价性能相近的语音信号处理 AMR-WB+,GB/T20090.10-2013) 算法宜选用DCR 3 CCR 听音意见 主要适用于语音信号的主观质量测试，对 测试 于提高输入语音质量的系统（例如噪声消 除系统或语音编码器的算法局部优化）宜 选用CCR方法 对话意见 对话意见 提供更接近真实环境下电话用户对话应用 面向网络优化后ITU-TG系列语音编码 测试 测试 场景，主要面向IP网络中的语音编解码 器（例如ITU-TG718），MPEG-4 器，也可用于评价整个语音通信系统或由 AAC-ELD增强的低延迟音频编码器 于某些具体因素（如延迟）造成的通讯失 (ISO/IEC14496-3)3GPPTS26.441 真 EVS编码器，VoIP语音编码器 MUSHRA 听音意见 主要适用于音乐信号的主观质量测试，宜 ITU-TG719，3GPP 26.290 5 TS 测试 评估中等音频质量的数字音频系统，例如 AMR-WB+，3GPPTS26.401EAAC+， 音频流媒体、数字广播中的音频信号等 GB/T17975.7(MPEG-2AAC),ISO/IEC 14496-3（MPEG-4音频），ISO/IEC 23003-1（MPEG环绕声） 带隐藏参 听音意见 主要适用于音乐信号的主观质量测试，宜 GB/T17191.3（MPEG-1音频），GB/T 6 考的三次 测试 评估小损伤的高质量音频系统，包括立体 17975.3（MPEG-2音频），GB/T17975.7 听音双盲 声和多通道音频编码器，以及高保真音频 （MPEG-2AAC），杜比环绕声（Dolby 听评法 或高质量广播音频 AC-3)GB/T22726-2008 7 用于预选 听音意见 主要适用于音乐信号的主观质量测试，宜 高质量音额编码器中无法提前预估音 测试的双 测试 作为表1中方法6的预选测试方法，以便