ICS35.240.40 CCSA11 团体标准 T/SCJR009—2025T/SCPCA014—2025T/CQJR038—2025 大语言模型金融领域应用评测指南 EvaluationguideforLargeLanguageModelinfinancialapplications 2025-12-25发布 2025-12-25实施 四川省金融学会 四川省支付清算协会发布 重庆市金融学会全国团体标准信息平台 全国团体标准信息平台 T/SCJR009—2025T/SCPCA014—2025T/CQJR038—2025 I目次 目次...................................................................................I 前言..................................................................................II 引言.................................................................................III 1范围.................................................................................4 2规范性引用文件.......................................................................4 3术语和定义...........................................................................4 4缩略语...............................................................................4 5评测原则.............................................................................5 6评测维度.............................................................................5 6.1概述.............................................................................5 6.2性能效率.........................................................................6 6.3信息抽取能力.....................................................................7 6.4信息归纳能力.....................................................................7 6.5指令遵循能力.....................................................................7 6.6规避风险能力.....................................................................8 6.7逻辑能力.........................................................................8 6.8工具调用能力.....................................................................8 6.9文本真实性.......................................................................9 6.10输出稳定性......................................................................9 6.11文本一致性......................................................................9 6.12语言多样性.....................................................................10 6.13情绪与智力能力.................................................................10 6.14想象力与类比关联能力...........................................................11 7评测方法............................................................................11 7.1准备评测数据....................................................................11 7.2设计评测工具....................................................................11 7.3搭建评测环境....................................................................12 7.4评测执行........................................................................12 7.5结果分析........................................................................12 附录A（资料性）评测实施指南...........................................................13 附录B（资料性）显存配置参考...........................................................24 参考文献..............................................................................25 全国团体标准信息平台 T/SCJR009—2025T/SCPCA014—2025T/CQJR038—2025 II前言 本文件按照GB/T1.1—2020《标准化工作导则第1部分：标准化文件的结构和起草规则》的规定 起草。 请注意本文件的某些内容可能涉及专利。本文件的发布机构不承担识别专利的责任。 本文件由四川新网银行股份有限公司、西南财经大学金融科技国际联合实验室、重庆国家金融科技 认证中心提出。 本文件由四川省支付清算协会、四川省金融学会、重庆市金融学会归口。 本文件起草单位：四川新网银行股份有限公司、西南财经大学金融科技国际联合实验室、重庆国家 金融科技认证中心、中国人民银行德阳市分行、阿坝州分行、攀枝花市分行、重庆银行股份有限公司、 浙商银行股份有限公司、四川天府银行股份有限公司、中国民生银行股份有限公司成都分行、兴业银行 股份有限公司成都分行、中信银行股份有限公司成都分行、四川银行股份有限公司、四川农商联合银行 股份有限公司。 本文件主要起草人：李秀生、毛航、卫浩、詹雪峰、陈思成、吴琼、林昱、陈少磊、王瑞成、杨雄 进、李开宇、董潇、余关元、聂丽琴、秦逞、吴娟、赖沁心、姚治菊、任启兴、张柠、宋卓霖、王海、 陈新剑、朱泓霏、程远恒、郑鄞昊、蒋世炜、胡齐军。 本文件为首次发布。 全国团体标准信息平台 T/SCJR009—2025T/SCPCA014—2025T/CQJR038—2025 III引言 随着AI技术的快速发展，大语言模型在金融领域的应用场景不断拓展，已深入应用于投资分析报告 生成、风险预警文本处理等多个核心环节。目前，市面上大语言模型数量众多，但质量参差不齐，部分 模型存在准确性、连贯性、逻辑性等方面的问题。因此，如何对大语言模型进行全面、客观的金融应用 评测，筛选出符合自身需求的大语言模型，对金融机构数字化智能化转型具有重要意义。 本文件旨在为金融机构提供一套科学、合理、实用的大语言模型评测体系，可以应用于大语言模型 选型等场景。金融机构可以通过该方法对多个大语言模型进行评测，分析不同大语言模型的优缺点，选 择最符合自身需求的大语言模型。 全国团体标准信息平台 T/SCJR009—2025T/SCPCA014—2025T/CQJR038—2025 4大语言模型金融领域应用评测指南 1范围 本文件提供了大语言模型在成渝地区金融领域应用评测的指南。 本文件适用于成渝地区金融机构对大语言模型能力评测的设计与实施。 2规范性引用文件 下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中，注日期的引用文件， 仅该日期对应的版本适用于本文件；不注日期的引用文件，其最新版本