标准号：T/SAIAS 019-2024
标准名称：金融大模型应用测评指南
团体名称：上海市人工智能行业协会
发布日期：2024年11月16日
实施日期：2024年11月18日
本标准旨在制定一套金融大模型评测框架体系，一是能准确评估模型在语言理解、逻辑推理、风险控制等方面的性能，以促进改进升级；二是可保障金融安全与合规，规范数据处理确保安全，促使应用符合监管要求降低合规风险；三是推动行业发展与创新，实现标准化规范化，降低开发与应用成本，激发创新活力。本标准提出了大模型在金融垂直领域应用需要具备的核心能力及评测方法，包括模型基础能力、金融安全与价值对齐能力、金融风险控制能力、金融专业认知能力、金融业务辅助拓展能力五个方面，并给出评测方法。
起草单位：上海库帕思科技有限公司、上海市人工智能行业协会、上海金融业联合会、上海人工智能创新中心、上海财经大学、工业互联网创新中心（上海）有限公司、中国银联股份有限公司、上海商汤智能科技有限公司、广东二十一世纪经济报道报社有限公司、东方财富信息股份有限公司、中国太平洋保险股份有限公司、中信证券股份有限公司、智能投研技术联盟（ITL）、上海金融科技产业联盟、上海报业集团、上海立信会计金融学院、青海省大数据金融与人工智能应用技术重点实验室、上海万行道和人工智能科技有限公司、上海移动研究院、中国联合网络通信集团有限公司上海市分公司、北京文因互联科技有限公司、上海道客网络科技有限公司
起草人：山栋明、钟俊浩、屠友富、郑忠斌 、黄海清、方金武、张永启、张立文、雎晓燕、汪健、张恺、姚硕、施佳樑、刘志毅、尚琪、孙骁、许少华、李览青、刘隽欢、蒋龙泉、李贤、赵春昊、王子靖、彭乾、金国强、闵敏、程宏、蔡维格、陈蔚、鲍捷、任丽君、陈胜禄、张裕珍、刘延川、刘红、卢恒、张红兵、杨红兵、侯玲玉、刘泽雷