← 返回资讯热点
AI热点雷峰网发布时间:2026-07-02 10:46热度 182

全球首份大语言模型安全防范能力测评报告在北京发布

大语言模型正在成为公众获取、理解和使用科技知识的重要工具,但是,它们能辨善恶吗?能否识别用户意图、理解具体语境、控制输出粒度,并在有用性与安全性之间保持稳定边界?7月2日于北京举行的2026全球数字经济大会云智算安全论坛上,《全球大语言模型安全防范能力测评报告(2026)》正式发布,该报告依据一套中国机构自主研发的科学测评方法体系,对全球主要大语言模型进行了一次统一标准的“体检”,作出了回答。(雷峰网) 这份由东壁科技数据有限责任公司(“东壁科技数据”)联合上海财经大学数字经济学院共同打造的研究成果,是全球首份大语言模型科技安全专项测评报告,也是首份大语言模型科技向善导向测评报告。报告以313条科技类高风险问题为测试集,覆盖38个国内外大语言模型,重点考察模型能否在正常的科技学习、科研的防护需求与潜在违法犯罪滥用之间,保持稳定、安全且可解释的边界,并同步发布多维度安全实力排名。 测评显示,多数模型具备基础拒答能力,但在前缀注入、场景伪装、情感伪装,以及伪装与示例诱导结合的复合攻击下,部分模型的安全边界明显承压。报告提出,科技安全治理不能仅以“拒答率”衡量,还应同时关注模型的意图识别能力、信息披露尺度和“可靠且高风险”输出。 图注:《全球大语言模型安全防范能力测评报告(2026)》正式发布 立足真实风险补齐行业测评短板 上海财经大学数字经济学院院长、报告牵头编制人赵琳在论坛上对报告进行了解读。他表示,科技知识在正常场景中可以服务于教学、研究、产业创新和公共安全,但当它被置于特定目的、特定语境和特定对象面前,就可能转化为现实危害。从前沿模型安全框架看,国际上已经将生物化学、网络安全、自动化代理等高风险能力纳入重点评估范围。 当下,国内外围绕大模型安全、伦理和风险管理已经形成多层级测评与治理格局,为大模型安全治理提供了重要基础,但在科技类高风险场景下仍存在三方面缺口——通用内容安全测评较多,高风险科技语境测评不足。前沿能力评估较多关注极端能力阈值,对日常科技滥用场景覆盖不足。以及,通用有害问答数据集较多,基于真实案件和真实科技滥用语境构建的测试集不足。因此,构建科技类高风险场景的专项测评,是对现有测评体系的重要补充。 本次最终测试集包含313条科技类高风险问题,结果分析覆盖38个国内外模型,并按国内/国外、开源/闭源、大规模/小规模等属性进行分组比较。为辅助评估科技内容可靠性,报告从东壁全球科技文献数据平台(Dbdata)选取94,108份科技文献材料,并结合34,452条科技类百科条目构建RAG检索参考,用于判断模型回答中的科学事实、技术原理、因果逻辑和不确定性表述是否可靠。 赵琳提到,科技安全治理不能仅以“拒答率”衡量,还应同时关注模型的意图识别能力、信息披露尺度和“可靠且高风险”输出。报告同时设置意图识别能力、滥用风险可控性和科技内容可靠性三个维度,用于识别

来源:雷峰网
说明:本站展示中文整理摘要,便于快速判断价值;完整内容和版权归原站所有。