德国AI联盟发布开源30B模型Soofi S
结论前置 / TL;DR
德国AI联盟发布开源大语言模型Soofi S(300亿参数),在英语和德语多项基准测试中表现领先。但其技术报告3.0版承认,科学类评测GPQA的部分题目意外混入训练数据,团队已移除该基准并重算全部结果。
Soofi S:双语领先的开源30B模型
德国AI联盟正式发布Soofi S——一款参数量达300亿的开源大语言模型。该模型在英语与德语主流基准测试中均取得当前开源模型中的领先成绩,凸显其跨语言能力。
训练数据污染事件与响应
在Soofi S技术报告第3.0版中,联盟坦承:科学难题评测集GPQA(General Physics QA)的部分测试题意外泄露并混入了模型训练数据。这一问题由社区研究人员通过审查联盟公开的数据集发现。联盟随即从评估体系中移除GPQA,并对所有性能指标进行了重新计算与更新。
本文为企业智脑(优秘智能)编译整理自公开资讯,信息与观点以原文为准,仅供参考。阅读原文(The Decoder) →