Meta回应大模型Llama 4训练作弊争议
创始人
2025-04-08 12:20:48

Meta公司刚刚发布Llama 4 Scout与Llama 4 Maverick,但随后就被曝出模型训练测试集作弊。

在海外留学求职交流论坛“一亩三分地”上,发帖人自称是参与Llama 4训练的内部员工,他表示,Llama 4的内部模型性能始终无法达到开源SOTA(State-of-the-Art,顶尖水平)基准,公司领导层提出在训练后期将各种基准测试的“测试集”数据混入训练或微调数据中,以交出一份“好看”的成绩单。

知名科技媒体TechCrunch也发文质疑Llama 4的性能测试存在误导性。

针对舆论,4月8日凌晨,Meta AI部门副总裁Ahmad Al-Dahle发文回应表示,Llama 4一准备好就发布了,所以,不同服务中模型质量难免会有差异,Meta很快会修复这些漏洞提升性能,同时否认在测试集上进行了预训练。

相关内容

热门资讯

招商轮船股价涨5.17%,工银... 12月22日,招商轮船涨5.17%,截至发稿,报8.95元/股,成交3.22亿元,换手率0.46%,...
招商轮船股价涨5.17%,中银... 12月22日,招商轮船涨5.17%,截至发稿,报8.95元/股,成交3.23亿元,换手率0.46%,...
雅创电子股价涨5.39%,海富... 12月22日,雅创电子涨5.39%,截至发稿,报43.82元/股,成交1.36亿元,换手率3.54%...
万丰股份股价涨5.02%,广发... 12月22日,万丰股份涨5.02%,截至发稿,报19.02元/股,成交4671.29万元,换手率5....
招商轮船股价涨5.17%,国联... 12月22日,招商轮船涨5.17%,截至发稿,报8.95元/股,成交3.24亿元,换手率0.46%,...