4 月 7 日消息,Meta 公司上周发布了一款名为 Maverick 的新旗舰 AI 模型,并在 LM Arena 测试中取得了第二名的成绩。然而,这一成绩的含金量却引发了诸多质疑。据多位 AI 研究人员在社交平台 X 上指出,Meta 在 LM Arena 上部署的 Maverick 版本与广泛提供给开发者的版本并不一致。

据悉,Meta 在其公告中明确提到,参与 LM Arena 测试的 Maverick 是一个“实验性聊天版本”。而根据官方 Llama 网站上公布的信息,Meta 在 LM Arena 的测试中所使用的实际上是“针对对话性优化的 Llama 4 Maverick”。这表明,该版本经过了专门的优化调整,以适应 LM Arena 的测试环境和评分标准。
然而,LM Arena 作为一项测试工具,其可靠性本身就存在一定的争议。尽管如此,以往 AI 公司通常不会对模型进行专门的定制或微调,以在 LM Arena 上获得更高的分数,至少没有公开承认过这种做法。
这种对模型进行针对性优化,然后只发布一个“普通版”的行为,给开发者带来了诸多困扰。因为这使得开发者难以准确预测该模型在特定场景下的实际表现。
目前,Meta 公司以及负责维护 LM Arena 的 Chatbot Arena 组织暂未对此做出回应。(新闻来源:IT之家)
商务合作:13146398132
媒体合作:13341147250
爆料投稿:editor@vrarworld.cn
版权声明:本文为VRAR星球原创,任何单位及个人未经授权不得转载,否则将依法追究侵权责任。
如需转载请联系13341147250 / editor@vrarworld.cn 申请授权,转载时请注明来源并保留VRAR星球原文链接。
本文部分图片及视频来源于互联网,如涉及侵权请联系我们删除。

世界模型“Genie 4”发布,可同时实时生成环境音效和对话

NVIDIA将向Meta投资30亿美元,宣布扩大在人工智能模型Muse方面的合作

全球首款Android XR智能AR眼镜XREAL AURA发售,1099美元起

XR创意开发者开发模组,让30年经典《超级马里奥64》登陆MR,重拾当年游玩魅力

Urth携手卡纳德比亚开展PoC验证,依托元宇宙+AI推动工厂业务革新

世嘉公布全新VR游戏《死亡之屋:重生》的最新细节

宁夏首个AIXR医学沉浸式教学中心投用

日本东京理科大学公布使用XREAL One Pro进行膀胱癌手术的案例研究

MyDearest开始为XREAL AURA提供内容开发支持解决方案

世界模型“Genie 4”发布,可同时实时生成环境音效和对话

NVIDIA将向Meta投资30亿美元,宣布扩大在人工智能模型Muse方面的合作

全球首款Android XR智能AR眼镜XREAL AURA发售,1099美元起

NIL Technology宣布推出为智能眼镜和XR头显的眼动追踪设计的metaEye™摄像头

立邦漆发布“nax VRP-X”,一款用于汽车修补漆喷涂的VR培训工具

Sandbox VR将于10月30日开设美国迈阿密地区的第二家门店

索尼旗下的XYN公司公布了其利用专有算法从图像生成逼真3DCG资产

NVIDIA在Hugging Face上发布了2575个支持模拟的3D资源

VR沙盒游戏《Voxel Playground》登陆PC VR平台