AI 推理竞赛正在升温(推理大赛题目及答案)

AIGC动态欢迎阅读

原标题:AI 推理竞赛正在升温

关键字:芯片,模型,性能,类别,任务

文章来源:AI前线

内容字数:0字

内容摘要:

作者丨 Dina Genkina

译者丨明知山

策划丨褚杏娟

虽然英伟达的 GPU 在 AI 训练领域的主导地位仍然难以撼动,但似乎有迹象表明,在 AI 推理方面,竞争对手正在迎头赶上这家科技巨头,尤其是在能效方面。然而,英伟达新推出的 Blackwell 芯片的卓越性能可能很难被超越。

最近,ML Commons 发布了最新的 AI 推理竞赛 ML Perf Inference v4.1 的成绩单。这一轮竞赛包括使用 AMD Instinct 加速器的团队、最新的谷歌 Trillium 加速器、来自多伦多初创公司 UntetherAI 的芯片以及英伟达最新发布的 Blackwell 芯片的首次试水。另外两家公司,Cerebras 和 FuriosaAI,也发布了最新的推理芯片,虽然没有提交给 MLPerf 进行评测。

就像奥林匹克运动会一样,MLPerf 也有许多类别和子类别。提交数量最多的是“封闭数据中心”类别。封闭类别(相对于开放类别)要求提交者在不进行重大软件修改的情况下按照原样运行推理任务。数据中心类别评估的是批量处理查询的能力,而边缘类别则侧重于降低延迟。

每个类别有 9

原文链接:AI 推理竞赛正在升温

联系作者

文章来源:AI前线

作者微信:

作者简介:

0
分享到:
没有账号? 忘记密码?