这就翻车了?Reflection 70B遭质疑基模为Llama 3,作者:重新训练(翻车了呀表情包)

AIGC动态欢迎阅读

原标题:这就翻车了?Reflection 70B遭质疑基模为Llama 3,作者:重新训练

关键字:模型,权重,基准,开发者,表示

文章来源:机器之心

内容字数:0字

内容摘要:

机器之心报道

编辑:杜伟最近,开源大模型社区再次「热闹」了起来,主角是 AI 写作初创公司 HyperWrite 开发的新模型 Reflection 70B。

它的底层模型建立在 Meta Llama 3.1 70B Instruct 上,并使用原始的 Llama chat 格式,确保了与现有工具和 pipeline 的兼容性。

这个模型横扫了 MMLU、MATH、IFEval、GSM8K,在每项基准测试上都超过了GPT-4

o,还击败了 405B 的 Llama 3.1。凭借如此惊艳的效果,Reflection70B被冠以开源大模型新王。该模型更是由两位开发者(HyperWrite CEO Matt Shumer 和 Glaive AI 创始人 Sahil Chaudhary)花了 3 周完成,效率可谓惊人。

Reflection 70B 能不能经受住社区的考验呢?今天 AI 模型独立分析机构 Artificial Analysis 进行了独立评估测试,结果有点出乎意料。

该机构表示,Reflection Llama 3.1 70B 的 MMLU 得分仅与 Llama 3 70B 相

原文链接:这就翻车了?Reflection 70B遭质疑基模为Llama 3,作者:重新训练

联系作者

文章来源:机器之心

作者微信:

作者简介:

0
分享到:
没有账号? 忘记密码?