6 月 28 日消息,hugging face 联合创始人兼首席执行 clem delangue 于 6 月 26 日在 x 平台发布推文,表示阿里云开源的通义千问(qwen)指令微调模型 qwen2-72b 在开源模型排行榜上荣登榜首。
hugging face 公布了全新的开源大语言模型排行榜,通过 300 片英伟达 h100 gpu,重新运行 mmlu-pro 等标准评估目前主流的大语言模型,并在其要点介绍中称 qwen2-72b 为“王者”,并表示中国的诸多开源模型在榜单上有一席之位。
他表示,为了提供全新的开源大模型排行榜,使用了 300 块 h100 对目前全球 100 多个主流开源大模型,例如,qwen2、llama-3、mixtral、phi-3 等,在 bbh、musr、mmlu-pro、gpqa 等基准测试集上进行了全新评估。
阿里巴巴开源的 qwen-2 72b 模型在激烈竞争中脱颖而出,不仅超越了科技巨头 meta 的 llama-3,还超越了法国知名大模型平台 mistralai 的 mixtral,成为了新的行业领军者。代码网援引官方博文附上榜单排行如下:
排名 | 新的榜单排名 |
---|---|
⭐ | qwen/qwen2-72b-instruct |
2 | meta-llama/meta-llama-3-70b-instruct |
3 | microsoft/phi-3-medium-4k-instruct |
4 | 01-ai/yi-1.5-34b-chat |
5 | cohereforai/c4ai-command-r-plus |
6 | abacusai/smaug-72b-v0.1 |
7 | qwen/qwen1.5-110b |
8 | qwen/qwen1.5-110b-chat |
9 | microsoft/phi-3-small-128k-instruct |
10 | 01-ai/yi-1.5-9b-chat |
发表评论