找回场子:模型力压

IT之家8月14日消息,谷歌上周发布最强Gemini1.5Pro模型,在LMSYS的聊天机器人竞技场(ChatbotArena)比赛中取得第一名,而OpenAI迅速“找回场子”,最新chatgpt-4o-latest模型重夺第一。

OpenAI公司上周发布了gpt-4o-2024-08-06,其API支持结构化输出;昨日再次发布了名为chatgpt-4o-latest的全新前沿模型,是GPT-4o的最新版本,上下文窗口输入最高128000个词元(tokens),输出最高16384个词元。

LMSYS的聊天机器人竞技场简介ChatbotArena由伯克利大学主导团队LMSYSOrg近日发布了一个针对大语言模型的基准平台ChatbotArena。

该平台采用匿名、随机的方式让不同的大模型产品进行对抗评测,基于国际象棋等竞技游戏中广泛使用的埃洛等级分系统,通过用户投票产生,系统每次会随机选择两个不同的大模型机器人和用户聊天,并让用户在匿名的情况下选择哪款大模型产品的表现更好一些。

最后系统根据用户的选择判定大模型产品的积分,以排行榜的形式出现在首页中。

chatgpt-4o-latest最新成绩谷歌的实验性Gemini1.5Pro模型上周以1297分的成绩夺得第一名,这是谷歌首次登顶LMSYS的聊天机器人竞技场。

OpenAI凭借新的chatgpt-4o-latest模型,以1314分的最高分夺回了竞技场第一名的宝座。

得分显示,新版ChatGPT-4o在编码、指令遵循和硬提示方面都有显著提高,找回场子:模型力压IT之家附上相关成绩如下:

总成绩:第一名

数学:#1-2

编程:第一名

艰难提示词(HardPrompts):第一名

指令跟随(InstructionFollowing):第一名

长提问(LongerQuery):第一名

Multi-Turn:第一名

免责声明:本网站部分内容由用户自行上传,若侵犯了您的权益,请联系我们处理,谢谢!联系QQ:2760375052

分享:

扫一扫在手机阅读、分享本文