IT之家 2 月 5 日消息,1 月 29 日新年之際,阿里云公布了其全新的通義千問 Qwen 2.5-Max 超大規(guī)模 MoE 模型,號稱在多個基準(zhǔn)測試中超越 DeepSeek V3 等競爭對手。
阿里云今日宣布,Qwen2.5-Max 在 Chatbot Arena 大模型盲測中超越 DeepSeek-V3、Open AI o1-mini 和 Claude-3.5-Sonnet 等模型,以 1332 分位列全球第七名,也是非推理類的中國大模型冠軍。
同時,Qwen2.5-Max 在數(shù)學(xué)和編程等單項能力上排名第一,在硬提示(Hard prompts)方面排名第二。
IT之家查詢公開資料獲悉,Chatbot Arena 是由 LMSYS Org 推出的大模型性能測試平臺,目前集成了 190 多種模型。
該榜單采用匿名方式將大模型兩兩組隊,交給用戶進行盲測,用戶根據(jù)真實對話體驗對模型能力進行投票。因此,Chatbot Arena LLM Leaderboard 成為業(yè)界公認的最公正、最權(quán)威榜單之一,也是全球頂級大模型的最重要競技場。
阿里云表示,在 Arena-Hard、LiveBench、LiveCodeBench、GPQA-Diamond 及 MMLU-Pro 等主流基準(zhǔn)測試中,Qwen2.5-Max 比肩 Claude-3.5-Sonnet,并幾乎全面超越了 GPT-4o、DeepSeek-V3 及 Llama-3.1-405B。
相關(guān)閱讀:
廣告聲明:文內(nèi)含有的對外跳轉(zhuǎn)鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時間,結(jié)果僅供參考,IT之家所有文章均包含本聲明。