IT之家 5 月 30 日消息，谷歌在 I / O 2024 開(kāi)發(fā)者大會(huì)上，宣布將 Gemini 1.5 Pro 上下文窗口增加至 200 萬(wàn)個(gè) tokens，那么 Gemini 1.5 Pro 性能究竟有多強(qiáng)悍？
根據(jù) LMSYS Org 公布的總排行榜對(duì)比，通過(guò) Arena Elo 系統(tǒng)的測(cè)量，Gemini-1.5-Pro-API-0514 和 Gemini-Advanced-0514 都接近 GPT-4o。
上述兩款模型在中文方面的表現(xiàn)也非常優(yōu)秀，Gemini 1.5 Pro 在“hard prompts”類別中也非常接近。
IT之家注：Arena Elo 系統(tǒng)通過(guò)讓用戶匿名投票決定哪個(gè)模型在隨機(jī)對(duì)戰(zhàn)中表現(xiàn)更好來(lái)衡量大型語(yǔ)言模型（LLMs）的技能，并像國(guó)際象棋中的 Elo 系統(tǒng)一樣更新用戶的評(píng)分，整體而言更加客觀。
廣告聲明：文內(nèi)含有的對(duì)外跳轉(zhuǎn)鏈接（包括不限于超鏈接、二維碼、口令等形式），用于傳遞更多信息，節(jié)省甄選時(shí)間，結(jié)果僅供參考，IT之家所有文章均包含本聲明。