設(shè)置
  • 日夜間
    隨系統(tǒng)
    淺色
    深色
  • 主題色

無(wú)問(wèn)芯穹開(kāi)源全球首款端側(cè)全模態(tài)理解模型 Megrez-3B-Omni,支持圖像、音頻、文本理解

2024/12/16 12:43:22 來(lái)源:IT之家 作者:沛霖(實(shí)習(xí)) 責(zé)編:沛霖

IT之家 12 月 16 日消息,無(wú)問(wèn)芯穹今日宣布,開(kāi)源無(wú)問(wèn)芯穹端側(cè)解決方案中的全模態(tài)理解小模型 Megrez-3B-Omni 和它的純語(yǔ)言模型版本 Megrez-3B-Instruct。

官方表示,Megrez-3B-Omni 是一個(gè)為端而生的全模態(tài)理解模型,同時(shí)具備圖片、音頻、文本三種模態(tài)數(shù)據(jù)的處理能力:

  • 圖像理解方面,Megrez-3B-Omni 是目前 OpenCompass、MME、MMMU、OCRBench 等多個(gè)主流測(cè)試集上精度最高的圖像理解模型之一。

  • 文本理解方面,Megrez-3B-Omni 在 C-EVAL、MMLU / MMLU Pro、AlignBench 等多個(gè)權(quán)威測(cè)試集上取得端上模型最優(yōu)精度。

  • 語(yǔ)音理解方面,Megrez-3B-Omni 支持中文和英文的語(yǔ)音輸入,還能夠處理復(fù)雜的多輪對(duì)話場(chǎng)景,也能支持對(duì)輸入圖片或文字的語(yǔ)音提問(wèn),實(shí)現(xiàn)不同模態(tài)間的自由切換。

官方宣稱,與上一代及其他端側(cè)大語(yǔ)言模型相比,單模態(tài)版本的 Megrez-3B-Instruct 在推理速度上取得了顯著提升,最大推理速度可以領(lǐng)先同精度模型 300%

IT之家附相關(guān)鏈接如下:

廣告聲明:文內(nèi)含有的對(duì)外跳轉(zhuǎn)鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時(shí)間,結(jié)果僅供參考,IT之家所有文章均包含本聲明。

相關(guān)文章

關(guān)鍵詞:無(wú)問(wèn)芯穹,開(kāi)源

軟媒旗下網(wǎng)站: IT之家 最會(huì)買 - 返利返現(xiàn)優(yōu)惠券 iPhone之家 Win7之家 Win10之家 Win11之家

軟媒旗下軟件: 軟媒手機(jī)APP應(yīng)用 魔方 最會(huì)買 要知