設(shè)置
  • 日夜間
    隨系統(tǒng)
    淺色
    深色
  • 主題色

AMD Ryzen AI CPU 和 Radeon RX 7000 GPU 現(xiàn)支持本地運(yùn)行 LLM 和 AI 聊天機(jī)器人

2024/3/7 14:43:35 來(lái)源:IT之家 作者:故淵 責(zé)編:故淵

IT之家 3 月 7 日消息,AMD 公司今天發(fā)布公告,表示用戶可以本地化運(yùn)行基于 GPT 的大語(yǔ)言模型(LLM),從而構(gòu)建專屬的 AI 聊天機(jī)器人。

AMD 表示用戶可以在包括采用 AMD 新 XDNA NPU 的 Ryzen 7000 和 Ryzen 8000 系列 APU,以及內(nèi)置 AI 加速核心的 Radeon RX 7000 系列 GPU 設(shè)備上,本地運(yùn)行 LLM 和 AI 聊天機(jī)器人。

AMD 在公告中詳細(xì)介紹了運(yùn)行步驟,例如運(yùn)行 70 億參數(shù)的 Mistral,搜索并下載“TheBloke / OpenHermes-2.5-Mistral-7B-GGUF”;如果運(yùn)行 70 億參數(shù)的 LLAMA v2,搜索并下載“TheBloke / Llama-2-7B-Chat-GGUF”。

AMD 并不是第一個(gè)這樣做的公司,英偉達(dá)(NVIDIA)最近也推出了 "Chat with RTX",這是一個(gè)由 GeForce RTX 40 和 RTX 30 系列 GPU 支持的人工智能聊天機(jī)器人。它采用 TensorRT-LLM 功能集進(jìn)行加速,基于本地化數(shù)據(jù)集提供快速生成的人工智能結(jié)果。

IT之家附上公告原文地址,感興趣的用戶可以訪問(wèn)閱讀。

廣告聲明:文內(nèi)含有的對(duì)外跳轉(zhuǎn)鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時(shí)間,結(jié)果僅供參考,IT之家所有文章均包含本聲明。

相關(guān)文章

關(guān)鍵詞:AMDAI

軟媒旗下網(wǎng)站: IT之家 最會(huì)買 - 返利返現(xiàn)優(yōu)惠券 iPhone之家 Win7之家 Win10之家 Win11之家

軟媒旗下軟件: 軟媒手機(jī)APP應(yīng)用 魔方 最會(huì)買 要知