設(shè)置
  • 日夜間
    隨系統(tǒng)
    淺色
    深色
  • 主題色

華為、中國(guó)移動(dòng)聯(lián)合發(fā)布超大規(guī)模集群 AI 存儲(chǔ)解決方案,哈爾濱萬(wàn)卡超大規(guī)模智算集群已部署 150PB

2024/9/26 9:27:51 來(lái)源:IT之家 作者:問(wèn)舟 責(zé)編:問(wèn)舟

IT之家 9 月 26 日消息,華為官方宣布,中國(guó)移動(dòng)集團(tuán)首席專(zhuān)家、研究院網(wǎng)絡(luò)與 IT 技術(shù)研究所所長(zhǎng)張昊在華為全聯(lián)接大會(huì) 2024 期間與華為數(shù)據(jù)存儲(chǔ)產(chǎn)品線副總裁謝強(qiáng)強(qiáng)共同發(fā)布了智算中心超大規(guī)模集群 AI 存儲(chǔ)解決方案。

張昊表示,近年來(lái),大模型技術(shù)正在快速向更大規(guī)模、更強(qiáng)能力發(fā)展,大模型技術(shù)發(fā)展趨勢(shì)總體仍然遵循 Scaling Law,參數(shù)已邁進(jìn)萬(wàn)億甚至十萬(wàn)億規(guī)模,從單模態(tài)走向多模態(tài);OpenAI、字節(jié)跳動(dòng)、中國(guó)移動(dòng)、Meta 等國(guó)內(nèi)外大型科技公司正積極投建萬(wàn)卡 / 超萬(wàn)卡集群智算中心,建設(shè)一批萬(wàn)卡、超萬(wàn)卡集群成為新基建的“暴力美學(xué)”。但是隨著大模型規(guī)模越來(lái)越大,尤其是萬(wàn)卡集群處理海量非結(jié)構(gòu)化數(shù)據(jù)時(shí),傳統(tǒng)存儲(chǔ)系統(tǒng)面臨高吞吐性能、多協(xié)議處理、數(shù)據(jù)管理效率等多方面挑戰(zhàn)。

對(duì)此,中國(guó)移動(dòng)在哈爾濱萬(wàn)卡超大規(guī)模智算集群首次大規(guī)模部署了基于華為 OceanStor AI 存儲(chǔ)的多協(xié)議融合存儲(chǔ),存儲(chǔ)集群可得容量達(dá) 150PB,依托“并行客戶端、高密全閃介質(zhì)、冷熱數(shù)據(jù)自動(dòng)分級(jí)、GSE 全調(diào)度以太網(wǎng)”的高性能融合存儲(chǔ)系統(tǒng),大幅提升大模型訓(xùn)練效率。

參考IT之家此前報(bào)道,國(guó)內(nèi)運(yùn)營(yíng)商最大單集群智算中心 —— 中國(guó)移動(dòng)智算中心(哈爾濱)于 8 月 30 日建設(shè)完成并正式投產(chǎn)使用。該智算中心具有單集群算力規(guī)模最大、國(guó)產(chǎn)化網(wǎng)絡(luò)設(shè)備組網(wǎng)規(guī)模最大等特點(diǎn)。單集群智算中心把所有 AI 加速卡打造成 1 個(gè)集群,用以支持千萬(wàn)億級(jí)參數(shù)的大模型進(jìn)行訓(xùn)練。

相關(guān)閱讀:

廣告聲明:文內(nèi)含有的對(duì)外跳轉(zhuǎn)鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時(shí)間,結(jié)果僅供參考,IT之家所有文章均包含本聲明。

相關(guān)文章

軟媒旗下網(wǎng)站: IT之家 最會(huì)買(mǎi) - 返利返現(xiàn)優(yōu)惠券 iPhone之家 Win7之家 Win10之家 Win11之家

軟媒旗下軟件: 軟媒手機(jī)APP應(yīng)用 魔方 最會(huì)買(mǎi) 要知