設(shè)置
  • 日夜間
    隨系統(tǒng)
    淺色
    深色
  • 主題色

一場(chǎng)天璣開發(fā)者大會(huì),看盡聯(lián)發(fā)科對(duì)生成式 AI 時(shí)代的野望

2024/5/14 9:01:06 來(lái)源:IT之家 作者:汐元 責(zé)編:汐元

2022 年 11 月,ChatGPT 輕輕振動(dòng)蝴蝶翅膀,為全球帶來(lái)了一場(chǎng)生成式 AI 的技術(shù)革新風(fēng)暴,如今,千行百業(yè)都在被 AI 改變甚至顛覆。

隨著生成式 AI 從發(fā)展邁向應(yīng)用,端云結(jié)合將成為主流的部署模式,特別是端側(cè)生成式 AI 的發(fā)展正越來(lái)越受到重視。讓用戶可以從終端側(cè)不聯(lián)網(wǎng)就能獲得多數(shù)基于生成式 AI 的服務(wù),成為很多企業(yè)的愿景,而目前人們使用最高頻的智能手機(jī),無(wú)疑就是端側(cè)生成式 AI 的第一突破口。

因此,眼下“AI 手機(jī)”正成為整個(gè)行業(yè)無(wú)法繞過(guò)的發(fā)展方向。不過(guò)不可否認(rèn)的是,AI 手機(jī)仍處在早期發(fā)展階段,AI 究竟會(huì)如何改變智能手機(jī),還有很多問(wèn)題亟待探索。

5 月 7 日,聯(lián)發(fā)科以“AI 予萬(wàn)物”為主題舉辦了天璣開發(fā)者大會(huì) 2024(MDDC 2024),透過(guò)這場(chǎng)大會(huì),IT之家看到了關(guān)于生成式 AI 手機(jī)諸多未知的回答,更看到了作為端側(cè)生成式 AI 最早探索者之一的聯(lián)發(fā)科,是如何在風(fēng)暴中完成從技術(shù)引領(lǐng)到生態(tài)革新的角色升級(jí)的。

WechatIMG216

生成式 AI 推動(dòng)智能手機(jī)產(chǎn)業(yè)邁進(jìn),未來(lái)已在眼前

盡管“生成式 AI 手機(jī)”的時(shí)代尚未真正到來(lái),但好消息是,生成式 AI 已經(jīng)能為智能手機(jī)市場(chǎng)帶來(lái)正面的影響。

根據(jù) IDC 最新的季度報(bào)告,2024 年第一季度,中國(guó)智能手機(jī)市場(chǎng)出貨量約 6,926 萬(wàn)臺(tái),同比增長(zhǎng) 6.5%,延續(xù)去年底反彈勢(shì)頭,且市場(chǎng)表現(xiàn)高于預(yù)期。

20240508174105

同時(shí) IDC 預(yù)測(cè),2024 年全球智能手機(jī)銷量將達(dá)到 11.97 億臺(tái),同比增長(zhǎng) 2.77%,2028 年全球智能手機(jī)銷量將達(dá) 13.03 億臺(tái),5 年 CAGR 將達(dá)到 2.27%。

智能手機(jī)市場(chǎng)將邁向一個(gè)新的增長(zhǎng)周期,而生成式 AI 手機(jī)的普及,就將是這輪新周期的主要推動(dòng)力之一。

聯(lián)發(fā)科在這次天璣開發(fā)者大會(huì)上聯(lián)合 Counterpoint 與眾多生態(tài)合作伙伴發(fā)布的《生成式 AI 手機(jī)產(chǎn)業(yè)白皮書》對(duì)生成式 AI 手機(jī)做了定義:利用大規(guī)模、預(yù)訓(xùn)練的生成式 AI 模型,實(shí)現(xiàn)多模態(tài)內(nèi)容生成、情境感知,并具備不斷增強(qiáng)的類人能力。

同時(shí),生成式 AI 手機(jī)需要具備支持大模型的本地部署、提供自然的交互方式、多模態(tài)內(nèi)容輸入與輸出以及擁有實(shí)現(xiàn)上述特征的硬件規(guī)格 4 個(gè)特征。

而根據(jù) Counterpoint 的數(shù)據(jù),2023 全年出貨的 11.7 億手機(jī)中,只有不足 1% 的手機(jī)滿足生成式 AI 手機(jī)定義。2024 年,生成式 AI 手機(jī)將開始普及,預(yù)計(jì) 2027 年滲透率會(huì)達(dá)到 43% 左右。Counterpoint 預(yù)計(jì)生成式 AI 手機(jī)存量規(guī)模將會(huì)從 2023 年百萬(wàn)級(jí)別增長(zhǎng)至 2027 年的 12.3 億部。

20240508174211

可見(jiàn),生成式 AI 手機(jī)未來(lái)有非常巨大的想象空間,而這樣的想象空間,需要整個(gè)行業(yè)從現(xiàn)在開始一點(diǎn)一點(diǎn)地發(fā)展、建設(shè)。

所謂“九層之臺(tái)起于累土”,只是這土該怎么“累”?換句話說(shuō),生成式 AI 手機(jī)的技術(shù)、生態(tài)、應(yīng)用和市場(chǎng)該如何建設(shè),才是當(dāng)下最關(guān)鍵的問(wèn)題。

而要回答這個(gè)問(wèn)題,我們首先需要清楚生成式 AI 手機(jī)發(fā)展目前呈現(xiàn)出來(lái)的特點(diǎn)、趨勢(shì)以及面臨的問(wèn)題。

而通過(guò)參加本次天璣開發(fā)者大會(huì) (MDDC 2024),IT之家也做了一些總結(jié)。

  • 端云結(jié)合將是生成式 AI 部署的主流模式,同時(shí),端側(cè)部署生成式 AI 具有低時(shí)延、安全隱私、個(gè)性化和自由度高等獨(dú)特的優(yōu)勢(shì)。

  • 多模態(tài)能力將是實(shí)現(xiàn)生成式 AI 手機(jī)愿景的關(guān)鍵,它將為 AI 手機(jī)開啟全新交互體驗(yàn),并在更遠(yuǎn)的未來(lái)推動(dòng) AI 智能體的成長(zhǎng)。

  • 多模態(tài)的趨勢(shì)下,端側(cè)部署更大規(guī)模的大語(yǔ)言模型(LLM)將成為必然,從而讓參數(shù)規(guī)??焖僭鲩L(zhǎng),對(duì)生成式 AI 手機(jī)的算力、性能將是一個(gè)巨大挑戰(zhàn)。

  • 對(duì)于開發(fā)者而言,在端側(cè)部署生成式 AI,目前還面臨終端硬件多樣、大模型移植到終端運(yùn)行難度大、開發(fā)工具鏈缺乏,應(yīng)用開發(fā)難度大等問(wèn)題。

推動(dòng)生成式 AI 手機(jī)產(chǎn)品和應(yīng)用生態(tài)的發(fā)展,離不開以上四個(gè)方向的關(guān)注點(diǎn)。聯(lián)發(fā)科想要實(shí)現(xiàn)生成式 AI 終端普及、構(gòu)建 AI 新生態(tài)愿景,也必須沿著這些方向,逐步升級(jí)技術(shù)和產(chǎn)品,與產(chǎn)業(yè)鏈合作,逐步解決行業(yè)在硬件、軟件和應(yīng)用生態(tài)方面存在的問(wèn)題。這將是一個(gè)長(zhǎng)期的過(guò)程。

從技術(shù)引領(lǐng)者到產(chǎn)業(yè)變革者,聯(lián)發(fā)科角色全面升級(jí)

說(shuō)到長(zhǎng)期,其實(shí)聯(lián)發(fā)科之于 AI,也已經(jīng)是一個(gè)長(zhǎng)線的布局和投入。

2016 年,AlphaGo 在與圍棋世界冠軍李世石的對(duì)決中一戰(zhàn)成名,讓人們驚覺(jué) AI 的強(qiáng)大,而聯(lián)發(fā)科也開始了對(duì) AI 的投入。

2018 年,聯(lián)發(fā)科在 Helio P60 SoC 中首次內(nèi)建了多核心人工智能處理器 APU,主要用于手機(jī)拍照、人臉識(shí)別場(chǎng)景。

2019 年,第一代天璣芯片天璣 1000 問(wèn)世時(shí),其新一代 APU 加持的 AI 性能就在蘇黎世 AI Benchmark 跑分榜單上沖到第一。

……

可以看到,聯(lián)發(fā)科很早就開啟了對(duì)端側(cè) AI 領(lǐng)域的投資和布局,可以說(shuō)是端側(cè) AI 技術(shù)最早的引領(lǐng)者之一。正是如此長(zhǎng)期積累的 AI 技術(shù)深厚功底和豐富經(jīng)驗(yàn),讓聯(lián)發(fā)科能夠在生成式 AI 時(shí)代快人一步,提前邁向自我競(jìng)爭(zhēng)級(jí)別的提升。

我們知道,生成式 AI 時(shí)代,聯(lián)發(fā)科這樣的頭部芯片設(shè)計(jì)公司將發(fā)揮比過(guò)去更加重要的作用,他們不再是過(guò)去僅在技術(shù)層面上引領(lǐng)者,而是要成為助力行業(yè)構(gòu)建從芯片設(shè)計(jì)到大模型,再到工具鏈的全局解決方案的賦能者。

就像聯(lián)發(fā)科無(wú)線通信事業(yè)部生態(tài)發(fā)展資深總監(jiān)章立在采訪中表示,百川智能 CEO 王小川曾說(shuō),做搜狗的時(shí)候從來(lái)不見(jiàn)芯片公司,做了大模型不得不見(jiàn)。這是 AI 時(shí)代很重要的表現(xiàn),開發(fā)者能實(shí)現(xiàn)生成式 AI 的技術(shù)創(chuàng)新,將離不開芯片公司的支持。

其實(shí)早在 Helio P60 推出時(shí),聯(lián)發(fā)科就配套提供了 NeuroPilot 軟件開發(fā)工具套件,讓開發(fā)者能夠基于該平臺(tái)輕松將各種創(chuàng)新的 AI 應(yīng)用推向市場(chǎng)。這些年來(lái),聯(lián)發(fā)科已經(jīng)憑借 NeuroPilot AI 開發(fā)平臺(tái)構(gòu)建了不錯(cuò)的 AI 生態(tài)。

生成式 AI 爆發(fā)后,聯(lián)發(fā)科也第一時(shí)間將生成式 AI 技術(shù)引入到天璣 9300 旗艦移動(dòng)平臺(tái),第七代 AI 處理器 APU 790 就是專為生成式 AI 而設(shè)計(jì),支持終端運(yùn)行至高 330 億參數(shù)的 AI 大語(yǔ)言模型,還通過(guò)先進(jìn)的硬件壓縮技術(shù) NeuroPilot Compression,大幅減少 AI 大模型對(duì)終端內(nèi)存的占用,讓生成式 AI 在端側(cè)流暢運(yùn)行。

不僅如此,聯(lián)發(fā)科在行業(yè)首次將生成式 AI 技術(shù)引入到中端移動(dòng)平臺(tái)天璣 8300 上,至高支持 100 億參數(shù) AI 大語(yǔ)言模型,推動(dòng)了生成式 AI 向更廣泛的消費(fèi)市場(chǎng)普及。

聯(lián)發(fā)科還在大模型方面發(fā)力,在今年 3 月推出了名為 MR Breeze-7B 的全新開源大語(yǔ)言模型(LLM),尤其擅長(zhǎng)處理擅長(zhǎng)處理繁體中文和英文。

此外他們還在大模型在終端落地方面積極和模型廠商合作,比如今年 3 月底聯(lián)發(fā)科就和阿里云通義千問(wèn)達(dá)成深度合作,在天璣 9300 移動(dòng)平臺(tái)上完成通義千問(wèn)大模型小尺寸版本的端側(cè)部署,更早之前聯(lián)發(fā)科還和百度聯(lián)合發(fā)起飛槳和文心大模型硬件生態(tài)共創(chuàng)計(jì)劃,共同推進(jìn)聯(lián)發(fā)科硬件平臺(tái)與飛槳和文心大模型的適配,實(shí)現(xiàn)大模型在端云的協(xié)同工作。

而本次天璣開發(fā)者大會(huì),聯(lián)發(fā)科讓我們進(jìn)一步看到了在生成式 AI 產(chǎn)業(yè)生態(tài)革新方面更全面更深入的角色升級(jí)和轉(zhuǎn)變。

我們還是回到前面談到的四個(gè)點(diǎn),生成式 AI 端側(cè)部署和多模態(tài)交互越發(fā)重要,對(duì)硬件側(cè)的性能和算力提出了更高的要求,因此,聯(lián)發(fā)科在本次天璣開發(fā)者大會(huì)上特別發(fā)布了全新天璣 9300 + 旗艦 5G 生成式 AI 移動(dòng)芯片,延續(xù)了全大核 CPU 架構(gòu),官方宣稱其率先在端側(cè)支持 AI 推測(cè)解碼加速技術(shù),同時(shí)支持天璣 AI LoRA Fusion 2.0 技術(shù),提供更高效和個(gè)性化的生成式 AI 體驗(yàn)。此外,天璣 9300+ 支持前沿主流的生成式 AI 大模型,可為用戶提供文字、圖像、音樂(lè)等端側(cè)生成式 AI 多模態(tài)創(chuàng)新體驗(yàn),為生成式 AI 的應(yīng)用奠定了基礎(chǔ)。

WechatIMG210

不夸張地說(shuō),天璣 9300 + 是專為完善終端側(cè)生成式 AI 體驗(yàn)而作的升級(jí),它在生成式 AI 的計(jì)算能力、大模型性能以及技能擴(kuò)展能力等方面,為生成式 AI 手機(jī)時(shí)代的到來(lái)在“終端”這個(gè)層面進(jìn)一步夯實(shí)了基礎(chǔ),同時(shí)也是天璣 AI 生態(tài)戰(zhàn)略“芯片、模型、應(yīng)用”中關(guān)鍵的“地基”環(huán)節(jié)。

在芯片基礎(chǔ)之上,聯(lián)發(fā)科在本次天璣開發(fā)者大會(huì)上還推出了全新“天璣 AI 開發(fā)套件”,它的出現(xiàn),可以解決開發(fā)者在打造生成式 AI 應(yīng)用時(shí)面臨的終端硬件多樣、工具鏈缺乏等讓人頭疼的問(wèn)題。

WechatIMG212

天璣 AI 開發(fā)套件包括快速高效的 GenAI 最佳實(shí)踐、覆蓋全球主流大模型的 GenAI Model Hub、高效提升性能的 GenAI 優(yōu)化技術(shù)和 Neuron Studio 一站式視覺(jué)化開發(fā)環(huán)境等四大模塊,為廣大開發(fā)者提供“快、全、強(qiáng)、易”的專業(yè)開發(fā)體驗(yàn),賦能終端生成式 AI 應(yīng)用開發(fā)全流程。

D:\BaiduSyncdisk\MTK聯(lián)發(fā)科資料\2024年項(xiàng)目\MDDC\MediaTek-MDDC媒體資料包\4-活動(dòng)照片\主會(huì)場(chǎng)照片\【配圖參考-12】聯(lián)發(fā)科技 無(wú)線通信事業(yè)部 副總經(jīng)理 李彥輯 .jpg

如果說(shuō)芯片是土壤,應(yīng)用是在土壤上開出的花朵,開發(fā)者就是建設(shè)生態(tài)的原定,這個(gè)過(guò)程中工具的重要性不言而喻。而目前在端側(cè)生成式 AI 領(lǐng)域中的工具鏈非常匱乏,尤其在手機(jī)端,如此大體量的消費(fèi)終端中其實(shí)是沒(méi)有工具鏈來(lái)發(fā)展生成式 AI。而隨著“天璣 AI 開發(fā)套件”的推出,聯(lián)發(fā)科率先成為在手機(jī)端提供完整生成式 AI 工具鏈的企業(yè),而且不僅是手機(jī)端,還覆蓋了其他消費(fèi)終端,這對(duì)于整個(gè)終端側(cè)生成式 AI 行業(yè)來(lái)說(shuō)無(wú)疑也具有開創(chuàng)和引領(lǐng)的意義。這樣的開發(fā)環(huán)境,更會(huì)大大激勵(lì)開發(fā)者們利用這些工具打造豐富而極具創(chuàng)意的生成式 AI 應(yīng)用。

圖片 10

而為了進(jìn)一步賦能開發(fā)者,推動(dòng)整個(gè)應(yīng)用生態(tài)往生成式 AI 遷移,聯(lián)發(fā)科還在本次大會(huì)上聯(lián)動(dòng)阿里云、百川智能、傳音、零一萬(wàn)物、OPPO、榮耀、vivo、小米等合作伙伴共同開啟了“天璣 AI 先鋒計(jì)劃”。

該計(jì)劃面向全球開發(fā)者,致力于整合聯(lián)發(fā)科與產(chǎn)業(yè)生態(tài)伙伴資源,為勇于探索和創(chuàng)新的開發(fā)者提供開發(fā)資源、技術(shù)支持和商業(yè)機(jī)會(huì),助力開發(fā)者在搭載天璣芯片的終端設(shè)備上打造創(chuàng)新的生成式 AI 體驗(yàn),加速萬(wàn)物 AI 時(shí)代的到來(lái)。

作為芯片解決方案提供商,聯(lián)發(fā)科站在生成式 AI 生態(tài)萬(wàn)千交叉路口的關(guān)鍵節(jié)點(diǎn)上,因此天然被賦予了生態(tài)連接者和賦能者的使命。無(wú)論是上游的模型,還是下游的終端、應(yīng)用廠商,都需要通過(guò)芯片提供商的連接,形成生態(tài)合力。而“天璣 AI 先鋒計(jì)劃”就為整個(gè)生成式 AI 生態(tài)凝聚力的呈現(xiàn)提供了契機(jī),它將整個(gè)生態(tài)中不同的參與者聚集在一起,讓大家共同探索,尋求共識(shí),共同推動(dòng)生態(tài)發(fā)展。只有這樣,生態(tài)才能持續(xù)成長(zhǎng)、擴(kuò)展,從而更快地推動(dòng)爆款應(yīng)用的出現(xiàn)。

從這一角度看,聯(lián)發(fā)科作為連接者和賦能者的關(guān)鍵意義展露無(wú)疑。

/private/var/folders/t8/6dxdccq93mg7qf746lxp2_q80000gn/T/com.kingsoft.wpsoffice.mac/picturecompress_20240508200838/output_1.pngoutput_1

而所有這些努力,目前已經(jīng)取得了一些成果,比如在本次天璣開發(fā)者大會(huì)上,我們就看到聯(lián)發(fā)科和阿里云通義千問(wèn)、Cocos、Honor of Kings、虎牙直播、酷狗音樂(lè)、美圖、全民 K 歌、騰訊 AI Lab、小紅書等數(shù)十家生態(tài)伙伴一起展示的全場(chǎng)景、精彩的生成式 AI 應(yīng)用。

在大會(huì)展示區(qū),IT之家也對(duì)這些應(yīng)用做了體驗(yàn),比如酷狗音樂(lè)利用聯(lián)發(fā)科天璣 9300 端側(cè)生成式 AI 能力打造的歌詞生圖功能,可以根據(jù)歌詞生成個(gè)性化的播放器背景圖和專輯封面圖。

May-08-2024 17-53-00

還有抖音將多款 GAN 實(shí)時(shí)特效帶到了聯(lián)發(fā)科天璣平臺(tái)上,包括讓抖音最復(fù)雜的 AI 模型能夠流暢出色地跑在天璣 APU 上,讓用戶的視頻創(chuàng)作更加充滿趣味。

20240508175406

星速追光,天璣游戲體驗(yàn)再升級(jí)

除了上面這些豐富的硬件、軟件應(yīng)用生態(tài),還有一個(gè)特殊的應(yīng)用類型也是聯(lián)發(fā)科重點(diǎn)關(guān)注的場(chǎng)景,就是游戲。聯(lián)發(fā)科無(wú)線通信事業(yè)部副總經(jīng)理陳一強(qiáng)在談到和 Arm 的合作時(shí)表示,游戲是 AI 最好的實(shí)現(xiàn)場(chǎng)景,因?yàn)橛螒蚴仟?dú)立完整的自己的場(chǎng)景,可以提供更多的試錯(cuò)空間,并且因?yàn)樗菉蕵?lè)內(nèi)容,很多東西都是想象的空間,現(xiàn)在 AI 是完全在滿足這個(gè)需求。所以聯(lián)發(fā)科用多年來(lái)和游戲開發(fā)者合作的經(jīng)驗(yàn)賦能 Arm GPU IP 的規(guī)劃,滿足頂尖的游戲開發(fā)者,去賦能做游戲內(nèi)容的能力。

當(dāng)然,以 AI 賦能移動(dòng)游戲不是一蹴而就的事情,但本次開發(fā)者大會(huì),聯(lián)發(fā)科也宣布專門針對(duì)移動(dòng)游戲體驗(yàn)的星速引擎迎來(lái)全面升級(jí)。

WechatIMG231

全新升級(jí)的星速引擎可以借助自適應(yīng)技術(shù)軟件開發(fā)套件和硬件光線追蹤技術(shù),通過(guò)精準(zhǔn)的性能管理、光線追蹤效果優(yōu)化、網(wǎng)絡(luò)質(zhì)量監(jiān)測(cè)等關(guān)鍵技術(shù),助力游戲開發(fā)者打造畫面更逼真、流暢,觸控和網(wǎng)絡(luò)響應(yīng)速度更快,續(xù)航更持久的優(yōu)質(zhì)體驗(yàn)。

圖片 15

此外,聯(lián)發(fā)科還積極與 Arm、Google、Khronos,以及 Unreal Engine 團(tuán)隊(duì)在內(nèi)的產(chǎn)業(yè)合作伙伴共同進(jìn)行前沿技術(shù)的探索,持續(xù)賦能高速拓展的天璣游戲生態(tài)圈,讓更多開發(fā)者基于天璣移動(dòng)平臺(tái)對(duì)游戲體驗(yàn)的變革和創(chuàng)意能夠深入到游戲內(nèi)容和玩法層面,從而帶來(lái)更具沉浸感的體驗(yàn)。

結(jié)語(yǔ)

總體來(lái)說(shuō),本次聯(lián)發(fā)科天璣開發(fā)者大會(huì)的召開,一方面為生成式 AI 手機(jī)在定義、技術(shù)規(guī)范統(tǒng)一、生態(tài)建設(shè)等方面的問(wèn)題做出了適時(shí)的回答,同時(shí)更引領(lǐng)了移動(dòng)生態(tài)基于生成式 AI 的關(guān)鍵革新。

這是聯(lián)發(fā)科首次召開天璣開發(fā)者大會(huì),也首次讓我們看到聯(lián)發(fā)科對(duì)于生成式 AI 手機(jī)在技術(shù)、產(chǎn)品、生態(tài)等環(huán)節(jié)全鏈路的布局與投入。他們正在引領(lǐng)全生態(tài)迎接生成式 AI 手機(jī)的到來(lái),并且為生態(tài)伙伴和開發(fā)者提供了一系列的解決方案,比如天璣 9300 + 為端側(cè)生成式 AI 提供了最強(qiáng)的硬件支持,而天璣 AI 先鋒計(jì)劃的啟動(dòng),也讓我們看到聯(lián)發(fā)科對(duì)于引領(lǐng)移動(dòng) AI 生態(tài)昂揚(yáng)向上的決心和對(duì)開發(fā)者的誠(chéng)意。

而通過(guò)這些努力,聯(lián)發(fā)科將整個(gè)生成式 AI 產(chǎn)業(yè)生態(tài)伙伴的力量融合、集結(jié)了起來(lái),然后高效地賦能開發(fā)者,加速建構(gòu)從云端到終端的 AI 新生態(tài),大大促進(jìn)了生成式 AI 技術(shù)在智能終端上的普及和發(fā)展壯大。

也許,“生成式 AI 手機(jī)就要用天璣”,在不遠(yuǎn)的未來(lái),就會(huì)成為一個(gè)新共識(shí)。

下載《生成式 AI 手機(jī)產(chǎn)業(yè)白皮書》:點(diǎn)此

廣告聲明:文內(nèi)含有的對(duì)外跳轉(zhuǎn)鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時(shí)間,結(jié)果僅供參考,IT之家所有文章均包含本聲明。

相關(guān)文章

關(guān)鍵詞:聯(lián)發(fā)科,手機(jī)芯片,天璣

軟媒旗下網(wǎng)站: IT之家 最會(huì)買 - 返利返現(xiàn)優(yōu)惠券 iPhone之家 Win7之家 Win10之家 Win11之家

軟媒旗下軟件: 軟媒手機(jī)APP應(yīng)用 魔方 最會(huì)買 要知