2022 年 11 月,ChatGPT 輕輕振動蝴蝶翅膀,為全球帶來了一場生成式 AI 的技術(shù)革新風(fēng)暴,如今,千行百業(yè)都在被 AI 改變甚至顛覆。
隨著生成式 AI 從發(fā)展邁向應(yīng)用,端云結(jié)合將成為主流的部署模式,特別是端側(cè)生成式 AI 的發(fā)展正越來越受到重視。讓用戶可以從終端側(cè)不聯(lián)網(wǎng)就能獲得多數(shù)基于生成式 AI 的服務(wù),成為很多企業(yè)的愿景,而目前人們使用最高頻的智能手機,無疑就是端側(cè)生成式 AI 的第一突破口。
因此,眼下“AI 手機”正成為整個行業(yè)無法繞過的發(fā)展方向。不過不可否認的是,AI 手機仍處在早期發(fā)展階段,AI 究竟會如何改變智能手機,還有很多問題亟待探索。
5 月 7 日,聯(lián)發(fā)科以“AI 予萬物”為主題舉辦了天璣開發(fā)者大會 2024(MDDC 2024),透過這場大會,IT之家看到了關(guān)于生成式 AI 手機諸多未知的回答,更看到了作為端側(cè)生成式 AI 最早探索者之一的聯(lián)發(fā)科,是如何在風(fēng)暴中完成從技術(shù)引領(lǐng)到生態(tài)革新的角色升級的。
生成式 AI 推動智能手機產(chǎn)業(yè)邁進,未來已在眼前
盡管“生成式 AI 手機”的時代尚未真正到來,但好消息是,生成式 AI 已經(jīng)能為智能手機市場帶來正面的影響。
根據(jù) IDC 最新的季度報告,2024 年第一季度,中國智能手機市場出貨量約 6,926 萬臺,同比增長 6.5%,延續(xù)去年底反彈勢頭,且市場表現(xiàn)高于預(yù)期。
同時 IDC 預(yù)測,2024 年全球智能手機銷量將達到 11.97 億臺,同比增長 2.77%,2028 年全球智能手機銷量將達 13.03 億臺,5 年 CAGR 將達到 2.27%。
智能手機市場將邁向一個新的增長周期,而生成式 AI 手機的普及,就將是這輪新周期的主要推動力之一。
聯(lián)發(fā)科在這次天璣開發(fā)者大會上聯(lián)合 Counterpoint 與眾多生態(tài)合作伙伴發(fā)布的《生成式 AI 手機產(chǎn)業(yè)白皮書》對生成式 AI 手機做了定義:利用大規(guī)模、預(yù)訓(xùn)練的生成式 AI 模型,實現(xiàn)多模態(tài)內(nèi)容生成、情境感知,并具備不斷增強的類人能力。
同時,生成式 AI 手機需要具備支持大模型的本地部署、提供自然的交互方式、多模態(tài)內(nèi)容輸入與輸出以及擁有實現(xiàn)上述特征的硬件規(guī)格 4 個特征。
而根據(jù) Counterpoint 的數(shù)據(jù),2023 全年出貨的 11.7 億手機中,只有不足 1% 的手機滿足生成式 AI 手機定義。2024 年,生成式 AI 手機將開始普及,預(yù)計 2027 年滲透率會達到 43% 左右。Counterpoint 預(yù)計生成式 AI 手機存量規(guī)模將會從 2023 年百萬級別增長至 2027 年的 12.3 億部。
可見,生成式 AI 手機未來有非常巨大的想象空間,而這樣的想象空間,需要整個行業(yè)從現(xiàn)在開始一點一點地發(fā)展、建設(shè)。
所謂“九層之臺起于累土”,只是這土該怎么“累”?換句話說,生成式 AI 手機的技術(shù)、生態(tài)、應(yīng)用和市場該如何建設(shè),才是當(dāng)下最關(guān)鍵的問題。
而要回答這個問題,我們首先需要清楚生成式 AI 手機發(fā)展目前呈現(xiàn)出來的特點、趨勢以及面臨的問題。
而通過參加本次天璣開發(fā)者大會 (MDDC 2024),IT之家也做了一些總結(jié)。
端云結(jié)合將是生成式 AI 部署的主流模式,同時,端側(cè)部署生成式 AI 具有低時延、安全隱私、個性化和自由度高等獨特的優(yōu)勢。
多模態(tài)能力將是實現(xiàn)生成式 AI 手機愿景的關(guān)鍵,它將為 AI 手機開啟全新交互體驗,并在更遠的未來推動 AI 智能體的成長。
多模態(tài)的趨勢下,端側(cè)部署更大規(guī)模的大語言模型(LLM)將成為必然,從而讓參數(shù)規(guī)模快速增長,對生成式 AI 手機的算力、性能將是一個巨大挑戰(zhàn)。
對于開發(fā)者而言,在端側(cè)部署生成式 AI,目前還面臨終端硬件多樣、大模型移植到終端運行難度大、開發(fā)工具鏈缺乏,應(yīng)用開發(fā)難度大等問題。
推動生成式 AI 手機產(chǎn)品和應(yīng)用生態(tài)的發(fā)展,離不開以上四個方向的關(guān)注點。聯(lián)發(fā)科想要實現(xiàn)生成式 AI 終端普及、構(gòu)建 AI 新生態(tài)愿景,也必須沿著這些方向,逐步升級技術(shù)和產(chǎn)品,與產(chǎn)業(yè)鏈合作,逐步解決行業(yè)在硬件、軟件和應(yīng)用生態(tài)方面存在的問題。這將是一個長期的過程。
從技術(shù)引領(lǐng)者到產(chǎn)業(yè)變革者,聯(lián)發(fā)科角色全面升級
說到長期,其實聯(lián)發(fā)科之于 AI,也已經(jīng)是一個長線的布局和投入。
2016 年,AlphaGo 在與圍棋世界冠軍李世石的對決中一戰(zhàn)成名,讓人們驚覺 AI 的強大,而聯(lián)發(fā)科也開始了對 AI 的投入。
2018 年,聯(lián)發(fā)科在 Helio P60 SoC 中首次內(nèi)建了多核心人工智能處理器 APU,主要用于手機拍照、人臉識別場景。
2019 年,第一代天璣芯片天璣 1000 問世時,其新一代 APU 加持的 AI 性能就在蘇黎世 AI Benchmark 跑分榜單上沖到第一。
……
可以看到,聯(lián)發(fā)科很早就開啟了對端側(cè) AI 領(lǐng)域的投資和布局,可以說是端側(cè) AI 技術(shù)最早的引領(lǐng)者之一。正是如此長期積累的 AI 技術(shù)深厚功底和豐富經(jīng)驗,讓聯(lián)發(fā)科能夠在生成式 AI 時代快人一步,提前邁向自我競爭級別的提升。
我們知道,生成式 AI 時代,聯(lián)發(fā)科這樣的頭部芯片設(shè)計公司將發(fā)揮比過去更加重要的作用,他們不再是過去僅在技術(shù)層面上引領(lǐng)者,而是要成為助力行業(yè)構(gòu)建從芯片設(shè)計到大模型,再到工具鏈的全局解決方案的賦能者。
就像聯(lián)發(fā)科無線通信事業(yè)部生態(tài)發(fā)展資深總監(jiān)章立在采訪中表示,百川智能 CEO 王小川曾說,做搜狗的時候從來不見芯片公司,做了大模型不得不見。這是 AI 時代很重要的表現(xiàn),開發(fā)者能實現(xiàn)生成式 AI 的技術(shù)創(chuàng)新,將離不開芯片公司的支持。
其實早在 Helio P60 推出時,聯(lián)發(fā)科就配套提供了 NeuroPilot 軟件開發(fā)工具套件,讓開發(fā)者能夠基于該平臺輕松將各種創(chuàng)新的 AI 應(yīng)用推向市場。這些年來,聯(lián)發(fā)科已經(jīng)憑借 NeuroPilot AI 開發(fā)平臺構(gòu)建了不錯的 AI 生態(tài)。
生成式 AI 爆發(fā)后,聯(lián)發(fā)科也第一時間將生成式 AI 技術(shù)引入到天璣 9300 旗艦移動平臺,第七代 AI 處理器 APU 790 就是專為生成式 AI 而設(shè)計,支持終端運行至高 330 億參數(shù)的 AI 大語言模型,還通過先進的硬件壓縮技術(shù) NeuroPilot Compression,大幅減少 AI 大模型對終端內(nèi)存的占用,讓生成式 AI 在端側(cè)流暢運行。
不僅如此,聯(lián)發(fā)科在行業(yè)首次將生成式 AI 技術(shù)引入到中端移動平臺天璣 8300 上,至高支持 100 億參數(shù) AI 大語言模型,推動了生成式 AI 向更廣泛的消費市場普及。
聯(lián)發(fā)科還在大模型方面發(fā)力,在今年 3 月推出了名為 MR Breeze-7B 的全新開源大語言模型(LLM),尤其擅長處理擅長處理繁體中文和英文。
此外他們還在大模型在終端落地方面積極和模型廠商合作,比如今年 3 月底聯(lián)發(fā)科就和阿里云通義千問達成深度合作,在天璣 9300 移動平臺上完成通義千問大模型小尺寸版本的端側(cè)部署,更早之前聯(lián)發(fā)科還和百度聯(lián)合發(fā)起飛槳和文心大模型硬件生態(tài)共創(chuàng)計劃,共同推進聯(lián)發(fā)科硬件平臺與飛槳和文心大模型的適配,實現(xiàn)大模型在端云的協(xié)同工作。
而本次天璣開發(fā)者大會,聯(lián)發(fā)科讓我們進一步看到了在生成式 AI 產(chǎn)業(yè)生態(tài)革新方面更全面更深入的角色升級和轉(zhuǎn)變。
我們還是回到前面談到的四個點,生成式 AI 端側(cè)部署和多模態(tài)交互越發(fā)重要,對硬件側(cè)的性能和算力提出了更高的要求,因此,聯(lián)發(fā)科在本次天璣開發(fā)者大會上特別發(fā)布了全新天璣 9300 + 旗艦 5G 生成式 AI 移動芯片,延續(xù)了全大核 CPU 架構(gòu),官方宣稱其率先在端側(cè)支持 AI 推測解碼加速技術(shù),同時支持天璣 AI LoRA Fusion 2.0 技術(shù),提供更高效和個性化的生成式 AI 體驗。此外,天璣 9300+ 支持前沿主流的生成式 AI 大模型,可為用戶提供文字、圖像、音樂等端側(cè)生成式 AI 多模態(tài)創(chuàng)新體驗,為生成式 AI 的應(yīng)用奠定了基礎(chǔ)。
不夸張地說,天璣 9300 + 是專為完善終端側(cè)生成式 AI 體驗而作的升級,它在生成式 AI 的計算能力、大模型性能以及技能擴展能力等方面,為生成式 AI 手機時代的到來在“終端”這個層面進一步夯實了基礎(chǔ),同時也是天璣 AI 生態(tài)戰(zhàn)略“芯片、模型、應(yīng)用”中關(guān)鍵的“地基”環(huán)節(jié)。
在芯片基礎(chǔ)之上,聯(lián)發(fā)科在本次天璣開發(fā)者大會上還推出了全新“天璣 AI 開發(fā)套件”,它的出現(xiàn),可以解決開發(fā)者在打造生成式 AI 應(yīng)用時面臨的終端硬件多樣、工具鏈缺乏等讓人頭疼的問題。
天璣 AI 開發(fā)套件包括快速高效的 GenAI 最佳實踐、覆蓋全球主流大模型的 GenAI Model Hub、高效提升性能的 GenAI 優(yōu)化技術(shù)和 Neuron Studio 一站式視覺化開發(fā)環(huán)境等四大模塊,為廣大開發(fā)者提供“快、全、強、易”的專業(yè)開發(fā)體驗,賦能終端生成式 AI 應(yīng)用開發(fā)全流程。
如果說芯片是土壤,應(yīng)用是在土壤上開出的花朵,開發(fā)者就是建設(shè)生態(tài)的原定,這個過程中工具的重要性不言而喻。而目前在端側(cè)生成式 AI 領(lǐng)域中的工具鏈非常匱乏,尤其在手機端,如此大體量的消費終端中其實是沒有工具鏈來發(fā)展生成式 AI。而隨著“天璣 AI 開發(fā)套件”的推出,聯(lián)發(fā)科率先成為在手機端提供完整生成式 AI 工具鏈的企業(yè),而且不僅是手機端,還覆蓋了其他消費終端,這對于整個終端側(cè)生成式 AI 行業(yè)來說無疑也具有開創(chuàng)和引領(lǐng)的意義。這樣的開發(fā)環(huán)境,更會大大激勵開發(fā)者們利用這些工具打造豐富而極具創(chuàng)意的生成式 AI 應(yīng)用。
而為了進一步賦能開發(fā)者,推動整個應(yīng)用生態(tài)往生成式 AI 遷移,聯(lián)發(fā)科還在本次大會上聯(lián)動阿里云、百川智能、傳音、零一萬物、OPPO、榮耀、vivo、小米等合作伙伴共同開啟了“天璣 AI 先鋒計劃”。
該計劃面向全球開發(fā)者,致力于整合聯(lián)發(fā)科與產(chǎn)業(yè)生態(tài)伙伴資源,為勇于探索和創(chuàng)新的開發(fā)者提供開發(fā)資源、技術(shù)支持和商業(yè)機會,助力開發(fā)者在搭載天璣芯片的終端設(shè)備上打造創(chuàng)新的生成式 AI 體驗,加速萬物 AI 時代的到來。
作為芯片解決方案提供商,聯(lián)發(fā)科站在生成式 AI 生態(tài)萬千交叉路口的關(guān)鍵節(jié)點上,因此天然被賦予了生態(tài)連接者和賦能者的使命。無論是上游的模型,還是下游的終端、應(yīng)用廠商,都需要通過芯片提供商的連接,形成生態(tài)合力。而“天璣 AI 先鋒計劃”就為整個生成式 AI 生態(tài)凝聚力的呈現(xiàn)提供了契機,它將整個生態(tài)中不同的參與者聚集在一起,讓大家共同探索,尋求共識,共同推動生態(tài)發(fā)展。只有這樣,生態(tài)才能持續(xù)成長、擴展,從而更快地推動爆款應(yīng)用的出現(xiàn)。
從這一角度看,聯(lián)發(fā)科作為連接者和賦能者的關(guān)鍵意義展露無疑。
而所有這些努力,目前已經(jīng)取得了一些成果,比如在本次天璣開發(fā)者大會上,我們就看到聯(lián)發(fā)科和阿里云通義千問、Cocos、Honor of Kings、虎牙直播、酷狗音樂、美圖、全民 K 歌、騰訊 AI Lab、小紅書等數(shù)十家生態(tài)伙伴一起展示的全場景、精彩的生成式 AI 應(yīng)用。
在大會展示區(qū),IT之家也對這些應(yīng)用做了體驗,比如酷狗音樂利用聯(lián)發(fā)科天璣 9300 端側(cè)生成式 AI 能力打造的歌詞生圖功能,可以根據(jù)歌詞生成個性化的播放器背景圖和專輯封面圖。
還有抖音將多款 GAN 實時特效帶到了聯(lián)發(fā)科天璣平臺上,包括讓抖音最復(fù)雜的 AI 模型能夠流暢出色地跑在天璣 APU 上,讓用戶的視頻創(chuàng)作更加充滿趣味。
星速追光,天璣游戲體驗再升級
除了上面這些豐富的硬件、軟件應(yīng)用生態(tài),還有一個特殊的應(yīng)用類型也是聯(lián)發(fā)科重點關(guān)注的場景,就是游戲。聯(lián)發(fā)科無線通信事業(yè)部副總經(jīng)理陳一強在談到和 Arm 的合作時表示,游戲是 AI 最好的實現(xiàn)場景,因為游戲是獨立完整的自己的場景,可以提供更多的試錯空間,并且因為它是娛樂內(nèi)容,很多東西都是想象的空間,現(xiàn)在 AI 是完全在滿足這個需求。所以聯(lián)發(fā)科用多年來和游戲開發(fā)者合作的經(jīng)驗賦能 Arm GPU IP 的規(guī)劃,滿足頂尖的游戲開發(fā)者,去賦能做游戲內(nèi)容的能力。
當(dāng)然,以 AI 賦能移動游戲不是一蹴而就的事情,但本次開發(fā)者大會,聯(lián)發(fā)科也宣布專門針對移動游戲體驗的星速引擎迎來全面升級。
全新升級的星速引擎可以借助自適應(yīng)技術(shù)軟件開發(fā)套件和硬件光線追蹤技術(shù),通過精準的性能管理、光線追蹤效果優(yōu)化、網(wǎng)絡(luò)質(zhì)量監(jiān)測等關(guān)鍵技術(shù),助力游戲開發(fā)者打造畫面更逼真、流暢,觸控和網(wǎng)絡(luò)響應(yīng)速度更快,續(xù)航更持久的優(yōu)質(zhì)體驗。
此外,聯(lián)發(fā)科還積極與 Arm、Google、Khronos,以及 Unreal Engine 團隊在內(nèi)的產(chǎn)業(yè)合作伙伴共同進行前沿技術(shù)的探索,持續(xù)賦能高速拓展的天璣游戲生態(tài)圈,讓更多開發(fā)者基于天璣移動平臺對游戲體驗的變革和創(chuàng)意能夠深入到游戲內(nèi)容和玩法層面,從而帶來更具沉浸感的體驗。
結(jié)語
總體來說,本次聯(lián)發(fā)科天璣開發(fā)者大會的召開,一方面為生成式 AI 手機在定義、技術(shù)規(guī)范統(tǒng)一、生態(tài)建設(shè)等方面的問題做出了適時的回答,同時更引領(lǐng)了移動生態(tài)基于生成式 AI 的關(guān)鍵革新。
這是聯(lián)發(fā)科首次召開天璣開發(fā)者大會,也首次讓我們看到聯(lián)發(fā)科對于生成式 AI 手機在技術(shù)、產(chǎn)品、生態(tài)等環(huán)節(jié)全鏈路的布局與投入。他們正在引領(lǐng)全生態(tài)迎接生成式 AI 手機的到來,并且為生態(tài)伙伴和開發(fā)者提供了一系列的解決方案,比如天璣 9300 + 為端側(cè)生成式 AI 提供了最強的硬件支持,而天璣 AI 先鋒計劃的啟動,也讓我們看到聯(lián)發(fā)科對于引領(lǐng)移動 AI 生態(tài)昂揚向上的決心和對開發(fā)者的誠意。
而通過這些努力,聯(lián)發(fā)科將整個生成式 AI 產(chǎn)業(yè)生態(tài)伙伴的力量融合、集結(jié)了起來,然后高效地賦能開發(fā)者,加速建構(gòu)從云端到終端的 AI 新生態(tài),大大促進了生成式 AI 技術(shù)在智能終端上的普及和發(fā)展壯大。
也許,“生成式 AI 手機就要用天璣”,在不遠的未來,就會成為一個新共識。
下載《生成式 AI 手機產(chǎn)業(yè)白皮書》:點此
廣告聲明:文內(nèi)含有的對外跳轉(zhuǎn)鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時間,結(jié)果僅供參考,IT之家所有文章均包含本聲明。