IT之家 4 月 1 日消息,人工智能(AI)初創(chuàng)公司 Runway 于本周一發(fā)布了其最新研發(fā)的 AI 視頻生成模型 Gen-4。該公司聲稱,這是目前為止保真度最高的 AI 驅(qū)動(dòng)視頻生成工具之一。
新發(fā)布的 Gen-4 模型現(xiàn)已開始向 Runway 的個(gè)人及企業(yè)客戶推送。據(jù) Runway 介紹,該模型的核心優(yōu)勢(shì)在于能夠在不同的視頻場(chǎng)景中保持角色、地點(diǎn)和物體的高度一致性,維持“連貫的世界環(huán)境”,并且能夠從場(chǎng)景內(nèi)的不同視角和位置重新生成元素。
Runway 在其官方博客文章中指出:“Gen-4 能夠有效利用視覺參考資料,并結(jié)合用戶的文本指令,創(chuàng)造出風(fēng)格、主體、地點(diǎn)等要素保持一致的新圖像和視頻,整個(gè)過程無需進(jìn)行模型微調(diào)或額外的專門訓(xùn)練?!?/p>
Runway 公司獲得了包括 Salesforce、谷歌和英偉達(dá)在內(nèi)的知名投資機(jī)構(gòu)的支持,專注于提供包括 Gen-4 在內(nèi)的一系列 AI 視頻創(chuàng)作工具。然而,在 AI 視頻生成這一競(jìng)爭(zhēng)激烈的賽道上,Runway 面臨著來自 OpenAI 和谷歌等科技巨頭的強(qiáng)勁挑戰(zhàn)。為了在市場(chǎng)中脫穎而出,Runway 采取了差異化競(jìng)爭(zhēng)策略,不僅與一家好萊塢大型電影制片廠達(dá)成了合作協(xié)議,還特別撥出數(shù)百萬美元資金,用于資助那些運(yùn)用 AI 生成視頻技術(shù)進(jìn)行創(chuàng)作的電影項(xiàng)目。
具體到 Gen-4 的功能,Runway 表示,用戶只需提供角色的參考圖像,模型便能在不同的光照條件下生成外觀持續(xù)一致的角色。在構(gòu)建具體場(chǎng)景時(shí),用戶可以上傳主體的圖像,并輔以文字描述,明確說明希望生成的鏡頭構(gòu)圖要求。
Runway 在博客中進(jìn)一步強(qiáng)調(diào):“Gen-4 在生成具有高度動(dòng)態(tài)感和逼真運(yùn)動(dòng)效果的視頻方面表現(xiàn)卓越,同時(shí)在主體、物體和風(fēng)格的一致性、對(duì)用戶指令的精準(zhǔn)遵循度以及對(duì)現(xiàn)實(shí)世界規(guī)律的理解方面,均達(dá)到了同類頂尖水平?!惫具€宣稱,“Runway Gen-4 的發(fā)布,也標(biāo)志著視覺生成模型在模擬真實(shí)世界物理規(guī)律的能力方面取得了一個(gè)重要的里程碑?!?/p>
如同當(dāng)前所有的視頻生成模型一樣,Gen-4 也是通過對(duì)海量的視頻數(shù)據(jù)進(jìn)行訓(xùn)練而成的。通過學(xué)習(xí)這些數(shù)據(jù)中的模式,模型得以生成全新的合成視頻片段。然而,Runway 方面拒絕透露其訓(xùn)練數(shù)據(jù)的具體來源,部分原因是出于保護(hù)商業(yè)競(jìng)爭(zhēng)優(yōu)勢(shì)的考量,但也因?yàn)橛?xùn)練數(shù)據(jù)的細(xì)節(jié)往往是潛在知識(shí)產(chǎn)權(quán)訴訟的敏感地帶。
一個(gè)典型的例子是,Runway 目前正面臨一起由藝術(shù)家群體提起的訴訟。該訴訟指控 Runway 及其他幾家生成式 AI 公司,在未經(jīng)授權(quán)的情況下,使用了受版權(quán)保護(hù)的藝術(shù)作品來訓(xùn)練其 AI 模型。對(duì)此,Runway 主張其行為受到“合理使用”(Fair Use)原則的保護(hù),應(yīng)免于承擔(dān)法律責(zé)任。目前,該案的最終結(jié)果尚不明朗。
這場(chǎng)法律糾紛對(duì)于 Runway 來說風(fēng)險(xiǎn)頗高。據(jù)《The Information》報(bào)道,Runway 目前正在進(jìn)行新一輪融資,此輪融資可能使其公司估值達(dá)到 40 億美元(IT之家注:現(xiàn)匯率約合 290.44 億元人民幣)。隨著其視頻生成模型 API(應(yīng)用程序編程接口)等新產(chǎn)品的陸續(xù)推出,Runway 期望能在今年實(shí)現(xiàn) 3 億美元的年化收入目標(biāo)。
無論這場(chǎng)官司走向如何,以 Gen-4 為代表的生成式 AI 視頻工具正對(duì)現(xiàn)有的電影和電視行業(yè)帶來顛覆性的挑戰(zhàn)。由代表好萊塢動(dòng)畫師和漫畫家的動(dòng)畫協(xié)會(huì)(Animation Guild)在 2024 年委托進(jìn)行的一項(xiàng)研究顯示,在已經(jīng)采用 AI 技術(shù)的電影制作公司中,高達(dá) 75% 的公司在引入該技術(shù)后,出現(xiàn)了裁減、合并崗位或直接取消職位的現(xiàn)象。該研究同時(shí)預(yù)測(cè),到 2026 年,生成式 AI 可能會(huì)沖擊超過 10 萬個(gè)美國(guó)娛樂行業(yè)的工作崗位。
廣告聲明:文內(nèi)含有的對(duì)外跳轉(zhuǎn)鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時(shí)間,結(jié)果僅供參考,IT之家所有文章均包含本聲明。