注意看，這個(gè)機(jī)器人對(duì)抗人類的視頻，在網(wǎng)上徹底火了。
那叫一個(gè)拳拳到肉，刺激程度引得圍觀群眾大呼鵝妹子嚶。
好消息是，這個(gè)機(jī)器人并非真實(shí)存在。
但另一個(gè)不知道是好還是壞的消息是，這樣的特效，是 AI 一鍵合成的。
就是說(shuō)，從左邊這樣的人類實(shí)拍，到右邊這樣的特效畫(huà)面，人類需要做的，只是用鼠標(biāo)把模型拖到畫(huà)面里。
這個(gè) AI 神器，名叫 Wonder Studio AI。
剛發(fā)宣傳片時(shí)，就曾引發(fā) wo cao 聲一片。
現(xiàn)在內(nèi)測(cè)名額開(kāi)始發(fā)放，網(wǎng)友們上手一玩，更是停不下來(lái)，直接在社交媒體上刷了屏。
比如隨手來(lái)一段比波士頓動(dòng)力還動(dòng)感流暢的男團(tuán)熱舞。
或者在自個(gè)兒屋里來(lái)段 freestyle。
↑↑↑ 這個(gè)作品的作者還透露，這是一個(gè)原本需要三天完成的視覺(jué)特效鏡頭，現(xiàn)在只需要 1 分鐘。
也難怪網(wǎng)友們坐不住了。
無(wú)需動(dòng)捕設(shè)備，一鍵生成 CG 動(dòng)畫(huà)
有關(guān) Wonder Studio，官方的說(shuō)法是，“一種可自動(dòng)為 CG 角色制作動(dòng)畫(huà)、打光，并將其合成到真實(shí)場(chǎng)景中的 AI 工具”。
按照官網(wǎng)說(shuō)明，對(duì)于用戶來(lái)說(shuō)，在 CG 動(dòng)畫(huà)制作階段，你不再需要復(fù)雜的 3D 軟件，也不需要昂貴的動(dòng)捕硬件。
只需一臺(tái)用來(lái)拍攝的相機(jī)，拍好視頻后丟進(jìn) Wonder Studio 處理，就足以以假亂真。
具體步驟是這樣的：
首先用相機(jī)拍攝一段視頻，視頻中，真人演員可以隨意做出任何動(dòng)作；
將 MP4 或 MOV 等格式的視頻導(dǎo)入 Wonder Studio，并選定需要處理的視頻段落，拖入中間區(qū)域等待處理；
點(diǎn)擊菜單欄的 next 按鈕，AI 開(kāi)始識(shí)別和分析視頻中的人物；
選中右側(cè)選項(xiàng)欄中所需要的 CG 模型，拖拽至需要替換的人物區(qū)域；
這時(shí)候會(huì)跳出一個(gè)小框，能夠根據(jù)需要調(diào)整 HDR 打光、畫(huà)質(zhì)清晰度、視頻格式等。
最后，選擇解算生成，就能完成視頻段落中 CG 模型對(duì)真人演員的替換。
對(duì)于專業(yè)人士來(lái)說(shuō)，除了最終成品，Wonder Studio 還能導(dǎo)出新視頻的不同軌道，包括動(dòng)作捕捉、攝像機(jī)跟蹤和空鏡等等。
面對(duì)需要修改的細(xì)節(jié)，也可以直接上手微調(diào)。
傳統(tǒng)的 CG 制作流程，需要移除原有人物、把需要替換的 CG 元素導(dǎo)入引擎或 Blender 等軟件當(dāng)中、根據(jù)相機(jī)解算結(jié)果進(jìn)行合成、匹配燈光、渲染…… 最終把新的 CG 模型放到視頻場(chǎng)景中。
比較而言，用上 Wonder Studio 后簡(jiǎn)化了很多工序，也難怪很多人評(píng)論，如果這個(gè)工作流跑通，是十分利好小成本影視制作的。
不過(guò)，Wonder Studio 并非十全十美。
主要體現(xiàn)在 CG 模型覆蓋原人物后，CG 角色和背景銜接處處理不算優(yōu)秀。
比如會(huì)出現(xiàn)美顏瘦臉特效開(kāi)太大，以至于臉部周圍背景扭曲的情況：
而且，CG 模型的邊緣像素會(huì)被拉伸，原人物的衣物等不能做到 100% 消除和被覆蓋：
開(kāi)頭展示的爆火視頻中，其實(shí)也有不少穿幫鏡頭。
所以，雖然效果強(qiáng)大操作簡(jiǎn)單，目前而言，Wonder Studio 還是不能單獨(dú)放到實(shí)際項(xiàng)目中使用，否則一眼驚艷，再看露餡。
但其展示的潛能，已經(jīng)得到內(nèi)測(cè)網(wǎng)友的蓋章肯定。
有內(nèi)測(cè)網(wǎng)友反饋，在他的幾次測(cè)試中，Wonder Studio 能夠自動(dòng)化 80% 的視覺(jué)特效工作。
它仍存在一些困難的領(lǐng)域，但它提供的價(jià)值主張是，只需要付出很少的努力就能做出相當(dāng)不錯(cuò)的東西。
而且這只是開(kāi)始！它還會(huì)變得更好！
《頭號(hào)玩家》男主創(chuàng)業(yè)項(xiàng)目
有意思的不止是產(chǎn)品，Wonder Studio 背后的公司，也頗有故事。
它的出品方是一家名叫 Wonder Dynamics 的 AI 初創(chuàng)公司，致力于通過(guò) AI 提高電影制作的效率和質(zhì)量。
截至目前，公司在種子輪和 A 輪一共募集了 1150 萬(wàn)美元融資。
Wonder Studio 是他們籌備 3 年后，推出的一款基于 AI 的在線視頻特效處理平臺(tái)。
公司已經(jīng)表示，Wonder Studio 后續(xù)還將繼續(xù)簡(jiǎn)化動(dòng)作捕捉和渲染環(huán)節(jié)，繼續(xù)提高制作效率。而且在公司的設(shè)想中，創(chuàng)作者在將來(lái)還能在系統(tǒng)自由上傳自己的 3D 模型。
再來(lái)看公司創(chuàng)始團(tuán)隊(duì)，不少人是熟面孔。
比如世界聞名的導(dǎo)演斯皮爾伯格，就是這家公司的顧問(wèn)。
而公司創(chuàng)始人之一，是《頭號(hào)玩家》男主演泰爾?謝里丹。
（不知道是說(shuō)男主“干一行愛(ài)一行”好呢，還是說(shuō)他“積極致力于用 AI 搶自己飯碗”好）
還有消息稱，美國(guó)導(dǎo)演組合羅素兄弟正在拍攝的一部電影中，Wonder Studio 已經(jīng)參與了部分制作環(huán)節(jié)。電影主角是《怪奇物語(yǔ)》主演 Millie Bobby Brown 和《銀河護(hù)衛(wèi)隊(duì)》中星爵的扮演者 Chris Pratt，電影將上線 Netflix。
期待電影之前，更值得關(guān)注的一點(diǎn)是，最近這段時(shí)間，AI 力量對(duì)視覺(jué)領(lǐng)域瘋狂下手了。
這就不得不提到近日在科技圈瘋狂刷屏的 Meta 大殺器，Segment Anything Model （SAM）。
該模型驚艷世人的能力，就是能夠識(shí)別和分離圖像及視頻中的特定對(duì)象。使用 SAM，用戶可以通過(guò)單擊或輸入文字，來(lái)選中需要編輯的任何物體。
Meta 在介紹 SAM 時(shí)寫道：
SAM 已經(jīng)學(xué)會(huì)了關(guān)于物體的一般概念，并且，它還可以為任何圖像，或視頻中的任何物體生成 msak，包括訓(xùn)練集中不包含的類型。
SAM 足夠通用，且在新的圖像領(lǐng)域無(wú)需額外訓(xùn)練，達(dá)到即開(kāi)即用。
這種零樣本遷移的能力，正是 GPT-4 能力驚人的重要原因之一。因此，國(guó)內(nèi)外不少媒體稱 SAM 的發(fā)布為 CV 領(lǐng)域的 ChatGPT 時(shí)刻。
目前，SAM 已經(jīng)開(kāi)源，并進(jìn)一步提供了其 10 億掩碼數(shù)據(jù)集的完整細(xì)節(jié)，
Meta 官方的說(shuō)法是，隨著技術(shù)發(fā)展，SAM 可以成為 AR、VR 等更通用系統(tǒng)的強(qiáng)大組件。
聯(lián)想到今天介紹的 Wonder Studio，接入 SAM 能力后，對(duì)原有人類圖像的分割，是不是就不再會(huì)出現(xiàn)裙角被遺漏的情況了？
內(nèi)測(cè)申請(qǐng)地址：
https://docs.google.com/forms/d/e/1FAIpQLSdLY3_MQuMEqBy-MZCyXHoPe2YK5BUiSQecjCt0eLUQCux4qA/viewform
參考鏈接：
[1]https://twitter.com/shota7180/status/1644815889576128512
[2]https://twitter.com/wonderdynamics/status/1644376317595615233?s=46&t=HBob6gxh8cOfZTIbieKeSA
本文來(lái)自微信公眾號(hào)：量子位 （ID：QbitAI），作者：衡宇
廣告聲明：文內(nèi)含有的對(duì)外跳轉(zhuǎn)鏈接（包括不限于超鏈接、二維碼、口令等形式），用于傳遞更多信息，節(jié)省甄選時(shí)間，結(jié)果僅供參考，IT之家所有文章均包含本聲明。