?。縎ora 火爆短片《氣球人》，也“造假”了？？？
背后藝術(shù)家團(tuán)隊(duì)的最新揭秘，可謂一石激起千層浪：原來(lái)，視頻畫面并非完全由 AI 生成，其中有大量視覺(jué)效果需要人類后期實(shí)現(xiàn)。
be like：
這下網(wǎng)友不干了，合著大家伙兒跟 OpenAI 玩真心，OpenAI 背后卻耍起心眼子來(lái)了：
他們含糊其辭，就是希望觀眾認(rèn)為短片完全是 AI 生成的，這是不是有點(diǎn)不誠(chéng)實(shí)了啊。
這不是人工智能生成的視頻，而是使用了一些 AI 技術(shù)的視頻。
還有網(wǎng)友直接開(kāi)噴：誤導(dǎo)性營(yíng)銷！這是誤導(dǎo)性營(yíng)銷！
究竟是怎么個(gè)事兒，咱們還是具體捋一捋。
揭秘 Sora 大片工作流
盡管 OpenAI 一開(kāi)始就介紹了，《氣球人》這樣的短片出自藝術(shù)家團(tuán)隊(duì)之手，他們只是把 Sora 開(kāi)放給了藝術(shù)家使用，但官方并未提及短片具體是如何制作而成的。
現(xiàn)在，《氣球人》背后的藝術(shù)家團(tuán)隊(duì) Shy Kids 自己來(lái)了個(gè)大揭秘，內(nèi)容包括：
視頻片段一致性如何實(shí)現(xiàn)
他們?nèi)绾翁幚?Sora 生成的視頻素材
Sora 生成視頻的局限性及后期處理
視頻一致性
《氣球人》中主角形象的一致性可謂驚艷眾人。
但實(shí)際上吧，據(jù) Shy Kids 團(tuán)隊(duì)中負(fù)責(zé)后期制作的老哥 Patrick Cederberg（簡(jiǎn)稱老帕）透露，想要實(shí)現(xiàn)這種前后一致并不是寫寫提示詞就能成的。
Sora 并沒(méi)有提供工具，來(lái)幫助實(shí)現(xiàn)不同鏡頭之間的主體一致性。也就是說(shuō)，哪怕提示詞都是一樣的，兩次運(yùn)行的結(jié)果也會(huì)有所不同。
他們的做法是，盡可能詳細(xì)地去對(duì)主角形象進(jìn)行描述。
解釋角色的服裝以及氣球的類型是我們解決一致性問(wèn)題的方法，目前 Sora 還沒(méi)有集成適當(dāng)?shù)墓δ軄?lái)實(shí)現(xiàn)此類控制。
即便如此，團(tuán)隊(duì)在用 Sora 生成視頻素材時(shí)還是遇到了不少這樣那樣的問(wèn)題。
比如，提示詞里明明寫了氣球是黃色的，但 Sora 生成的片段里氣球卻可能變紅。
視頻素材處理
一致性之外，老帕提到，在時(shí)間軸方面，Sora 允許用戶修改關(guān)鍵幀。但這種時(shí)間控制并不精準(zhǔn)，無(wú)法保證一定能實(shí)現(xiàn)預(yù)想的效果。
另外，想要實(shí)現(xiàn)這個(gè)鏡頭：
即把鏡頭焦點(diǎn)從牛仔褲一路上移到氣球頭，也得人類自己后期裁切平移畫面，因?yàn)?Sora 本身不會(huì)渲染這樣的鏡頭：它總是傾向于把焦點(diǎn)集中在氣球頭上。
老帕還談到，他們?cè)趯懱崾驹~時(shí)也遇到了一些問(wèn)題：
OpenAI 在讓藝術(shù)家試用 Sora 前，并沒(méi)有考慮到真正的電影制作人是如何思考的。
簡(jiǎn)單來(lái)說(shuō)，就是 Sora 對(duì)攝影術(shù)語(yǔ)（比如跟拍、平移等）的理解有限。老帕認(rèn)為，這一點(diǎn)上 Sora 不如 Runway。
值得一提的是，盡管 Sora 原生支持生成 1080p 視頻，但老帕他們實(shí)際上生成的素材都是 480p 的。他們是在后期使用 Topaz 等工具對(duì)視頻素材進(jìn)行了超分處理。
生成速度方面，根據(jù)老帕的回憶，每次大概需要 10-20 分鐘的時(shí)間。
視頻后期
接下來(lái)，就到了網(wǎng)友們反應(yīng)最強(qiáng)烈的部分 —— 后期。前面已經(jīng)說(shuō)到，Sora 本身還解決不了不同視頻片段里一致性的問(wèn)題。
除了氣球不一定符合設(shè)定，或許是因?yàn)橛?xùn)練數(shù)據(jù)的原因，Sora 還喜歡自動(dòng)給氣球加上奇奇怪怪的人臉。
給主角生成其實(shí)并不需要的假人頭。
Sora 還很堅(jiān)定地認(rèn)為氣球得帶根繩。
總而言之言而總之，這些都需要老帕上手丟到 AE 里，進(jìn)行后期處理。
另外，盡管 Shy Kids 發(fā)現(xiàn)“35mm 膠卷”這樣的關(guān)鍵詞很好用，能讓 Sora 生成的視頻畫面風(fēng)格更一致，但藝術(shù)家們?nèi)孕枰獮樽詈蟮某善稣{(diào)色，為畫面添加顆粒和閃爍效果，以使整部影片畫面更加協(xié)調(diào)統(tǒng)一。
老帕還提到了一個(gè)有意思的細(xì)節(jié)：Sora 很喜歡慢鏡頭。
我不知道為什么，但有很多鏡頭看上去都是 0.5 倍速和 0.75 倍速。
因此我們需要對(duì)大量畫面進(jìn)行調(diào)速，免得影片看上去像個(gè)大型慢動(dòng)作項(xiàng)目。
那么，Sora 生成的視頻素材有多少最終被用在了影片里？“數(shù)學(xué)很差”的老帕估計(jì)了一下，大概是 300:1。
音頻方面，Sora 目前還不能生成聲音，因此旁白和音樂(lè)都是團(tuán)隊(duì)自己加上去的。
版權(quán)
為了不侵犯版權(quán)，OpenAI 給 Sora 上了一些限制。
比如，你不能把提示詞寫成“35mm 膠卷，未來(lái)宇宙飛船中，一名男子拿著光劍靠近”，那樣 Sora 會(huì)直接拒絕生成，因?yàn)檫@畫面太像《星球大戰(zhàn)》了。
哦對(duì)，像什么“阿羅諾夫斯基式鏡頭”和“希區(qū)柯克變焦”也是不行的。
3 人團(tuán)隊(duì) 2 周制作完成
該說(shuō)不說(shuō)，在外界卷起風(fēng)波之前，Shy Kids 團(tuán)隊(duì)對(duì)于 Sora 的表現(xiàn)還是很滿意的。
畢竟，制作《氣球人》這樣一個(gè)高質(zhì)量短片，最后只用了他們仨 1.5 到 2 周的時(shí)間。
團(tuán)隊(duì)認(rèn)為，現(xiàn)在，對(duì)于專業(yè)的電影團(tuán)隊(duì)來(lái)說(shuō)，Sora 當(dāng)然還有很大進(jìn)步空間，但對(duì)于大部分人而言，Sora 已經(jīng)足夠驚艷。
用老帕自己的話說(shuō)：
我覺(jué)得人們應(yīng)該將 Sora 變成工作流里的一部分。
不過(guò)，如果他們不想跟 AI 沾邊，也沒(méi)關(guān)系。
對(duì)于這樣的觀點(diǎn)，也有不少網(wǎng)友表示認(rèn)同，認(rèn)為 Sora 這樣的視頻生成 AI，是對(duì)現(xiàn)有工作流很好的補(bǔ)充。
Adobe 把它們集成進(jìn)軟件里，就是一個(gè)很不錯(cuò)的主意。但，“我厭倦了 OpenAI 們的精美 Demo 營(yíng)銷”。
還有網(wǎng)友不滿的點(diǎn)在于，爆火的“人工智能生成視頻”背后有大量的人類工作，他們投入數(shù)百個(gè)小時(shí)工作，卻被 AI 掩蓋了真實(shí)的價(jià)值。
那么，這事兒你怎么看？
參考鏈接：
[1]https://www.fxguide.com/fxfeatured/actually-using-sora/
[2]https://twitter.com/bilawalsidhu/status/1783544598259794046
本文來(lái)自微信公眾號(hào)：量子位 （ID：QbitAI），作者：魚(yú)羊
廣告聲明：文內(nèi)含有的對(duì)外跳轉(zhuǎn)鏈接（包括不限于超鏈接、二維碼、口令等形式），用于傳遞更多信息，節(jié)省甄選時(shí)間，結(jié)果僅供參考，IT之家所有文章均包含本聲明。