就在昨天，Sora又有全新「神作」炸出了！

兩位Sora作者，Bill Peebles、Tim Brooks紛紛甩出全新圖片。（順便還秀了一把基友情？）

「一只小熊貓和一只巨嘴鳥是最好的朋友，在藍(lán)色時(shí)刻漫步在圣托里尼島」，Peebles稱這個場景簡直就和兩人走到OpenAI辦公室的畫面一模一樣。

a red panda and a toucan are best friends taking a stroll through santorini during the blue hour

這個視頻的連貫性簡直令人驚呼：在每一幀中，小熊貓和巨嘴鳥的形象始終保持著一致性。

當(dāng)然仔細(xì)看還是有不少破綻。比如小熊貓的腿有時(shí)會交織在一起，畫面看起來更像卡通圖像，而不像逼真的現(xiàn)實(shí)世界。

但總的來說，這種視頻質(zhì)量已經(jīng)足以讓我們對AI視頻的未來放飛想象。

有網(wǎng)友立刻做出了配音版，貼切的配音一出，視頻更有那個味兒了！

難怪好萊塢大導(dǎo)Tyler Perry直言，自己在看完Sora制作的視頻后，直接擱置了自己影師工作室8億美元的擴(kuò)建計(jì)劃！

更多「神作」來襲

這次兩位作者放出的第二批視頻，效果更加逼真、更加炸裂。

網(wǎng)友們接連不斷發(fā)出驚嘆：Sora是怎么做到一次比一次迭代得更好的？

這個視頻是「一名潛水員發(fā)現(xiàn)了一艘隱藏的未來沉船，里面有控制論海洋生物和先進(jìn)的外星技術(shù)」。

a scuba diver discovers a hidden futuristic shipwreck, with cybernetic marine life and advanced alien technology

潛水員、海底景觀、沉船外殼、內(nèi)部的外星技術(shù)都生成得十分逼真。

當(dāng)然，這個場景也不是100%完美。立刻有人發(fā)現(xiàn)破綻——

比如，潛水員沒有擺動腳蹼就能游動起來，也沒有吐出氣泡。

一位好萊塢電影制片人吐槽說：人的動作看起來沒有靈魂，有些像僵尸。

但對于不那么挑剔的觀眾，這個20秒視頻的質(zhì)量已經(jīng)夠了。

有人滿意地說：看起來像《深海迷航》的高分辨率版本

在以往，這個場景無疑要耗費(fèi)巨資。而現(xiàn)在，好萊塢大片中燒金的高難度場景，都可以用Sora視頻替代了，AI淘汰影視行業(yè)真不是說說而已！

這條閃著珠光的銀色鱗片、有著冰藍(lán)的眼睛和象牙龍角、吐出白氣的小白龍，也讓網(wǎng)友們驚呼，太太太震撼了！

Close-up of a majestic white dragon with pearlescent, silver-edged scales, icy blue eyes, elegant ivory horns, and misty breath. Focus on detailed facial features and textured scales, set against a softly blurred background

它的擬人化做得很好，眼睛水汪汪的，傳達(dá)了非常動人的情感，仿佛能聽懂人話一樣。

《權(quán)力的游戲》中的巨龍，是這樣的。跟它比起來，小白龍的差距并不太大。

有的網(wǎng)友表示，自己對這條小白龍愛不釋手，直接給它配了個音——

于是一場配音大賽開始了。

現(xiàn)實(shí)場景，是給Sora最難的考題。

下面這個「一個男人在夏威夷熱帶水域上空定點(diǎn)跳傘，寵物金剛鸚鵡在旁邊飛翔」的視頻，Sora再次交出了讓人印象深刻的答卷。

a man BASE jumping over tropical hawaii waters. His pet macaw flies alongside him

場景如此逼真，直接有人發(fā)問：「是真的視頻還是AI做的？」

配上音后是這樣的，就問會有多少人發(fā)現(xiàn)——這并不是真實(shí)的場景？

如果非要找茬，就是金剛鸚鵡的照明不太對，看起來像是單獨(dú)做出來的動畫，并不像自然條件下的光照。

定點(diǎn)跳傘的動作生成得不夠準(zhǔn)確，降落傘太小。

下面是一只玻璃烏龜，裂縫用金繕工藝修復(fù)，在日落時(shí)分走在黑色的沙灘上。

畫面的一致性很完美，沙子的物理學(xué)特性也完全還原出來了。

不過美中不足的是：烏龜似乎只有三條腿？?

也有人發(fā)現(xiàn)「華點(diǎn)」：把沙丘做出崎嶇不平的樣子，是為了讓海龜爬過沙丘后不會留下痕跡嗎？

相比之下，Midjourney生成的玻璃烏龜是這樣的，別有一番風(fēng)味。

精美的紙藝世界中的一艘船，海面還有海洋動物躍出。

in a beautifully rendered papercraft world, a steamboat travels across a vast ocean with wispy clouds in the sky. vast grassy hills lie in the distant background, and some sealife is visible near the papercraft ocean's surface

黑暗的霓虹燈雨林里，閃耀著奇幻的動植物。

a dark neon rainforest aglow with fantastical fauna and animals

不過對于這個視頻，也有人挑刺說：「這是我見過的Sora最差的demo，它不知為什么就生成了矢量動畫的風(fēng)格?！?/p>

一只戴著眼鏡的貓，出現(xiàn)在20世紀(jì)60年代的諜戰(zhàn)電影中。

cat in glasses in a 1960s spy movie

黃昏時(shí)分，一只巨大的半透明水母優(yōu)雅地飄浮在荒蕪的城市中，還是用35毫米膠片拍攝的超現(xiàn)實(shí)場景。

A surreal scene unfolds as a giant, translucent jellyfish floats gracefully through a deserted cityscape at dusk. The scene is shot on 35mm film

這是一個精心制作的立體模型：江戶時(shí)代，木結(jié)構(gòu)建筑前，一個孤獨(dú)的武士慢慢穿過小鎮(zhèn)。

A meticulously crafted diorama depicting a serene scene from Edo-period Japan. Traditional wooden architecture. A lone samurai, clad in intricate armor, walks slowly through the town

一只戴著護(hù)目鏡的小胖哈巴狗，坐在一輛舊摩托車旁邊的凳子上。

仔細(xì)看可以發(fā)現(xiàn)，狗肚子一呼一吸的樣子，顯得非常真實(shí)。

a small chubby Pug dog in goggles is sitting on a stool next to an old motorcycle

一只棕色邊牧戴著太陽鏡，滑著滑板。

a brown and white border collie stands on a skateboard, wearing sunglasses

可怕的事來了，有人在底下留言稱，棕色邊牧是自己的狗，這個視頻是自己拍的。

而我們，竟有那么一刻恍惚了：他說的究竟是真是假？

總之，網(wǎng)友們迫不及待等待公測了。

還有人給Sora出了神考題——「一部手機(jī)正在直播進(jìn)入黑洞的過程」。

網(wǎng)友猜測：虛幻引擎被用來生成部分?jǐn)?shù)據(jù)集？

隨著這些視頻被放出，網(wǎng)友們心中的疑問也越來越強(qiáng)烈——

Sora模型究竟是用什么數(shù)據(jù)訓(xùn)練的？

不少網(wǎng)友也覺得，怎么Sora生成的畫面，看起來有些似曾相識？仿佛就是直接用虛幻引擎（Unreal Engine）做出來的一樣。

隨后，越來越多人公認(rèn)：Sora訓(xùn)練的數(shù)據(jù)集，應(yīng)該就是用UE產(chǎn)生的。

其實(shí)，在Sora剛誕生時(shí)大佬就紛紛預(yù)測——Sora是由游戲引擎提供支持的。

Pytorch聯(lián)合創(chuàng)始人Soumith Chintala就這樣認(rèn)為。

數(shù)據(jù)科學(xué)家和機(jī)器學(xué)習(xí)工程師Ralph Brooks也給出了自己的分析：

如果要創(chuàng)建大量不同角度的高清視頻，就需要進(jìn)行模擬。其中，有很多線索讓我相信，UE5在一定程度上就是用來創(chuàng)建訓(xùn)練數(shù)據(jù)的。

比如這段廣為人知的櫻花漫步視頻中，人物移動的方式跟UE5中非常相似。現(xiàn)實(shí)中的人走路是不會用恒定速度的。

英偉達(dá)高級科學(xué)家Jim Fan同樣表示，「如果Sora接受過大量UE5合成數(shù)據(jù)的訓(xùn)練，我不會感到驚訝的！」

當(dāng)然，它可能沒有明確調(diào)用UE5，但非常有可能將UE5生成的文本、視頻對作為合成數(shù)據(jù)，添加到訓(xùn)練集中。

早有預(yù)言帝猜中，Sora的推理管道是用的CLIP底座、文本轉(zhuǎn)3D對象，和游戲引擎模擬。

果然，「人工訓(xùn)練數(shù)據(jù)耗盡」不會阻止LLM的發(fā)展，合成數(shù)據(jù)才是AI的未來！

「精簡版」體驗(yàn)，就藏在技術(shù)報(bào)告里！

網(wǎng)友們看到這些一代比一代強(qiáng)的demo，已經(jīng)心癢難耐了。

好消息是：雖然Sora還沒有正式開放功能，但在技術(shù)報(bào)告里，已經(jīng)可以小體驗(yàn)一把了！

報(bào)告地址：https://openai.com/research/video-generation-models-as-world-simulators

通過選擇不同的關(guān)鍵詞，比如人物、衣著、天氣環(huán)境、地理位置等選項(xiàng)，就可以體驗(yàn)Sora生成的不同視頻。

這樣我們就可以看到——a穿著b樣子的衣服，在c地點(diǎn)的d天氣下，愜意地散步。

好萊塢大佬直言很害怕，影視行業(yè)真完蛋了？

這也難怪，好萊塢知名導(dǎo)演、制片人、演員Tyler Perry因?yàn)镾ora，決定擱置自己亞特蘭大工作室耗資8億美元的擴(kuò)建計(jì)劃。

本來，Perry導(dǎo)演在過去四年里，一直計(jì)劃斥資8億美元擴(kuò)建自己的工作室，為占地330英畝的土地增加12個攝影棚。

然而，在2月16日看過Sora做出的視頻后，他決定撤銷自己的8億美元計(jì)劃，因?yàn)樗臄z的大片中，可能并不需要找取景地，或者搭建實(shí)景了。

「以前，我們只是被告知AI可以做這些事，但是真的看到它做出來的場景，還是太令人震驚了！」

Perry導(dǎo)演表示，因?yàn)镾ora給自己帶來的沖擊太過強(qiáng)烈，8億美元擴(kuò)建計(jì)劃已被無限期推遲。

現(xiàn)在，拍電影時(shí)再也不需要親自前往拍攝地點(diǎn)了。

不論是想要科羅拉多的雪地場景、月球上的場景，還是山中客廳中拍攝兩個人的場景，都再也不要搭建真實(shí)布景，只要在辦公室的電腦上，就能完成一切！

而這也就意味著，巨大的變化將波及行業(yè)的每一個角落，影響到演員、燈光、運(yùn)輸、音效和剪輯等所有從業(yè)者的飯碗。

現(xiàn)在，Perry導(dǎo)演已經(jīng)在兩部電影中的現(xiàn)場拍攝和后期制作中使用了AI，避免了耗費(fèi)數(shù)小時(shí)給演員畫老年妝。

Sora的出現(xiàn)徹底改變了游戲規(guī)則。

在以往，HBO的試播可能需要耗資1500萬、2000萬乃至3500萬美元，而現(xiàn)在，這個成本低到不可想象。公司顯然會選擇成本更低的方案。

在不遠(yuǎn)的將來，很多工作崗位都會消失。

影視行業(yè)該建立怎樣的安全防護(hù)措施，保住大家的飯碗？

參考資料：

https://www.hollywoodreporter.com/business/business-news/tyler-perry-ai-alarm-1235833276/

https://twitter.com/JMT3/status/1761443473218240558

https://twitter.com/_tim_brooks/status/1761236971186438178

https://twitter.com/model_mechanic/status/1761198301482021084