Sora神圖驚掉下巴,好萊塢導演急撤掉8億美元攝影棚! Sora「內測」提前開放,影視失業潮將至
就在昨天,Sora又有全新「神作」炸出了!
兩位Sora作者,Bill Peebles、Tim Brooks紛紛甩出全新圖片。(順便還秀了一把基友情?)
「一只小熊貓和一只巨嘴鳥是最好的朋友,在藍色時刻漫步在圣托里尼島」,Peebles稱這個場景簡直就和兩人走到OpenAI辦公室的畫面一模一樣。

a red panda and a toucan are best friends taking a stroll through santorini during the blue hour
這個視頻的連貫性簡直令人驚呼:在每一幀中,小熊貓和巨嘴鳥的形象始終保持著一致性。
當然仔細看還是有不少破綻。比如小熊貓的腿有時會交織在一起,畫面看起來更像卡通圖像,而不像逼真的現實世界。
但總的來說,這種視頻質量已經足以讓我們對AI視頻的未來放飛想象。
有網友立刻做出了配音版,貼切的配音一出,視頻更有那個味兒了!
難怪好萊塢大導Tyler Perry直言,自己在看完Sora制作的視頻后,直接擱置了自己影師工作室8億美元的擴建計劃!
更多「神作」來襲
這次兩位作者放出的第二批視頻,效果更加逼真、更加炸裂。
網友們接連不斷發出驚嘆:Sora是怎么做到一次比一次迭代得更好的?
這個視頻是「一名潛水員發現了一艘隱藏的未來沉船,里面有控制論海洋生物和先進的外星技術」。
a scuba diver discovers a hidden futuristic shipwreck, with cybernetic marine life and advanced alien technology
潛水員、海底景觀、沉船外殼、內部的外星技術都生成得十分逼真。
當然,這個場景也不是100%完美。立刻有人發現破綻——
比如,潛水員沒有擺動腳蹼就能游動起來,也沒有吐出氣泡。
一位好萊塢電影制片人吐槽說:人的動作看起來沒有靈魂,有些像僵尸。
但對于不那么挑剔的觀眾,這個20秒視頻的質量已經夠了。
有人滿意地說:看起來像《深海迷航》的高分辨率版本
在以往,這個場景無疑要耗費巨資。而現在,好萊塢大片中燒金的高難度場景,都可以用Sora視頻替代了,AI淘汰影視行業真不是說說而已!
這條閃著珠光的銀色鱗片、有著冰藍的眼睛和象牙龍角、吐出白氣的小白龍,也讓網友們驚呼,太太太震撼了!
Close-up of a majestic white dragon with pearlescent, silver-edged scales, icy blue eyes, elegant ivory horns, and misty breath. Focus on detailed facial features and textured scales, set against a softly blurred background
它的擬人化做得很好,眼睛水汪汪的,傳達了非常動人的情感,仿佛能聽懂人話一樣。
《權力的游戲》中的巨龍,是這樣的。跟它比起來,小白龍的差距并不太大。

有的網友表示,自己對這條小白龍愛不釋手,直接給它配了個音——
于是一場配音大賽開始了。
現實場景,是給Sora最難的考題。
下面這個「一個男人在夏威夷熱帶水域上空定點跳傘,寵物金剛鸚鵡在旁邊飛翔」的視頻,Sora再次交出了讓人印象深刻的答卷。
a man BASE jumping over tropical hawaii waters. His pet macaw flies alongside him
場景如此逼真,直接有人發問:「是真的視頻還是AI做的?」
配上音后是這樣的,就問會有多少人發現——這并不是真實的場景?
如果非要找茬,就是金剛鸚鵡的照明不太對,看起來像是單獨做出來的動畫,并不像自然條件下的光照。

定點跳傘的動作生成得不夠準確,降落傘太小。

下面是一只玻璃烏龜,裂縫用金繕工藝修復,在日落時分走在黑色的沙灘上。
畫面的一致性很完美,沙子的物理學特性也完全還原出來了。
不過美中不足的是:烏龜似乎只有三條腿???

也有人發現「華點」:把沙丘做出崎嶇不平的樣子,是為了讓海龜爬過沙丘后不會留下痕跡嗎?

相比之下,Midjourney生成的玻璃烏龜是這樣的,別有一番風味。
精美的紙藝世界中的一艘船,海面還有海洋動物躍出。
in a beautifully rendered papercraft world, a steamboat travels across a vast ocean with wispy clouds in the sky. vast grassy hills lie in the distant background, and some sealife is visible near the papercraft ocean's surface
黑暗的霓虹燈雨林里,閃耀著奇幻的動植物。
a dark neon rainforest aglow with fantastical fauna and animals
不過對于這個視頻,也有人挑刺說:「這是我見過的Sora最差的demo,它不知為什么就生成了矢量動畫的風格。」
一只戴著眼鏡的貓,出現在20世紀60年代的諜戰電影中。
cat in glasses in a 1960s spy movie
黃昏時分,一只巨大的半透明水母優雅地飄浮在荒蕪的城市中,還是用35毫米膠片拍攝的超現實場景。
A surreal scene unfolds as a giant, translucent jellyfish floats gracefully through a deserted cityscape at dusk. The scene is shot on 35mm film
這是一個精心制作的立體模型:江戶時代,木結構建筑前,一個孤獨的武士慢慢穿過小鎮。
A meticulously crafted diorama depicting a serene scene from Edo-period Japan. Traditional wooden architecture. A lone samurai, clad in intricate armor, walks slowly through the town
一只戴著護目鏡的小胖哈巴狗,坐在一輛舊摩托車旁邊的凳子上。
仔細看可以發現,狗肚子一呼一吸的樣子,顯得非常真實。
a small chubby Pug dog in goggles is sitting on a stool next to an old motorcycle
一只棕色邊牧戴著太陽鏡,滑著滑板。
a brown and white border collie stands on a skateboard, wearing sunglasses
可怕的事來了,有人在底下留言稱,棕色邊牧是自己的狗,這個視頻是自己拍的。
而我們,竟有那么一刻恍惚了:他說的究竟是真是假?

總之,網友們迫不及待等待公測了。
還有人給Sora出了神考題——「一部手機正在直播進入黑洞的過程」。

網友猜測:虛幻引擎被用來生成部分數據集?
隨著這些視頻被放出,網友們心中的疑問也越來越強烈——
Sora模型究竟是用什么數據訓練的?
不少網友也覺得,怎么Sora生成的畫面,看起來有些似曾相識?仿佛就是直接用虛幻引擎(Unreal Engine)做出來的一樣。
隨后,越來越多人公認:Sora訓練的數據集,應該就是用UE產生的。
其實,在Sora剛誕生時大佬就紛紛預測——Sora是由游戲引擎提供支持的。
Pytorch聯合創始人Soumith Chintala就這樣認為。
數據科學家和機器學習工程師Ralph Brooks也給出了自己的分析:
如果要創建大量不同角度的高清視頻,就需要進行模擬。其中,有很多線索讓我相信,UE5在一定程度上就是用來創建訓練數據的。
比如這段廣為人知的櫻花漫步視頻中,人物移動的方式跟UE5中非常相似。現實中的人走路是不會用恒定速度的。
英偉達高級科學家Jim Fan同樣表示,「如果Sora接受過大量UE5合成數據的訓練,我不會感到驚訝的!」
當然,它可能沒有明確調用UE5,但非常有可能將UE5生成的文本、視頻對作為合成數據,添加到訓練集中。
早有預言帝猜中,Sora的推理管道是用的CLIP底座、文本轉3D對象,和游戲引擎模擬。

果然,「人工訓練數據耗盡」不會阻止LLM的發展,合成數據才是AI的未來!

「精簡版」體驗,就藏在技術報告里!
網友們看到這些一代比一代強的demo,已經心癢難耐了。
好消息是:雖然Sora還沒有正式開放功能,但在技術報告里,已經可以小體驗一把了!
報告地址:https://openai.com/research/video-generation-models-as-world-simulators
通過選擇不同的關鍵詞,比如人物、衣著、天氣環境、地理位置等選項,就可以體驗Sora生成的不同視頻。
這樣我們就可以看到——a穿著b樣子的衣服,在c地點的d天氣下,愜意地散步。
好萊塢大佬直言很害怕,影視行業真完蛋了?
這也難怪,好萊塢知名導演、制片人、演員Tyler Perry因為Sora,決定擱置自己亞特蘭大工作室耗資8億美元的擴建計劃。
本來,Perry導演在過去四年里,一直計劃斥資8億美元擴建自己的工作室,為占地330英畝的土地增加12個攝影棚。
然而,在2月16日看過Sora做出的視頻后,他決定撤銷自己的8億美元計劃,因為他拍攝的大片中,可能并不需要找取景地,或者搭建實景了。
「以前,我們只是被告知AI可以做這些事,但是真的看到它做出來的場景,還是太令人震驚了!」

Perry導演表示,因為Sora給自己帶來的沖擊太過強烈,8億美元擴建計劃已被無限期推遲。
現在,拍電影時再也不需要親自前往拍攝地點了。
不論是想要科羅拉多的雪地場景、月球上的場景,還是山中客廳中拍攝兩個人的場景,都再也不要搭建真實布景,只要在辦公室的電腦上,就能完成一切!
而這也就意味著,巨大的變化將波及行業的每一個角落,影響到演員、燈光、運輸、音效和剪輯等所有從業者的飯碗。
現在,Perry導演已經在兩部電影中的現場拍攝和后期制作中使用了AI,避免了耗費數小時給演員畫老年妝。
Sora的出現徹底改變了游戲規則。
在以往,HBO的試播可能需要耗資1500萬、2000萬乃至3500萬美元,而現在,這個成本低到不可想象。公司顯然會選擇成本更低的方案。
在不遠的將來,很多工作崗位都會消失。
影視行業該建立怎樣的安全防護措施,保住大家的飯碗?


































