生成式 AI 最大飛躍!OpenAI 首個視頻生成模型重磅發布

2024年02月18日15:15:04 科技 1513

作者 | Tina、褚杏娟

2 月 16 日,OpenAI 在其官網發布文生視頻模型 Sora。據介紹,該模型可以生成長達一分鐘的視頻,同時保持視覺品質並遵循用戶提示。


Sora 在日語中意為天空,該技術背後的團隊包括 Tim Brooks 和 Bill Peebles,之所以選擇這個名字,是希望它能激起無限的創造潛力。


生成式 AI 最大飛躍!OpenAI 首個視頻生成模型重磅發布 - 天天要聞


OpenAI 給出了不少令人印象深刻的例子:在龍年春節里的舞龍活動,人山人海的場景真假難辨,甚至還有群眾拿著手機跟拍的細節;動物世界中,站在樹上、戴著王冠的猴子等;在社交媒體上教大家做曲奇的老奶奶;戴著耳機聽音樂的兩隻金毛狗.....


生成式 AI 最大飛躍!OpenAI 首個視頻生成模型重磅發布 - 天天要聞


生成式 AI 最大飛躍!OpenAI 首個視頻生成模型重磅發布 - 天天要聞


有網友評論說,AI 能根據文字生成圖片的時候,他就在想離生成視頻的日期不遠了,沒想到這麼快!「又有一波『固執的』從業者和藝術家們要失業了,從業者門檻進一步拉低!YouTube/TikTok 等一眾長視頻或短視頻網站估計要迎來一波新的流量。」


一些 YouTube 網紅確實開始擔心,MrBeast 發帖半開玩笑地求奧特曼不要讓他失業。


生成式 AI 最大飛躍!OpenAI 首個視頻生成模型重磅發布 - 天天要聞


有投資者則發表評論說,他們早就認為「內容生成干不過大公司,初創公司要做產品和應用……」他們一直認為 Pika 應該轉型……


而 OpenAI 員工 will depue 則表示,他們過去兩個月一直忙於此事,目前 Sora 還處於早期宣傳階段。根據 OpenAI 隨後發布的論文來看,這個模型的能力確實已經超出了 OpenAI 最初所宣傳的。


生成式 AI 最大飛躍!OpenAI 首個視頻生成模型重磅發布 - 天天要聞


這篇論文揭示了 Sora 架構的一些關鍵方面,比如它可以生成任意解析度和寬高比的視頻(最高 1080p)。根據論文,Sora 能夠執行各種圖像和視頻編輯任務,比如創建循環視頻、延長視頻時長或更改現有視頻的背景。


生成式 AI 最大飛躍!OpenAI 首個視頻生成模型重磅發布 - 天天要聞

將 DALL·E 2 或 DALL·E 3 生成的圖片轉為視頻


然而,最令人感興趣的是 Sora「模擬數字世界」的能力。它不僅僅是生成單個照片或視頻,而是確定環境中每個對象的物理特性,並根據這些計算渲染照片或視頻(或互動式 3D 世界,視情況而定)。正如 Nvidia 高級研究員 Jim Fan 所評論的那樣,Sora 更像是一個「數據驅動的物理引擎」,而不是一個創意引擎。


對於 Sora 目前存在的弱點,OpenAI 也不避諱:模型在準確模擬複雜場景的物理特性方面可能會遇到困難,也可能無法理解具體的因果關係實例。

生成式 AI 最大飛躍!OpenAI 首個視頻生成模型重磅發布 - 天天要聞


例如「五隻灰狼幼崽在一條偏僻的碎石路上互相嬉戲、追逐」,狼的數量會變化,一些憑空出現或消失。


現在,Sora 正面向部分成員開放,以評估關鍵領域的潛在危害或風險。

原文鏈接:https://www.infoq.cn/article/u3USgtmYw11CHkZRh7EO

科技分類資訊推薦

長安與東風重組新進展:朱華榮稱不會改變長安既定戰略 - 天天要聞

長安與東風重組新進展:朱華榮稱不會改變長安既定戰略

2月9日,長安汽車和東風集團股份(00489.HK)同步發布了控股股東「正在與其他國資央企集團籌劃重組事項」的信息。長安汽車的控股股東是兵裝集團,而東風集團股份的控股股東是東風公司。隨即,長安汽車和東風集團這兩家汽車央企將合併重組,成為業內關注的焦點。
公安部出手了!年齡限制放寬10年、送考下鄉,2025年考駕照不難了 - 天天要聞

公安部出手了!年齡限制放寬10年、送考下鄉,2025年考駕照不難了

電動車加強管理以後,要求機動車類型的車輛需要持證上路,但是老年人考駕照卻受阻,一方面有年齡的限制,另一方面偏遠山區考駕照不方便,所以在2025年公安部出手了,年齡限制放寬10年,同時推出送考下鄉服務,還進一步的降低考駕照的費用,2025年起考摩托車駕照不難了。
從「星靈安全守護體系」到昊鉑HL,看懂廣汽科技日 - 天天要聞

從「星靈安全守護體系」到昊鉑HL,看懂廣汽科技日

發布會以技術切入,並全程圍繞安全展開。廣汽集團董事長、總經理馮興亞率先登場,宣布2025年四季度將正式上市支持L3級智能駕駛的車型,他同時強調面向自動駕駛時代對智能駕駛技術、整車安全架構以及突發風險處理能力的要求更高。如何才能滿足更高的要求?馮興亞提到了「廣汽
關稅大棒下,最受傷的車企出現了 - 天天要聞

關稅大棒下,最受傷的車企出現了

特朗普的關稅大棒剛揮出,尚未嚇退「外敵」,卻先刺痛了自己。近日,擁有瑪莎拉蒂、Jeep等14個品牌的全球第四大車企斯泰蘭蒂斯突然宣布裁撤900名美國工人,關閉加拿大和墨西哥兩家工廠,北美生產線陷入癱瘓。幾乎同一時間,捷豹路虎宣布暫停對美出口一個月,奧迪更是直接