生成式 AI 最大飛躍!OpenAI 首個視頻生成模型重磅發佈

2024年02月18日15:15:04 科技 1513

作者 | Tina、褚杏娟

2 月 16 日,OpenAI 在其官網發佈文生視頻模型 Sora。據介紹,該模型可以生成長達一分鐘的視頻,同時保持視覺品質並遵循用戶提示。


Sora 在日語中意為天空,該技術背後的團隊包括 Tim Brooks 和 Bill Peebles,之所以選擇這個名字,是希望它能激起無限的創造潛力。


生成式 AI 最大飛躍!OpenAI 首個視頻生成模型重磅發佈 - 天天要聞


OpenAI 給出了不少令人印象深刻的例子:在龍年春節里的舞龍活動,人山人海的場景真假難辨,甚至還有群眾拿着手機跟拍的細節;動物世界中,站在樹上、戴着王冠的猴子等;在社交媒體上教大家做曲奇的老奶奶;戴着耳機聽音樂的兩隻金毛狗.....


生成式 AI 最大飛躍!OpenAI 首個視頻生成模型重磅發佈 - 天天要聞


生成式 AI 最大飛躍!OpenAI 首個視頻生成模型重磅發佈 - 天天要聞


有網友評論說,AI 能根據文字生成圖片的時候,他就在想離生成視頻的日期不遠了,沒想到這麼快!「又有一波『固執的』從業者和藝術家們要失業了,從業者門檻進一步拉低!YouTube/TikTok 等一眾長視頻或短視頻網站估計要迎來一波新的流量。」


一些 YouTube 網紅確實開始擔心,MrBeast 發帖半開玩笑地求奧特曼不要讓他失業。


生成式 AI 最大飛躍!OpenAI 首個視頻生成模型重磅發佈 - 天天要聞


有投資者則發表評論說,他們早就認為「內容生成干不過大公司,初創公司要做產品和應用……」他們一直認為 Pika 應該轉型……


而 OpenAI 員工 will depue 則表示,他們過去兩個月一直忙於此事,目前 Sora 還處於早期宣傳階段。根據 OpenAI 隨後發佈的論文來看,這個模型的能力確實已經超出了 OpenAI 最初所宣傳的。


生成式 AI 最大飛躍!OpenAI 首個視頻生成模型重磅發佈 - 天天要聞


這篇論文揭示了 Sora 架構的一些關鍵方面,比如它可以生成任意分辨率和寬高比的視頻(最高 1080p)。根據論文,Sora 能夠執行各種圖像和視頻編輯任務,比如創建循環視頻、延長視頻時長或更改現有視頻的背景。


生成式 AI 最大飛躍!OpenAI 首個視頻生成模型重磅發佈 - 天天要聞

將 DALL·E 2 或 DALL·E 3 生成的圖片轉為視頻


然而,最令人感興趣的是 Sora「模擬數字世界」的能力。它不僅僅是生成單個照片或視頻,而是確定環境中每個對象的物理特性,並根據這些計算渲染照片或視頻(或交互式 3D 世界,視情況而定)。正如 Nvidia 高級研究員 Jim Fan 所評論的那樣,Sora 更像是一個「數據驅動的物理引擎」,而不是一個創意引擎。


對於 Sora 目前存在的弱點,OpenAI 也不避諱:模型在準確模擬複雜場景的物理特性方面可能會遇到困難,也可能無法理解具體的因果關係實例。

生成式 AI 最大飛躍!OpenAI 首個視頻生成模型重磅發佈 - 天天要聞


例如「五隻灰狼幼崽在一條偏僻的碎石路上互相嬉戲、追逐」,狼的數量會變化,一些憑空出現或消失。


現在,Sora 正面向部分成員開放,以評估關鍵領域的潛在危害或風險。

原文鏈接:https://www.infoq.cn/article/u3USgtmYw11CHkZRh7EO

科技分類資訊推薦

網購「3C認證」貼紙可助充電寶過安檢?平台緊急下架違規帖子 - 天天要聞

網購「3C認證」貼紙可助充電寶過安檢?平台緊急下架違規帖子

封面新聞記者 宋瀟 實習生 姚媛媛6月26日,民航局發佈緊急通知,自6月28日起禁止旅客攜帶沒有3C標識、3C標識不清晰、被召回型號或批次的充電寶乘坐境內航班。然而,6月27日,有網友爆料稱,二手交易平台上有商家公然提供3C認證刻字服務,毫不掩飾以「3C標誌認證,3C刻字,充電寶刻字」「充電寶打鐳射標,3C認證」等為題,宣...
超百萬充電寶召迴風波背後,無底線價格戰該剎車了 - 天天要聞

超百萬充電寶召迴風波背後,無底線價格戰該剎車了

超‌百萬個充電寶突陷安全旋渦,召回、管控、認證質疑接踵而至。‌多家企業密集發佈大批量召回通告,民航局緊急收緊航空攜帶新規,多個知名品牌更被發現3C認證存疑。一時間,消費者手中充電寶成了「燙手山芋」——「還能用嗎?」「如何查安全?」「召回咋處
離開中國的鈴木,現在還在海外推出新車? - 天天要聞

離開中國的鈴木,現在還在海外推出新車?

鈴木原廠在 2024 年 11 月初時正式發佈品牌首款純電產品 e Vitara,亦為純電概念車 eVX 的量產版,動力規格上擁有前驅與四驅設定、電池容量有着 49kWh 和 61kWh 規格,新車將會是印度制的身份來銷售,並將在夏季於歐洲、印度和日本等市場上
攜充電寶乘機新規發佈,深圳機場可提供7天暫存 - 天天要聞

攜充電寶乘機新規發佈,深圳機場可提供7天暫存

6月28日起,深圳機場開始執行民航局緊急通知的要求,禁止旅客攜帶沒有3C標識、3C標識不清晰、被召回型號或批次的充電寶乘坐境內航班。新規施行首日,深圳機場多措並舉,在嚴格落實局方要求的同時,儘可能為旅客現場處置不能攜帶的充電寶提供便利,同時增派人員,確保現場運行平穩有序。在深圳機場航站樓內,從出發層入口到...
讓機械人觸覺達人手800倍,上海交大教授正加速機械人「就業上崗」速度 - 天天要聞

讓機械人觸覺達人手800倍,上海交大教授正加速機械人「就業上崗」速度

「機械人的功能再炫酷,最終還是得能『用』。」上海交通大學船舶海洋與建築工程學院長聘副教授馬道林,一直致力於解決具身智能發展的難點——觸覺,這正是機械人能「用」的基礎。馬道林關於這一研究的論文在全球頂級學術會議——國際機械人與自動化大會(ICRA)上獲最佳論文獎,這是4000多篇參會論文中的唯一。而他去年5月...