
今天,專註於視頻生成的 runway 公司正式推出了他們的新一代模型系列 —— gen-4。我就說runway 這麼長時間憋啥大招呢,模型直接上線,沒有套路,最牛的是gen-4解決了場景一致性問題,還有視覺特效加持
下面給大家第一時間劃個重點:
簡單來說,gen-4 在視頻生成的保真度、動態運動捕捉和可控性上都樹立了新的標準,相較於之前的 gen-3 alpha 版本,提升非常明顯
它的核心優勢在於:
1. 高動態與真實感:能生成運動軌跡極其逼真、充滿動態感的視頻內容 2. 高度一致性:無論是視頻中的主體人物、物體,還是整體的藝術風格,gen-4 都能保持高度連貫統一 3. 精準理解與執行:對用戶輸入的提示詞(prompt)理解更深刻,執行更到位,並且擁有頂尖的「世界理解」能力,讓生成內容更符合邏輯和物理規律
視覺參考+指令=精準創作
gen-4 的一大亮點在於它能利用視覺參考(比如你提供一張圖片或一段視頻)結合文字指令,來創造新的圖像和視頻。這意味著你可以指定某個角色、特定風格或場景,讓 ai 在此基礎上進行創作,確保內容的連續性和你對故事走向的掌控力
實戰檢驗:短片作品展示 gen-4 強大實力
為了展示 gen-4 的敘事潛力,runway 團隊用它製作了一系列短片和 mv:
《the lonely little flame》:這部短片完全由 gen-4 生成,展示了其端到端的創作能力
《new york is a zoo》:集中體現了 gen-4 驚人的視覺特效(vfx)潛力。製作團隊先通過 gen-4 的 references 功能,將真實的動物參考圖和紐約實景照片融合,再結合提示詞指定具體動作,最終效果是將超寫實的動物無縫置入了紐約的電影感場景中
《the herd》:這部短片講述了一個年輕人在夜晚被牛群追逐的故事。僅用了幾張圖片作為參考,gen-4 就構建出了角色形象和迷霧籠罩的牛群場景,最後再結合 act-one 工具將故事串聯起來
《the retrieval》:一部動畫風格的短片,講述探險者尋找神秘花朵的故事,同樣完全由 gen-4 製作
如何用上 gen-4?
好消息是,gen-4 的圖像生成視頻)功能,現在已經面向所有 runway 的付費方案用戶和企業客戶正式推送。而備受期待的 references(視覺參考)功能也將在不久後上線
試用地址:
https://app.runwayml.com/login
更多關於 gen-4 的技術細節和研發背景,可以訪問官方發布頁面:
http://runwayml.com/research/introducing-runway-gen-4
⭐星標ai寒武紀,好內容不錯過⭐
用你的贊和在看告訴我~