搶導演飯碗？AI生成視頻100幀降至3美分

2023年05月12日21:03:22 娛樂 1506

用戶生成視頻的方式變得更加多元，可以文生視頻、圖生視頻、視頻生視頻；在不同參數設置下，每100幀的報價範圍從3美分到18美分不等。

文|鄭遠方

前腳《復仇者聯盟》導演羅素兄弟中的joe russo剛剛放話，預計2年後就會出現一部完全由ai製作的電影，後腳stability ai就發布了ai生成視頻新工具，製作電影、至少製造動畫短片難度由此進一步降低。

當地時間5月11日，stability ai發布stable animation sdk，這是一款專為藝術家與開發人員設計的工具，旨在幫助藝術家和開發人員運用最先進的穩定擴散模型生成動畫。

藉助這一工具，用戶可以使用所有stable diffusion模型，包括stable diffusion 2.0、stable diffusion xl等。

更重要的是，用戶生成動畫的方式變得更加多元，簡而言之共有三種：文生視頻、圖生視頻、視頻生視頻。

1）文本輸入：即是使用文本形式的prompt，調整各種參數後生成動畫，這一功能與之前的stable diffusion、midjourney或dall-e 2類似。

2）文本輸入+初始圖像輸入：用戶提供一個初始圖像，作為動畫的起點，再配合文本prompt，生成最終的動畫效果。

3）初始視頻輸入+文本輸入：用戶提供一個初始視頻，以作為動畫基礎。在通過參數調整與文本prompt指導，最終可輸齣動畫。

與此同時，stable animation可以設置許多參數，包括最大幀數、高度、寬度、採樣器、風格、色調等等。其中，可用的風格預設包括動漫、電影、漫畫、數字藝術，增強幻想藝術、線條、朋克、攝影等多種形式。

目前，stable animation僅提供軟件開發套件（sdk）和付費api。而部分參數要求可能會影響價格。stability表示，在不同設置下，每100幀的報價範圍從3美分到18美分不等。

實際上，stability ai之前已推出基於stable diffusion的動畫工具，例如用戶可以prompt interpolation生成小段動圖，而此次升級後，stable animation生成視頻的能力變得更為全面且成熟。

值得一提的是，近日發布的wes anderson《指環王》新預告片中，就有着一些ai工具的蹤跡。openai前ai主管andrej karpathy猜測，這部預告片中用到了midjourney/stable diffusion、controlnet、elevenlabs、d-id、chatgpt、adobe等工具。