夢晨 金磊 發自 凹非寺
量子位| 公眾號 qbitai
最近的ai狂歡屬於chatgpt,接下來該輪到ai生成視頻了。
想做up主但又不知道怎麼剪視頻的人,這下真的可以放開手腳,專心管內容創作,剩下的工作完全丟給ai來生成了。
最重磅的消息要數runway gen-2公布,只用文字描述憑空創造出全新視頻的產品。
runwayml,這家為《瞬息全宇宙》特效提供技術支持、參與初代stable diffusion研發的公司,放出這樣的「狠話」:
無需燈光,無需攝像頭,搞定所有action。
同時,上一代產品gen-1也結束內測,正式向所有人開放,支持在圖像或源視頻基礎上用ai做各種編輯。
而這還只是ai視頻生成近期進展的冰山一角。
更前沿的算法進展至少就有3個。包括picsart ai research等機構的研究團隊,直接用擴散模型實現視頻生成,同時支持姿態、邊緣控制;港中文大學等機構研究團隊,用交叉注意力機制實現視頻內容的編輯替換;獨立開發者ciararowles改造前一陣大火的controlnet,以前一幀為輸入,生成相對穩定的連續幀序列。
除了產品和算法突飛猛進,甚至都開始有ai視頻作品刷屏了。
比如這段魔性的「威爾史密斯吃意大利麵」,其實是外國網友用阿里前不久出的modelscope-text-to-video-synthesis視頻合成大模型所做。
現在不光在外網病毒式傳播,還傳入了b站,搭配彈幕觀看魔性加倍。
雖然ai生成的視頻目前長度、分辨率、穩定性等方面還一般,但正如熱評第一網友說的,以ai的進化速度過一年再來看看呢?
總之,ai離直接生成高質量完整視頻還需要一段時間,但ai輔助創作工具已經真真正正在改變視頻生產流程了。
這也就不難理解,為什麼最近各家互聯網都在聊同一個話題;aigc。
在這兩天的成都視聽大會上,優酷、愛奇藝、b站等各家互聯網公司,都對aigc的未來進行了一番設想。其中b站ceo陳睿提到,隨着最近這波人工智能浪潮的來臨,b站chatgpt相關的視頻播放量已經超過2個億,人工智能相關投稿量也漲了近一倍。
不難想像,ai時代的來臨,將對我們每個人都產生顛覆性的影響。
而首當其衝的,可能就是視頻創作者了。
不要以為這是個玩笑。
在成都視聽大會上陳睿提及,b站是全網aigc、chatgpt相關內容最多、質量最高的平台,chatgpt相關視頻累計播放已經超過了2億。
可能是年輕人接受能力高的原因,當大家還在討論什麼是aigc,討論chatgpt要怎麼玩的時候,b站上不少up主,已經開始讓ai幫自己做視頻了。
aigc,一天搞定50條視頻
那麼在aigc的加持下,現在做視頻有多簡單?
一天,50個視頻!
△來自b站up主:傻瓜工具箱
你沒有看錯,就是如此的量產。
這這位up主用ai量產視頻的過程,看起來也是極其簡單,動動手指的那種。
up主首先想出核心的創意點,再用類似chatgpt這樣的產品,讓ai幫自己寫1分鐘以上的口播演講稿。
當然,除了chatgpt之外,像notionai、jasperai等等產品也是可以的。
完成腳本的編寫,僅需10秒鐘!
在此之後,再找一個可以生成配音的軟件或小程序,隨意挑選自己喜歡的聲音+gbm,只需把演講稿複製粘貼進去,啪的一下,旁白就搞定了。
原本花一天時間才能完成的視頻文案,如今只用花了15秒鐘左右。
若是還想讓視頻有人臉出鏡呢?這個也可以有。
例如d-id這樣的工具,就可以一鍵實現。
只需把剛才咱們生成的旁白導進去,同樣也是十幾秒的時間,一條口播視頻就做好了。對不少想做視頻又害怕出鏡的人來說,這簡直就是福音。
而且在aigc加持之下,不僅是視頻生產效率大幅提高,在質量方面也是如虎添翼。
例如b站就有up主利用stable diffusion的「圖轉圖」的功能,以此來生成視頻。
甚至在ai工具輔助加持之下,連一天之內生成大片都成為了可能。
aigc將如何顛覆視頻創作?
對於視頻內容工作者而言,aigc帶來的,首先就是效率的大幅提升。
原本花七八天時間才能做好的視頻,可能一兩天就能完成。
尤其是知識類視頻創作者,收益更為明顯。
前段時間,半佛仙人就提到,很多人問他,他視頻里無窮無盡的表情包,到底是哪裡來的?如果一個一個找,那該找到什麼時候?
甚至有人猜想,他的團隊里,是不是專門養了幾個人來搜羅表情包。
而半佛的回答是:根本不用人,全都讓程序自動解決的。
他直接找了程序員朋友,幫忙寫了段爬蟲程序,每天自動從網上爬取各種表情包,並自動識別內容、打標籤。想用什麼表情包,直接在表情包庫里搜索就行。
而aigc的發展,則讓你找程序員朋友的環節都可以省掉。
前段時間,chatgpt已經推出了寫插件的功能。如果普及的話,你完全可以讓chatgpt幫你寫一個插件,用來幫你查資料、下載表情包。
但除了效率、質量上的提高,aigc給視頻內容工作者帶來的價值可不止於此。
對很多視頻內容工作者來說,更具現實意義的,應該是視頻製作成本的降低。
就以b站up主為例,很多大的up主都是工作室製作的。
某種程度上,這是無奈之舉。
又想要保持內容質量,又想要保持更新頻率,每周出上1-2個視頻,很多時候是忙不過來的。就連上字幕這種看似簡單的工作,都需要一個人花上一天時間來完成。這種情況下,只能通過團隊合作的方式,將文案撰寫、視頻拍攝、視頻剪輯等工作分擔出去,才能保證內容供給的質量與數量。
而隨着aigc的發展,很可能1位核心創作者+ai,就能保持視頻的高產量。視頻拍攝、剪輯這種體力活,完全可以讓ai自動生成。
這意味着,視頻創作者可能將迎來井噴,每個人都有可能成為獨立創作者。
當然,我們也不用過多的去擔心,ai會搶了人的工作。
相反,在aigc時代,人的重要性將愈發重要。
因為我們掌握着內容創作的核心:創意。ai可能知道怎麼做,但不知道做什麼,得人下指令,才能有下一步的動作。至少在ai發展出人類一般獨立思考能力之前,人的創意是不可被取代的。
到這一階段,可能會倒逼着創作者,製作出更加精品化的內容。
因為內容創意不過關的內容,只會淹沒在無數同質化的內容當中,進一步廉價化,很難吸引到觀眾的注意力。
優質創作者,也將迎來真正的春天。
還有哪些工具值得關注?
最後,如果你也想用ai搞搞視頻,有哪些立馬就能上手的工具呢?這裡也為大家整理一波。
首先是descript,主打通過編輯腳本自動編輯視頻。
比如真人出鏡講解時話說的啰嗦了,只要在腳本中把文字刪掉,視頻中對應的幾幀就會被正確修剪掉,想把兩句話換個位置也沒問題。
另外這個產品被openai看好,投了5000萬美元進去,未來接入更強大的gpt-4也已經安排上了,今年內就推出。
短視頻方面代表工具是quickvid,oculus前員工打造。
輸入文案,稍微設置一下,語音和畫面就都自動配好了,直接批量生產,就是對中文支持不那麼友好。
再有就是一些老牌視頻編輯軟件,也紛紛加上了ai新功能。
如萬興喵影,原名萬興神剪手,目前有智能刪除物體、智能拉伸背景音樂、智能運動跟蹤等一系列功能。
最後還有一個值得期待的,就是剛剛開放的chatgpt插件。
openai總裁greg brockman就在試驗讓chatgpt通過命令行神器ffmpeg來處理視頻,chatgpt寫好代碼後自己直接就執行去了。
而且openai開發佈會時就已經用上了這種新型工作方式。
更不用提zapier插件,或者將來可能出現的自動化插件可以讓chatgpt與數千個軟件連接,什麼pr啦ae啦這些經典視頻生產力工具,將來都有可能由chatgpt替你操作。
有了這些新ai工具,你會不會開始嘗試做視頻?會的話又打算做些什麼內容呢?歡迎在評論區分享~