曉星說AI:Sora筆下的《楓橋夜泊》。
大家好,歡迎來到《曉星說AI》視頻講座系列。今天的內容是:OpenAI的Sora對中國古詩詞《楓橋夜泊》的描述。
就在今年的2月15日,中國龍年大年初六,美國OpenAI公司正式發布了"文生視頻"的大模型Sora。隨之發布的同時,還有48個"文生視頻"的案例和它的技術報告。這標誌著OpenAI正式步入了"文生視頻"的人工智慧的領域。
Sora可以根據文本的提示詞生成長達60秒的連貫的視頻,全面碾壓了視頻生成領域這個行業。目前大概平均只有4秒的視頻生成的長度。而且令人吃驚的是OpenAI並沒有把Sora僅僅單純的看成是一種視頻模型,而是把它作為了"世界模擬器"。
Sora可以根據用戶的文本提示創建長達60秒的逼真的視頻。該視頻對這些物理特性的存在可以真實的模擬物理世界,而且能夠生成具有多個不同角色的包含特定運動的複雜的物理場景。
我對Sora的"文生視頻"確實是心生敬畏的,但是對於"世界模擬器"這種提法卻高度懷疑。在目前的Sora"文生視頻"的案例當中,我最欣賞的是它對《楓橋夜泊》的視頻描述。這段視頻不但表明Sora完全理解了《楓橋夜泊》的詩意,而且根據它的理解描繪出了《楓橋夜泊》的詩境。
楓橋夜泊,月落烏啼霜滿天,江楓漁火對愁眠。姑蘇城外寒山寺,夜半鐘聲到客船。