谷歌大幅更新生成式AI,推出视频模型VEO 2和最新版Imagen3

2024年12月21日17:41:27 科技 2433

作者:赵雨荷

来源:硬ai

谷歌的旗舰ai研究实验室google deepmind周一大幅升级其人工智能驱动的内容生成工具,推出了veo 2视频生成模型和增强版imagen 3图像模型,挑战openai在ai图像和视频生成的领先地位。谷歌表示,这些更新有望彻底改变创意工作流程,为视频和图像创作者提供更高的真实感和定制化体验。

谷歌介绍,veo 2是谷歌的视频生成工具,能够生成多样化主题和风格的高质量视频。谷歌在博客中表示,这款模型在真实感方面表现卓越,能够捕捉到人类表情和电影效果等细节。其增强的物理和电影学理解能力使用户能够生成令人惊叹的内容,包括跟踪镜头和广角构图等。

例如,veo 2熟悉电影拍摄语言,用户可以要求某种类型的风格,指定镜头,建议电影效果,veo 2都会以高达4k分辨率并延长到数分钟的视频长度来呈现。比如,要求“低角度跟踪镜头穿越场景中央”或“特写科学家通过显微镜观察”的镜头,veo 2都能实现。提示“18mm镜头”,veo 2知道生成广角镜头;要求“浅景深”,它会模糊背景,突出主体。

值得注意的是,这一分辨率是openai sora模型的4倍,视频时长更是其6倍以上。

不过,目前这些优势仍是理论上的。在谷歌的实验性视频创作工具videofx中,veo 2生成的视频被限制为720p分辨率、8秒的长度。(相比之下,sora的最大输出为1080p、20秒的短片。)

谷歌表示,虽然视频生成模型往往会“幻象化”出不需要的细节,例如多余的手指或意外的物体,但veo 2在这一方面的表现更为真实,生成错误的频率较低。

此外,veo 2生成的视频包括不可见的synthid水印,用于标记它们为ai生成的内容,从而减少误用或错误归属的风险。

deepmind产品副总裁eli collins对媒体表示,随着模型逐渐具备规模化使用的准备,谷歌将通过其vertex ai开发者平台提供veo 2。

“未来几个月,我们将根据用户反馈持续迭代,并寻求将veo 2的更新能力整合到谷歌生态系统中的相关应用中……我们预计明年会分享更多的更新内容。”

开发者和创作者目前可以通过谷歌实验室(google labs)访问该工具,预计到2025年,它将广泛集成至诸如youtube shorts等平台。

同时,imagen 3模型在图像构图和细节准确性方面得到了增强,支持从写实到抽象的各种风格,能够生成更丰富的纹理,并更加忠实地回应用户提示。

谷歌大幅更新生成式AI,推出视频模型VEO 2和最新版Imagen3 - 天天要闻

目前,imagen 3已经通过谷歌实验室的imagefx工具在100多个国家上线,全球用户可以试验其尖端功能。

此外,谷歌还推出了whisk,这是一款结合了imagen 3和gemini视觉分析能力的创意工具。用户可以输入图像,生成详细的文字描述、重新混合风格,或设计个性化作品,如数字玩偶或搪瓷徽章。

谷歌介绍,whisk结合了imagen 3模型和gemini的视觉理解与描述能力。gemini模型会自动为用户的图像生成详细的文字描述,并将这些描述传递给imagen 3。这一过程让用户能够以有趣的新方式重新混合主题、场景和风格。

谷歌大幅更新生成式AI,推出视频模型VEO 2和最新版Imagen3 - 天天要闻

科技分类资讯推荐

长安与东风重组新进展:朱华荣称不会改变长安既定战略 - 天天要闻

长安与东风重组新进展:朱华荣称不会改变长安既定战略

2月9日,长安汽车和东风集团股份(00489.HK)同步发布了控股股东“正在与其他国资央企集团筹划重组事项”的信息。长安汽车的控股股东是兵装集团,而东风集团股份的控股股东是东风公司。随即,长安汽车和东风集团这两家汽车央企将合并重组,成为业内关注的焦点。
公安部出手了!年龄限制放宽10年、送考下乡,2025年考驾照不难了 - 天天要闻

公安部出手了!年龄限制放宽10年、送考下乡,2025年考驾照不难了

电动车加强管理以后,要求机动车类型的车辆需要持证上路,但是老年人考驾照却受阻,一方面有年龄的限制,另一方面偏远山区考驾照不方便,所以在2025年公安部出手了,年龄限制放宽10年,同时推出送考下乡服务,还进一步的降低考驾照的费用,2025年起考摩托车驾照不难了。
从“星灵安全守护体系”到昊铂HL,看懂广汽科技日 - 天天要闻

从“星灵安全守护体系”到昊铂HL,看懂广汽科技日

发布会以技术切入,并全程围绕安全展开。广汽集团董事长、总经理冯兴亚率先登场,宣布2025年四季度将正式上市支持L3级智能驾驶的车型,他同时强调面向自动驾驶时代对智能驾驶技术、整车安全架构以及突发风险处理能力的要求更高。如何才能满足更高的要求?冯兴亚提到了“广汽
关税大棒下,最受伤的车企出现了 - 天天要闻

关税大棒下,最受伤的车企出现了

特朗普的关税大棒刚挥出,尚未吓退“外敌”,却先刺痛了自己。近日,拥有玛莎拉蒂、Jeep等14个品牌的全球第四大车企斯泰兰蒂斯突然宣布裁撤900名美国工人,关闭加拿大和墨西哥两家工厂,北美生产线陷入瘫痪。几乎同一时间,捷豹路虎宣布暂停对美出口一个月,奥迪更是直接