生成式 AI 最大飞跃!OpenAI 首个视频生成模型重磅发布

2024年02月18日15:15:04 科技 1513

作者 | Tina、褚杏娟

2 月 16 日,OpenAI 在其官网发布文生视频模型 Sora。据介绍,该模型可以生成长达一分钟的视频,同时保持视觉品质并遵循用户提示。


Sora 在日语中意为天空,该技术背后的团队包括 Tim Brooks 和 Bill Peebles,之所以选择这个名字,是希望它能激起无限的创造潜力。


生成式 AI 最大飞跃!OpenAI 首个视频生成模型重磅发布 - 天天要闻


OpenAI 给出了不少令人印象深刻的例子:在龙年春节里的舞龙活动,人山人海的场景真假难辨,甚至还有群众拿着手机跟拍的细节;动物世界中,站在树上、戴着王冠的猴子等;在社交媒体上教大家做曲奇的老奶奶;戴着耳机听音乐的两只金毛狗.....


生成式 AI 最大飞跃!OpenAI 首个视频生成模型重磅发布 - 天天要闻


生成式 AI 最大飞跃!OpenAI 首个视频生成模型重磅发布 - 天天要闻


有网友评论说,AI 能根据文字生成图片的时候,他就在想离生成视频的日期不远了,没想到这么快!“又有一波‘固执的’从业者和艺术家们要失业了,从业者门槛进一步拉低!YouTube/TikTok 等一众长视频或短视频网站估计要迎来一波新的流量。”


一些 YouTube 网红确实开始担心,MrBeast 发帖半开玩笑地求奥特曼不要让他失业。


生成式 AI 最大飞跃!OpenAI 首个视频生成模型重磅发布 - 天天要闻


有投资者则发表评论说,他们早就认为“内容生成干不过大公司,初创公司要做产品和应用……”他们一直认为 Pika 应该转型……


而 OpenAI 员工 will depue 则表示,他们过去两个月一直忙于此事,目前 Sora 还处于早期宣传阶段。根据 OpenAI 随后发布的论文来看,这个模型的能力确实已经超出了 OpenAI 最初所宣传的。


生成式 AI 最大飞跃!OpenAI 首个视频生成模型重磅发布 - 天天要闻


这篇论文揭示了 Sora 架构的一些关键方面,比如它可以生成任意分辨率和宽高比的视频(最高 1080p)。根据论文,Sora 能够执行各种图像和视频编辑任务,比如创建循环视频、延长视频时长或更改现有视频的背景。


生成式 AI 最大飞跃!OpenAI 首个视频生成模型重磅发布 - 天天要闻

将 DALL·E 2 或 DALL·E 3 生成的图片转为视频


然而,最令人感兴趣的是 Sora“模拟数字世界”的能力。它不仅仅是生成单个照片或视频,而是确定环境中每个对象的物理特性,并根据这些计算渲染照片或视频(或交互式 3D 世界,视情况而定)。正如 Nvidia 高级研究员 Jim Fan 所评论的那样,Sora 更像是一个“数据驱动的物理引擎”,而不是一个创意引擎。


对于 Sora 目前存在的弱点,OpenAI 也不避讳:模型在准确模拟复杂场景的物理特性方面可能会遇到困难,也可能无法理解具体的因果关系实例。

生成式 AI 最大飞跃!OpenAI 首个视频生成模型重磅发布 - 天天要闻


例如“五只灰狼幼崽在一条偏僻的碎石路上互相嬉戏、追逐”,狼的数量会变化,一些凭空出现或消失。


现在,Sora 正面向部分成员开放,以评估关键领域的潜在危害或风险。

原文链接:https://www.infoq.cn/article/u3USgtmYw11CHkZRh7EO

科技分类资讯推荐

网购“3C认证”贴纸可助充电宝过安检?平台紧急下架违规帖子 - 天天要闻

网购“3C认证”贴纸可助充电宝过安检?平台紧急下架违规帖子

封面新闻记者 宋潇 实习生 姚媛媛6月26日,民航局发布紧急通知,自6月28日起禁止旅客携带没有3C标识、3C标识不清晰、被召回型号或批次的充电宝乘坐境内航班。然而,6月27日,有网友爆料称,二手交易平台上有商家公然提供3C认证刻字服务,毫不掩饰以“3C标志认证,3C刻字,充电宝刻字”“充电宝打镭射标,3C认证”等为题,宣...
超百万充电宝召回风波背后,无底线价格战该刹车了 - 天天要闻

超百万充电宝召回风波背后,无底线价格战该刹车了

超‌百万个充电宝突陷安全旋涡,召回、管控、认证质疑接踵而至。‌多家企业密集发布大批量召回通告,民航局紧急收紧航空携带新规,多个知名品牌更被发现3C认证存疑。一时间,消费者手中充电宝成了“烫手山芋”——“还能用吗?”“如何查安全?”“召回咋处
离开中国的铃木,现在还在海外推出新车? - 天天要闻

离开中国的铃木,现在还在海外推出新车?

铃木原厂在 2024 年 11 月初时正式发布品牌首款纯电产品 e Vitara,亦为纯电概念车 eVX 的量产版,动力规格上拥有前驱与四驱设定、电池容量有着 49kWh 和 61kWh 规格,新车将会是印度制的身份来销售,并将在夏季于欧洲、印度和日本等市场上
携充电宝乘机新规发布,深圳机场可提供7天暂存 - 天天要闻

携充电宝乘机新规发布,深圳机场可提供7天暂存

6月28日起,深圳机场开始执行民航局紧急通知的要求,禁止旅客携带没有3C标识、3C标识不清晰、被召回型号或批次的充电宝乘坐境内航班。新规施行首日,深圳机场多措并举,在严格落实局方要求的同时,尽可能为旅客现场处置不能携带的充电宝提供便利,同时增派人员,确保现场运行平稳有序。在深圳机场航站楼内,从出发层入口到...
让机器人触觉达人手800倍,上海交大教授正加速机器人“就业上岗”速度 - 天天要闻

让机器人触觉达人手800倍,上海交大教授正加速机器人“就业上岗”速度

“机器人的功能再炫酷,最终还是得能‘用’。”上海交通大学船舶海洋与建筑工程学院长聘副教授马道林,一直致力于解决具身智能发展的难点——触觉,这正是机器人能“用”的基础。马道林关于这一研究的论文在全球顶级学术会议——国际机器人与自动化大会(ICRA)上获最佳论文奖,这是4000多篇参会论文中的唯一。而他去年5月...
特斯拉:已在中国大陆地区开放超2100座超级充电站 - 天天要闻

特斯拉:已在中国大陆地区开放超2100座超级充电站

【环球网科技综合报道】6月29日消息,特斯拉日前宣布,其全球超级充电桩已突破7万根。截至目前,中国大陆地区已建设开放超2100座特斯拉超级充电站,逾11600根特斯拉超级充电桩,配合超2500根目的地充电桩。特斯拉充电网络的布局也已经100%覆盖了中国大陆的所有省会城市及直辖市。特斯拉此前曾宣布,中国市场首批V4超级充电...