阿里万相视频大模型宣布开源:8.2GB 显存就能跑,测试超越 Sora

2025年02月25日23:10:15 科技 3710

it之家 2 月 25 日消息,阿里云今日宣布旗下视觉生成基座模型万相 2.1(wan)开源

此次开源采用最宽松的 apache2.0 协议,14b 和 1.3b 两个参数规格的全部推理代码和权重全部开源,同时支持文生视频和图生视频任务,全球开发者可在 github、huggingface 和魔搭社区下载体验。

阿里万相视频大模型宣布开源:8.2GB 显存就能跑,测试超越 Sora - 天天要闻

据介绍,14b 万相模型在指令遵循、复杂运动生成、物理建模、文字视频生成等方面表现突出,在评测集 vbench 中,万相 2.1 以总分 86.22% 的成绩超越 sora、luma、pika 等国内外模型,位列榜首。1.3b 版本测试结果不仅超过了更大尺寸的开源模型,甚至还接近部分闭源模型,同时能在消费级显卡运行,号称“仅需 8.2gb 显存就可以生成 480p 视频”,适用于二次模型开发和学术研究。

阿里万相视频大模型宣布开源:8.2GB 显存就能跑,测试超越 Sora - 天天要闻

阿里万相视频大模型宣布开源:8.2GB 显存就能跑,测试超越 Sora - 天天要闻

万相视频模型架构图

在算法设计上,万相基于主流 dit 架构和线性噪声轨迹 flow matching 范式,研发了高效的因果 3d vae、可扩展的预训练策略等。以 3d vae 为例,为了高效支持任意长度视频的编码和解码,万相在 3d vae 的因果卷积模块中实现了特征缓存机制,从而代替直接对长视频端到端的编解码过程,实现了无限长 1080p 视频的高效编解码。此外,通过将空间降采样压缩提前,在不损失性能的情况下进一步减少了 29% 的推理时内存占用。

阿里万相视频大模型宣布开源:8.2GB 显存就能跑,测试超越 Sora - 天天要闻

万相团队的实验结果显示,在运动质量、视觉质量、风格和多目标等 14 个主要维度和 26 个子维度测试中,均达到了业界领先表现,并且斩获 5 项第一

阿里万相视频大模型宣布开源:8.2GB 显存就能跑,测试超越 Sora - 天天要闻

it之家附开源地址:

  • github:https://github.com/wan-video

  • huggingface:https://huggingface.co/wan-ai

  • 魔搭社区:https://modelscope.cn/organization/wan-ai

科技分类资讯推荐

京东高薪挖人抢滩酒旅市场 - 天天要闻

京东高薪挖人抢滩酒旅市场

京东高薪挖人抢滩酒旅市场:战略意图、行业影响与未来挑战万亿级市场潜力中国在线旅游市场2023年规模超1.5万亿元,年增长率超15%(艾瑞咨询数据)。后疫情时代,本地游、周边游需求爆发,高端度假、主题旅游(如露营、研学)成为新增长点。
Meta有意向人工智能初创公司Scale AI投资超过100亿美元 双方已在洽谈 - 天天要闻

Meta有意向人工智能初创公司Scale AI投资超过100亿美元 双方已在洽谈

【TechWeb】6月9日消息,据外媒报道,在生成式人工智能的热潮中,OpenAI、Anthropic、xAI等厂商也受到了资本市场的热捧,相继获得了多笔高额的投资,也在持续进行新的融资,其中由马斯克在2023年7月12日创立的xAI,在去年5月份融资60亿美元、11月份融资50亿美元后,又在进行50亿美元的债务融资。而从外媒最新的报道来看,人...
iGame M15 Origo评测:颜值与性能并存 搭载长江存储PC41Q 表现超预期 - 天天要闻

iGame M15 Origo评测:颜值与性能并存 搭载长江存储PC41Q 表现超预期

【ZOL中关村在线原创评测】前不久,七彩虹发布了旗下首款iGame游戏笔记本产品,我们也第一时间拿到了iGame M15 Origo轻薄全能游戏本。其搭载酷睿Ultra 9 285H处理器,显卡为RTX 5070 Laotop,内存为32GB DDR5 6400MHz,硬盘则是长江存储的PC41Q。单纯从硬件上看,iGame M15 Origo的性能非常强劲
智越山海!东风猛士M817搭载全栈华为,开启豪华电动智野新赛道 - 天天要闻

智越山海!东风猛士M817搭载全栈华为,开启豪华电动智野新赛道

近日,东风汽车集团有限公司与华为技术有限公司在武汉正式签署全面深化战略合作协议,双方将充分发挥在产业资源与技术领域的互补优势,围绕汽车智能化、企业数字化和智能化升级、生态共建等领域开展全方位深度合作。同时,双方还将协同东风汽车旗下东风岚图、东风猛士等品牌,共同