像杰克一样,世优科技用实时虚拟技术复活近400个“阿凡达”

2021年10月15日12:31:02 动漫 1956

大河报·大河财立方记者 裴熔熔

瓜子脸、大眼睛、高马尾⋯⋯一个可爱活力的二次元美少女,在荧屏上唱歌跳舞,让人挪不开眼。可镜头一转,画风突变,这个二次元美少女的真身竟然是个五大三粗的大老爷们。

是不是一个令人惊诧的反转?

这,就是世优(北京)科技有限公司(以下简称世优科技)动作捕捉技术与实时数字人技术的直接体现。品牌虚拟吉祥物可以在节目、晚会中与人们互动;动漫角色可以跳出剧情,与粉丝亲切交谈。像杰克用意念控制阿凡达一样,不需后期制作,实时即可完成。

在世优科技的“虚拟工厂”里,已经有近400个虚拟人物被这样成功复活。

而这一切,都源于创始人纪智辉一个看似荒诞的想法。

像杰克一样,世优科技用实时虚拟技术复活近400个“阿凡达” - 天天要闻

“我们不仅能够做到,还能做得更好”

2010年,好莱坞导演卡梅隆的3D巨作《阿凡达》在中国内地上映,炫酷的画面和技术让国内观众大受震撼。不少人熬夜排队买票,一票难求。

就像一颗种子,《阿凡达》拉开了3D版立体电影的序幕,也让创业多年的纪智辉,又一个梦想发芽:“里面的虚拟技术,我觉得我们不仅能够做到,还能做得更好。”

乍一听,纪智辉的想法是不是有些荒诞?

号称十年酝酿、四年打造、5亿美元成本制作的《阿凡达》,岂能说超就超?纪智辉这个预判,从何而来?

其实纪智辉早在2004年,就与合伙人组建了虚拟技术实验室,开始研究包括数据挖掘、图形图像算法、工作流引擎、实时动捕技术等前沿技术,成为国内比较早一批研发实时数字人技术的高顶尖团队,但是当时的市场一直没有成熟落地化的应用。

直到《阿凡达》的出现,让他嗅到了虚拟技术的潜在市场,积累多年的技术终于有了变现的风口。

“《阿凡达》采取的主要是动作捕捉技术。演员穿上一套特殊的服装,上面有很多感应球,用来记录捕捉到演员的表情动作数据,但并不是实时全身动捕。那时候的表情捕捉技术十分有限,很难实时追踪嘴唇运动踪迹。而是采用先记录下面部和身体数据表演捕捉数据,结束后再将捕捉的演员数据放到工作站上后期解算,然后经过人工精修,最后再离线渲染等多个工序才能输出最终画面。”纪智辉说。

长期在实验室从事动作捕捉技术研究,让他意识到,这项技术还可以再优化,实现“实时”复制,不再需要后期的渲染和加工。

于是在2011年,世优科技诞生了。

“像杰克一样,用意念操控阿凡达”

2020年底,一批国漫迷在追剧、催更《狐妖小红娘》时,惊喜地发现,自己的偶像涂山苏苏竟然从动漫中走出,开起了直播。

一头金黄的头发、两只粉色的狐狸耳朵、一袭粉白国风少女裙,“原装”的涂山苏苏,在直播间卖萌、跳舞、唱歌,还和粉丝进行实时互动。不少粉丝惊呼:有生之年看到了“活着”的女神。

其背后的支撑技术,就是纪智辉最初的设想——实时数字人技术。

就像一场双簧或者提线木偶表演,屏幕前的虚拟人物摆出各种姿势,跳跃、旋转、唱歌、做鬼脸;屏幕后则是一个真身演员,身穿动捕服、头戴面部设备、手戴数据手套,与任意虚拟形象进行点对点的绑定,进行实时消抖运算、动画修正、处理表情身体手指的同步,并把数据实时发给渲染引擎,进行即时渲染与环境模拟,轻松地对屏幕前的虚拟人物进行操纵。

像杰克一样,世优科技用实时虚拟技术复活近400个“阿凡达” - 天天要闻

“就像杰克躺在舱里,用意念控制了一个阿凡达,让阿凡达按照他的意愿活动说话,就是这样一个概念。”纪智辉说。

在虚拟世界里,除了虚拟数字人,还有虚拟场景才能构成虚拟世界。

2021年央视牛年春晚的舞台上,一首《牛起来》让很多人印象深刻。在虚拟的大红中国元素舞台上,刘德华时而置身于金边红色高台,时而置身于“中国结”上与机械牛共舞,简直炫酷到没朋友。歌曲最后,舞台由虚入实,刘德华与王一博关晓彤合唱互动,完美融合。

无缝衔接的画面,让很多人以为刘天王也来到了春晚现场。但事实上,除了王一博、关晓彤和真实的春晚舞台,刘德华部分的演出都是由世优科技的实时虚拟合成系统实时抠像合成。

像杰克一样,世优科技用实时虚拟技术复活近400个“阿凡达” - 天天要闻

除此之外,TCL双11总裁直播、伊利金领冠年味大街带货直播、网易大话西游青春同路直播、飞碟汽车全系新品发布会、腾讯王者荣耀KPL虚拟直播等,都是由世优科技制作完成。

作为国内实时虚拟技术的先行者,世优科技如今已经成为众多品牌和平台的首选技术提供商。至今服务腾讯、天猫、京东、网易、华为小米等头部品牌商超1000个,与央视、凤凰卫视、东方卫视、湖南卫视、浙江卫视等达成深度合作,成功复活的虚拟人物近400个。2020年,实现了近3000万元的营收额,今年预计超5000万元。

“有锤子却没有钉子”

不到10年间,纪智辉的理想照进现实,带领世优科技成为行业领军者。但回首创业路,其实并没有那么容易,世优科技甚至坐了好几年的“冷板凳”。

2011年,新生的世优科技,很快陷入了一个尴尬的境地:有技术积累,没有硬件设备;等两者都有了,却没有适合的市场。

“我们算是涉足虚拟技术很早的一批,当时全球都买不到相关穿戴设备,也没有经过验证的商业模式。《阿凡达》制作使用的设备都是他们内部研发,且只有部分身体设备。所以我们全部都是自己进行设计和研发。”纪智辉说。

因为有前期多年的技术储备,在2012年,世优科技就自主研发出了Puppeteer虚拟工厂系统,这是国内首创的实时&快速虚拟内容制作、虚拟IP打造平台,实时数字人和快速动画制作技术在国内外都处于领先水平。

但彼时的市场并不给力。

“2014年之前,国内使用的还是3G网络,也没有Wi-Fi,这样的通信基础条件根本无法支持大规模地推行虚拟技术,国内也没有这种类型的电影。所以很少有人用我们的技术,一般还是采用传统CG(计算机绘图)人工制作方式做动画。”纪智辉说。

空有一流技术,却没有市场,世优科技被多个投资人调侃:“典型的有锤子却没有钉子。”但因为对虚拟市场坚定看好,“只出不进”的世优科技并未被抛弃。

随着4G、5G网络铺开,短视频、直播等各种新业态浪潮迭起。尤其是随着Z世代(即1995~2009年间出生的一代人)的崛起,二次元、三次元文化在年轻人当中成为潮流。真人演绎和传统CG动画无法实时还原虚拟世界的精妙,且制作成本高、效率低,市场对虚拟技术的诉求越来越高。

到了2017年,世优科技终于有了大施拳脚之机。

“未来有万亿的蓝海市场”

如今的世优科技,实时虚拟技术已运用到教育、媒体、影视动漫、游戏、综艺娱乐、金融、品牌营销、直播/短视频等多个领域,用纪智辉的话说是“现阶段世优科技对外的业务,无论是从技术算法、硬件设备、软件系统、技术制作等多方面均能提供全体系的技术和产品的商业化应用”。

不过在他看来,实时虚拟技术仍处于早期阶段,很多行业和领域都没有铺开,未来将有万亿的蓝海市场。

仅从直播行业来看,据前瞻产业研究院数据,2019年中国视频直播行业收入达到1082亿元,全国有3.9亿人在关注虚拟偶像,其中最大的二次元活动社区B站月活用户达1140万,虚拟主播占直播营收 40%。同期,B站、虎牙等大型直播平台也都开启了线上、线下虚拟主播活动。同期游戏市场规模达到2300 亿元,其中与数字人相关度较大的RPG类游戏约占30%的份额。

对于公司下一步发展,纪智辉表示,将在不断提高研发水平和服务能力的基础上,在全国范围内拓展更多合作公司和子公司,推进实时虚拟技术在更大范围内落地。

今年年初,世优科技在郑州建立了分公司——郑州世优华冠动漫科技有限公司,旨在深度挖掘中原大地丰富的文化资源,打造黄河文化IP,使河南特色文化走出中原,走向世界。在此次2021年全国双创活动周上,世优华冠将会发布少林寺的IP形象——功夫宝宝。

像杰克一样,世优科技用实时虚拟技术复活近400个“阿凡达” - 天天要闻

“世优华冠以行业首创的IPCT模式为基础,对‘功夫宝宝’进行深度的开发。‘功夫宝宝’憨萌可爱,十八般武艺样样精通。他骨子中流淌着中原人善良质朴、勇敢正直、乐于助人、热情好客的性格,始终用知足常乐的心态,通过制造快乐和传递好运给更多的人带去正能量。”纪智辉说。

据介绍,未来世优华冠将围绕“功夫宝宝”品牌,进行大量创意内容开发,通过系列微内容在新媒体平台的传播,有效提升用户对品牌文化的认可度;同时持续在线下举办各种主题活动,进一步增强形象与受众的互动性,实现经济效益和社会效益的双丰收。

延伸阅读

世优科技是领先的虚拟技术提供商,专注于实时虚拟技术与AI数字人的研发与应用。公司自主研发的Puppeteer虚拟工厂系统是国内首创(2012年)的实时&快速虚拟内容制作、虚拟IP打造平台,在实时数字人和快速动画制作领域在国内外处于领先水平。

在AI应用方面,世优科技定位做为AI的“UI”,深度结合AI技术,曾研发过的AI类应用有某品牌手机智能助手、AI伴读宝、7*24小时AI虚拟虚拟主播、全息AI可交互数字人等产品,为手机、教育、直播带货、数字展厅虚拟接待等领域提供了智能多元化应用。

公司主要业务是为B端客户提供软硬件系统产品和技术服务,典型客户行业为广电、互联网、短视频/直播、品牌营销、教育、影视动画等。

广电行业典型案例如历年央视春晚的虚拟技术及支撑及服务(2021年春晚刘德华“牛起来”),凤凰卫视、东方卫视、湖南卫视、山东卫视、浙江卫视、广西卫视等也都采购或使用过世优科技的技术服务。另外,世优科技为华为、小米、腾讯、百度、网易、京东、阿里苏宁、海尔、TCL、欧莱雅等头部企业提供虚拟IP打造服务或相关产品。

目前,世优科技实时IP库中已累计“复活”的虚拟IP形象近400个。

责编:刘安琪 | 审核:李震 | 总监:万军伟

动漫分类资讯推荐

新品首发+限时快闪!不在南法,就在愚园路 - 天天要闻

新品首发+限时快闪!不在南法,就在愚园路

即日起至5月5日,KARL LAGERFELD上海限时快闪在愚园路希华馆HOW咖啡厅举办,品牌全新2026春夏系列同步首发,为广大消费者打造了一处兼具时尚审美与闲适体验的出行目的地。KARL LAGERFELD是由法国设计师、时尚界传奇人物卡尔·拉格斐于1984年创立的同名品牌,在全球拥有逾500家精品店。品牌以蔚蓝海岸为灵感,特别打造“KAR...
匠心传情!全国劳模艾虎进驿站暖一线 - 天天要闻

匠心传情!全国劳模艾虎进驿站暖一线

极目新闻记者 高伟通讯员 周志勇 吴光美庆祝“五一”国际劳动节,全国劳动模范艾虎走进松滋城区供电服务站工会爱心驿站,参加国网松滋市供电公司举办的劳模宣讲进驿站暨“五一”慰问劳动者活动,与环卫工人、城管队员等一线户外劳动者代表座谈交流,共迎佳节、共学精神、共话成长。座谈现场,艾虎结合自身29年扎根松滋山乡...
探展日志|马头上的“理线器”:一只蜷腿小熊,专治绳子乱飞 - 天天要闻

探展日志|马头上的“理线器”:一只蜷腿小熊,专治绳子乱飞

“饰文焕彩——河北古代艺术珍品展”■展期:至5月12日■地点:中国美术馆19、20、21号厅■票价:免费两件西汉铜节约,是马头上兼具实用与美观的部件。“节约”中,“节”为节制,“约”为约束。节约用于绳带之间的连接,既减少绑扎的绳结数量,又避免绳索相交处的交叉散乱,堪称古代的“理线器”。节约上饰有憨态可掬的熊...
非法印刷近2000册《小布头奇遇记》等少儿读物!邵阳一黑窝点被端,3人被刑拘 - 天天要闻

非法印刷近2000册《小布头奇遇记》等少儿读物!邵阳一黑窝点被端,3人被刑拘

为严厉打击侵犯知识产权违法犯罪行为,切实维护版权市场秩序和群众合法权益,近日,湖南省邵阳市公安局北塔分局成功破获一起涉嫌侵犯著作权案,抓获3名涉案人员,现场查获大量盗版出版物。4月24日15时许,北塔公安分局接到线索,北塔区园艺场辖区内一居民房屋内,有人涉嫌非法印刷侵权出版物。接到线索后,治安大队立即联合...
非人哉:盘点5只老鼠,地涌夫人是哪吒义妹,皓紫是九月同学 - 天天要闻

非人哉:盘点5只老鼠,地涌夫人是哪吒义妹,皓紫是九月同学

《非人哉》漫画版中,有着五只老鼠,他们分别是地涌夫人、皓紫、皓紫老公、仓鼠和仓鼠精。其中地涌夫人是哪吒的义妹,皓紫是九月的同学。仓鼠是九月养的宠物,仓鼠精是十一月买的仓鼠成精。具体情况如何?一起来看看。地涌夫人地涌夫人相信大家都不陌生,她是李靖的义女,也是哪吒、金咤和木咤的义妹。本体是金鼻白毛老鼠精...
“小黄鱼”公开致歉 - 天天要闻

“小黄鱼”公开致歉

5月2日,针对部分互动形式引发争议一事,葛仙村度假区NPC“小黄鱼”通过个人社交媒体账号发布视频致歉,他表示今后会用更加得体、有温度的方式和大家互动。同日,葛仙村度假区发布致歉声明:近日,我景区NPC“小黄鱼”的部分互动形式引发了争议,对此我们高度重视,并向广大网友及游客致以最诚挚的歉意。针对此事,景区决定...
千架无人机、漫天烟花点亮宝山滨江,致敬《葫芦兄弟》40周年 - 天天要闻

千架无人机、漫天烟花点亮宝山滨江,致敬《葫芦兄弟》40周年

“吴淞口空中剧场”献礼五一国际劳动节专场——《葫芦兄弟》主题“宝山寻宝”烟花无人机表演秀5月1日亮相上海国际邮轮旅游度假区,表演以千架无人机为笔、漫天烟花为墨,致敬《葫芦兄弟》40周年。本次演出由上海国际邮轮旅游度假区与上影元联合出品,携手打造 “动画IP+前沿科技+滨江文旅”的跨界新范式,让国民童年英雄在...
今天这里爆增200% - 天天要闻

今天这里爆增200%

5月2日,2026武汉春季房交会的第三天,来逛展的人群仍是络绎不绝。“五一也不想去外地旅游,正好来这里综合了解一下楼盘的情况,方便后期置换。”正在武昌区展位了解项目信息的市民韩萍萍说,之前有朋友向她推荐过建发璟玥,她想着正好趁这次五一房交会来看看。这个项目好在哪,记者决定实地探访亲自体验一下。 房交会上武...
年幼姐弟误启动电三轮冲入河中,姐姐获救两岁多弟弟不幸溺亡 - 天天要闻

年幼姐弟误启动电三轮冲入河中,姐姐获救两岁多弟弟不幸溺亡

4月30日下午,河南周口一村庄发生一起悲剧,一名不到3岁的男童溺水不幸身亡。5月1日,男童的父亲告诉记者,当时,孩子奶奶将电动三轮车停在河岸边,准备看下自家田地,他的女儿和儿子站在车的前排玩,不慎拧动了电门,三轮车直接冲到河中,奶奶准备拽住车时也被带到水中。后在附近村民的帮助下,老人和女儿被救上岸,并无大...
镇馆之宝都有啥?一键解锁临沂市博物馆三大馆区 - 天天要闻

镇馆之宝都有啥?一键解锁临沂市博物馆三大馆区

“五一”假期,解锁临沂市博物馆正确逛馆姿势!三大馆区各有特色,每一步都踏在历史的脉络上,每一件文物都在诉说临沂的故事。这份详细攻略,帮你高效打卡、收获满满~北城馆区一眼看尽临沂千年北城馆区位于兰山区兰陵路10号,作为临沂地域文化的“百科全书”,这里有一个通史展加七个专题展以及多个临时展览,其中必看镇馆...