焦点分析 | 虚拟主持人亮相后,芒果TV带着技术团队走向台前

2021年09月30日22:18:09 科技 1401

内容平台的竞争从来不止于内容,芒果TV在诞生之初就曾在“阵痛”中明白了这个道理。如果技术成为掣肘的事情,即便是国内顶尖的视频内容创作团队也未必能常打胜仗。但当技术终于追平从互联网土壤里长出来的“腾爱优”后,这家视听领域的“国家队”未来要走向何方?

在今年第二届由芒果TV主办的算法大赛颁奖舞台上,虚拟主持人YAOYAO的亮相一定程度上回答了这个问题。

虚拟人技术不止于虚拟偶像养成

和往常演播厅不同,这次颁奖舞台观众席的后方并不是导播间,而是动作捕捉舞台。动捕演员两米外,芒果TV创新研究院的技术团队围着坐了一圈。

焦点分析 | 虚拟主持人亮相后,芒果TV带着技术团队走向台前 - 天天要闻

算法大赛颁奖礼虚拟主持人YAOYAO的动捕演员彩排现场

程序员们抱着电脑围坐舞台后的场景,近年曾频繁出席在各类有虚拟偶像表演舞台后。伴随着芒果TV的发展,他们技术团队也终于走向台前。

相比于其他大厂及市场上的虚拟偶像公司,此时再推出自己虚拟主持人,芒果TV的动作显得有些慢了。但在和芒果TV创新研究院主创的交流中,36氪也听到了不同答案:芒果TV在虚拟技术上的研究与运用主要方向,并不是国内视频平台常用的虚拟偶像,而是期望将虚拟技术推广到整个大众市场,让技术更易用,让每个消费者都能创造自己的虚拟人。

“未来能通过手中的手机就实现动作同步,大家可以借助自己能捏脸的虚拟人在虚拟场景中相聚。”创新研究院负责人张亦弛告诉36氪。

虚拟人项目组负责人吴红也介绍道,团队目前也在开发虚拟场景等资产。吴红的思维与目前NFT思路很像。他认为虚拟人、虚拟场景等资产也是数字资产的一种,而现在的人物资产与场景资产也是为了这一趋势做准备。“这块技术我们探索得越深,未来使用成本就会越低。也能为内容创作者输出虚拟内容的工具类产品。”吴红告诉36氪。

据了解,虚拟场景还将被用于芒果TV剧本杀、电商直播等业务场景中。

从芒果TV母公司芒果超媒历年财报可知,其曾做过2次技术向的定增,累计金额超10亿元。比如在2019年,芒果TV智慧视听媒体服务平台项目就募资5亿人民币,其中占比最高的便是MR、AR、VR、AI、互动剧技术相关研发,拟投入1.5亿。

焦点分析 | 虚拟主持人亮相后,芒果TV带着技术团队走向台前 - 天天要闻

算法大赛互动展区工作人员示范只依托周身四个ipad就能完成的轻量级动补技术

在这次算法大赛颁奖礼的互动展区,芒果TV技术团队也客串了一把展厅讲解员,将这些项目初步成果一一展示了出来。除了很多人尝试的轻量化动捕场景外,对于内容广告的AI算法研究也是不少人关注焦点。

焦点分析 | 虚拟主持人亮相后,芒果TV带着技术团队走向台前 - 天天要闻

现场“找植入”小游戏,桌上牙膏为AI植入

针对这次展示,技术团队还做了一个“找植入”的小游戏,游戏将真正的植入场景和混淆元素放在不同视频中,让观众来找出哪个才是真正的植入视频。在游戏中,沙发上的抱枕LOGO、桌上放置的产品、墙面上的灯牌等不同形式广告植入完全依托后期AI技术,但这些植入素材已能基于视频内的光影、运动轨迹和遮挡关系,与视频场景融为一体,达到“以假乱真”效果。

作为一家从电视台中诞生的视频内容平台,不少人对芒果TV的印象可能还主要聚焦于综艺、电视剧等内容,甚至还可能认为芒果TV就是搬运湖南卫视节目内容的误区。但作为一家互联网企业,芒果TV技术团队早已不只是承担维护视频正常播出这样的职能。

“可以说,我们的技术进步很大一部分是业务倒逼出来的。”产品技术团队负责人卢海波感叹道。

擅长做工具研发的技术团队

由于内容创作出色,大量来自业务端的需求经常像大水漫灌一样交到技术团队手中,这也倒逼技术团队在基于“点”解决技术及迭代版本后,因为特殊需求开始开发各类方便内容创作与创新的工具型产品。

“ 过去我们的植入还不是很好,但现在可以了。我还清楚记得《乘风破浪的姐姐》里面,有个植入场景,女嘉宾有几根头发丝飞过那个品牌,光影效果好到我都没看出来是植入。”卢海波告诉36氪。据他透露,和其它大量收入来自流量变现的视频平台相比,芒果TV广告收入中,内容广告和流量广告收入占比可达到5:5,这也给芒果TV的内容植入技术提出了更高要求。

焦点分析 | 虚拟主持人亮相后,芒果TV带着技术团队走向台前 - 天天要闻

芒果TV自动化植入示范

“我们经常是节目开播了之后,因为节目火爆又陆续来了很多品牌。”卢海波解释道。但在这个时候,节目也已经录制了一部分了,如果需要重新植入广告,则需要节目组重拍或者后期投入大力气增补,这在操作性上几乎是不可能的。为了节省成本,这才有了不断迭代的内容植入AI技术。

有了工具后,在互动展区,观众使用ipad即可体验广告植入过程——把产品拖入画面即可。产品入画后将自动跟随镜头角度及光照等维度适配,达到融入画面的效果。

除却内容广告外,内容的形式创新也给技术带来了很多突破机会,比如互动剧的工具研发。

焦点分析 | 虚拟主持人亮相后,芒果TV带着技术团队走向台前 - 天天要闻

芒果TV 互动剧编辑后台

“我们的互动剧编辑器给内容团队使用也是很简单,而且在呈现方式上不只支持点击,我们还支持让用户滑动、多角度看场景等很多效果。”卢海波补充道。在现场,互动剧的编辑器也被展示出来,这个编辑器俨如橙光游戏,它支持内容创作者搭建多支线剧情,并直接上传不同阶段视频内容。

像这样类似的创新点还有很多:比如为了支持天南海北节目组能快速剪辑而开发的4K云制播技术,运用这项技术剪辑团队减去了很多繁琐的传送时间,对剪辑设备的要求也降低。节目组录制完后即可在云端剪辑,让大型素材快速加工后回传;再比如为了媒资上传而开发的自动打点剪辑取标题技术,这项技术开发后,上传分段节目不再需要大量人力。媒资团队将节目成片直接上传后,系统即会自动打点取标题,人力只需要简单审核编辑即可。

从技术掣肘到助力内容找下一个增长点

“我们追上其他几家的技术已经是2018-2019年,最开始成立的时候还是吃过一些亏。”卢海波回忆道。

2014年,视频行业还是优酷、土豆、爱奇艺天下。当时爱奇艺购买湖南卫视综艺播放版权,让《快乐大本营》等一批经典综艺有了网络播放渠道。也是同时期,湖南广电决定发展视频平台,作为重要战略成立了芒果TV。因为与爱奇艺的合同约定,湖南卫视仍可在自己的网络平台播放综艺,这也让芒果TV有了播放台里媒资的资格。

据芒果TV内部员工回忆,当时,芒果TV受限于技术,媒资上线总比爱奇艺要晚。比如当天播完的《快乐大本营》,爱奇艺在节目播完后几分钟即可上线到网站。但芒果TV还在上传媒资,解码技术也不好。几个小时后,《快乐大本营》登录芒果TV,画质清晰度也不如爱奇艺。

“那个时候,我们网站还容易崩溃,用户抱怨卡顿。不像现在,我们经常和业务各部门吃饭,讨论的都是未来还能怎么做了。”卢海波说。

从不被看好到终于追平行业水平,芒果TV走了近五年。

“时代不一样,创作的阵地也不一样。我们一定会去配合我们的艺术创作者,去攻坚克难,帮他们配备这样的工具和场地。”谈及未来,卢海波憧憬道。

而对于芒果TV的未来,从技术研究方向及业务布局就可见一斑。

在今年算法大赛中,有这样一道赛题,需要参赛选手设计算法让手机可检测音乐节拍并做出互动。在展区,芒果TV以《披荆斩棘的哥哥》为例进行了展示,展示区的手机在使用最新版芒果TV APP播放节目时,手机可配合节目内容实时增加震动与闪光灯。

虽然这样的呈现方式仍局限于硬件功能(比如手机),但芒果TV已经在文娱类互动体验方面加码了。

焦点分析 | 虚拟主持人亮相后,芒果TV带着技术团队走向台前 - 天天要闻

芒果超媒旗下剧本杀品牌M-CITY

从芒果TV母公司芒果超媒目前的业态来看,除却视频内容业务外,小芒电商与剧本杀、密逃等线下实景娱乐也成为了新的探索性业务。特别是以M-CITY为品牌的剧本杀类业务,作为芒果TV旗下综艺《明星大侦探》延申业务,目前也依托于资源协同和明侦宇宙IP的知名度在剧本杀行业占据着一席之地。

吴红对36氪透露,芒果TV创新研究院针对MR相关的技术研究也已经有了方向,在不久后,创新研究院也会上新MR+剧本杀类工具,让玩家能在虚拟场景搜证和体验剧情,增加剧本杀沉浸感。

那么在未来,芒果TV会往哪儿去?

技术与内容创作深度融合,让内容不再受限于“一块屏幕”这样的呈现方式,一定是必然的。

科技分类资讯推荐

GNOME OS 发行版启动开发新安装器、重构 Nautilus 文件管理器 - 天天要闻

GNOME OS 发行版启动开发新安装器、重构 Nautilus 文件管理器

IT之家 5 月 20 日消息,GNOME OS 项目在得到德国主权技术基金(Sovereign Tech Fund,STF)的资助后,目前已经启动安装器(Installer)的开发工作。官方目前并未披露 GNOME OS 安装器的更多细节,毕竟该项目还处于开发的早期阶段,甚至还没有 git 仓库。该安装器计划装备在 GNOME OS 中,后者是由 GNOM
铭凡子品牌“原子侠”X7 Ti迷你主机上架:酷睿Ultra9,4899元起 - 天天要闻

铭凡子品牌“原子侠”X7 Ti迷你主机上架:酷睿Ultra9,4899元起

IT之家 5 月 20 日消息,铭凡子品牌“原子侠”X7 Ti 迷你主机上架,搭载英特尔酷睿 Ultra9 185H 处理器,顶上有一块 4 英寸的触控屏,准系统版本(无内存硬盘)4899 元,32GB+1TB 版本 6199 元。原子侠 X7 Ti 搭载英特尔酷睿 Ultra9 185H 处理器,该处理器为 16 核 22 线程,采用 Intel 4 制程
佳云科技涉嫌信披违规被立案,曾因未披露关联交易被出具监管函 - 天天要闻

佳云科技涉嫌信披违规被立案,曾因未披露关联交易被出具监管函

5月17日,广东佳兆业佳云科技股份有限公司(佳云科技,300242.SZ)公告,公司于当日收到中国证监会《立案告知书》,依据《立案告知书》,因该公司涉嫌信息披露违法违规,中国证监会决定对该公司立案。此次公告并未透露佳云科技因何触犯信披规定,但值得注意的是2023年12月8日,佳云科技曾披露公告称,收到广东证监局出具的...
荣耀Magic7系列有望搭载2亿潜望长焦 已经在预研了 - 天天要闻

荣耀Magic7系列有望搭载2亿潜望长焦 已经在预研了

【CNMO科技消息】荣耀Magic系列旗舰机一向有着高人气,时间来到年中,大家都开始期待荣耀Magic7系列的到来。据CNMO了解,荣耀Magic7系列有望搭载2亿像素潜望长焦镜头,博主称,荣耀已经在预研这颗镜头。荣耀Magic6系列  那么,荣耀Magic7系列啥时候发布呢?根据另一名数码博主的爆料,新机很可能会提前到来,这对期待它的...
一张英伟达B100售价超21万,黄仁勋如何管理市值2.27万亿AI芯片巨头? - 天天要闻

一张英伟达B100售价超21万,黄仁勋如何管理市值2.27万亿AI芯片巨头?

本周,AI 领域最关心的重要事件是,“超级权重股”、“AI芯片之王”英伟达(NVIDIA)将于5月22日美股盘后发布2024自然年第一季度财报。据华尔街分析师预计,截至4月份的一季度中,英伟达营收有望达到246亿美元,同比增长两倍多,到2025年1月财年结束时,季度销售额有望突破300亿美元大关;预计同期净利润138.6亿美元,同比...
AI质检员替代人工,将漏检率降至零 | 创新场景 - 天天要闻

AI质检员替代人工,将漏检率降至零 | 创新场景

图片系AI生成痛点施耐德电气全球武汉工厂是第一家开始全面部署EcoStruxure整体解决方案的工厂。过去,在AI质检用上前,传统人工目视检测和传统机器视觉的检测方法,在检测效率和精度上均存在挑战。例如,员工需要从各个方向观察产品,且由于产品的异常位置不固定、缺陷类型不固定,工作量大、效率低。解决方案施耐德电气选...
小米智能猫眼 2 上架:3MP 摄像头 + 红外补光,售价 599 元 - 天天要闻

小米智能猫眼 2 上架:3MP 摄像头 + 红外补光,售价 599 元

IT之家 5 月 20 日消息,小米智能猫眼 2 日前上架京东等电商平台,5 月 22 日 10 点开售,售价 599 元(已开售价格为准)。据介绍,这款新品配备 3MP 高清摄像头,分辨率为 2048x1536,同时支持 HDR,呈现更清晰的明暗细节;180° 广角镜头视野开阔,门外盲区更少;8 颗 940nm 红外夜视灯,5m 红外补光,配合高灵敏度传感
曝三星Z Flip6将采用更厚的UTG面板 可让折痕不再明显 - 天天要闻

曝三星Z Flip6将采用更厚的UTG面板 可让折痕不再明显

【CNMO科技消息】近日,CNMO了解到,据韩国媒体TheElec报道,三星即将推出的Z Flip6可能会带来一项备受期待的显示屏升级。这次升级的关键在于采用了更厚的超薄玻璃(UTG)应用在可折叠显示屏上。UTG,即超薄柔性玻璃盖板,是一种专为折叠屏手机设计的特殊玻璃材质,以其超薄的柔性玻璃基板为基础,制成柔性外层玻璃保护片。...
独行侠的“淘宝”策略,成功了 - 天天要闻

独行侠的“淘宝”策略,成功了

本赛季独行侠的成功,靠的不仅是明星球员的闪耀发挥,更有那些在关键时刻挺身而出的角色球员。这些球员的横空出世,与球队管理层们的“淘宝”策略是分不开的,从去年休赛期就已经开始了。 莱夫利在肉搏....