焦點分析 | 虛擬主持人亮相後,芒果TV帶著技術團隊走向台前

2021年09月30日22:18:09 科技 1401

內容平台的競爭從來不止於內容,芒果TV在誕生之初就曾在「陣痛」中明白了這個道理。如果技術成為掣肘的事情,即便是國內頂尖的視頻內容創作團隊也未必能常打勝仗。但當技術終於追平從互聯網土壤里長出來的「騰愛優」後,這家視聽領域的「國家隊」未來要走向何方?

在今年第二屆由芒果TV主辦的演算法大賽頒獎舞台上,虛擬主持人YAOYAO的亮相一定程度上回答了這個問題。

虛擬人技術不止於虛擬偶像養成

和往常演播廳不同,這次頒獎舞台觀眾席的後方並不是導播間,而是動作捕捉舞台。動捕演員兩米外,芒果TV創新研究院的技術團隊圍著坐了一圈。

焦點分析 | 虛擬主持人亮相後,芒果TV帶著技術團隊走向台前 - 天天要聞

演算法大賽頒獎禮虛擬主持人YAOYAO的動捕演員綵排現場

程序員們抱著電腦圍坐舞台後的場景,近年曾頻繁出席在各類有虛擬偶像表演舞台後。伴隨著芒果TV的發展,他們技術團隊也終於走向台前。

相比於其他大廠及市場上的虛擬偶像公司,此時再推出自己虛擬主持人,芒果TV的動作顯得有些慢了。但在和芒果TV創新研究院主創的交流中,36氪也聽到了不同答案:芒果TV在虛擬技術上的研究與運用主要方向,並不是國內視頻平台常用的虛擬偶像,而是期望將虛擬技術推廣到整個大眾市場,讓技術更易用,讓每個消費者都能創造自己的虛擬人。

「未來能通過手中的手機就實現動作同步,大家可以藉助自己能捏臉的虛擬人在虛擬場景中相聚。」創新研究院負責人張亦弛告訴36氪。

虛擬人項目組負責人吳紅也介紹道,團隊目前也在開發虛擬場景等資產。吳紅的思維與目前NFT思路很像。他認為虛擬人、虛擬場景等資產也是數字資產的一種,而現在的人物資產與場景資產也是為了這一趨勢做準備。「這塊技術我們探索得越深,未來使用成本就會越低。也能為內容創作者輸出虛擬內容的工具類產品。」吳紅告訴36氪。

據了解,虛擬場景還將被用於芒果TV劇本殺、電商直播等業務場景中。

從芒果TV母公司芒果超媒歷年財報可知,其曾做過2次技術向的定增,累計金額超10億元。比如在2019年,芒果TV智慧視聽媒體服務平台項目就募資5億人民幣,其中佔比最高的便是MR、AR、VR、AI、互動劇技術相關研發,擬投入1.5億。

焦點分析 | 虛擬主持人亮相後,芒果TV帶著技術團隊走向台前 - 天天要聞

演算法大賽互動展區工作人員示範只依託周身四個ipad就能完成的輕量級動補技術

在這次演算法大賽頒獎禮的互動展區,芒果TV技術團隊也客串了一把展廳講解員,將這些項目初步成果一一展示了出來。除了很多人嘗試的輕量化動捕場景外,對於內容廣告的AI演算法研究也是不少人關注焦點。

焦點分析 | 虛擬主持人亮相後,芒果TV帶著技術團隊走向台前 - 天天要聞

現場「找植入」小遊戲,桌上牙膏為AI植入

針對這次展示,技術團隊還做了一個「找植入」的小遊戲,遊戲將真正的植入場景和混淆元素放在不同視頻中,讓觀眾來找出哪個才是真正的植入視頻。在遊戲中,沙發上的抱枕LOGO、桌上放置的產品、牆面上的燈牌等不同形式廣告植入完全依託後期AI技術,但這些植入素材已能基於視頻內的光影、運動軌跡和遮擋關係,與視頻場景融為一體,達到「以假亂真」效果。

作為一家從電視台中誕生的視頻內容平台,不少人對芒果TV的印象可能還主要聚焦於綜藝、電視劇等內容,甚至還可能認為芒果TV就是搬運湖南衛視節目內容的誤區。但作為一家互聯網企業,芒果TV技術團隊早已不只是承擔維護視頻正常播出這樣的職能。

「可以說,我們的技術進步很大一部分是業務倒逼出來的。」產品技術團隊負責人盧海波感嘆道。

擅長做工具研發的技術團隊

由於內容創作出色,大量來自業務端的需求經常像大水漫灌一樣交到技術團隊手中,這也倒逼技術團隊在基於「點」解決技術及迭代版本後,因為特殊需求開始開發各類方便內容創作與創新的工具型產品。

「 過去我們的植入還不是很好,但現在可以了。我還清楚記得《乘風破浪的姐姐》裡面,有個植入場景,女嘉賓有幾根頭髮絲飛過那個品牌,光影效果好到我都沒看出來是植入。」盧海波告訴36氪。據他透露,和其它大量收入來自流量變現的視頻平台相比,芒果TV廣告收入中,內容廣告和流量廣告收入佔比可達到5:5,這也給芒果TV的內容植入技術提出了更高要求。

焦點分析 | 虛擬主持人亮相後,芒果TV帶著技術團隊走向台前 - 天天要聞

芒果TV自動化植入示範

「我們經常是節目開播了之後,因為節目火爆又陸續來了很多品牌。」盧海波解釋道。但在這個時候,節目也已經錄製了一部分了,如果需要重新植入廣告,則需要節目組重拍或者後期投入大力氣增補,這在操作性上幾乎是不可能的。為了節省成本,這才有了不斷迭代的內容植入AI技術。

有了工具後,在互動展區,觀眾使用ipad即可體驗廣告植入過程——把產品拖入畫面即可。產品入畫後將自動跟隨鏡頭角度及光照等維度適配,達到融入畫面的效果。

除卻內容廣告外,內容的形式創新也給技術帶來了很多突破機會,比如互動劇的工具研發。

焦點分析 | 虛擬主持人亮相後,芒果TV帶著技術團隊走向台前 - 天天要聞

芒果TV 互動劇編輯後台

「我們的互動劇編輯器給內容團隊使用也是很簡單,而且在呈現方式上不只支持點擊,我們還支持讓用戶滑動、多角度看場景等很多效果。」盧海波補充道。在現場,互動劇的編輯器也被展示出來,這個編輯器儼如橙光遊戲,它支持內容創作者搭建多支線劇情,並直接上傳不同階段視頻內容。

像這樣類似的創新點還有很多:比如為了支持天南海北節目組能快速剪輯而開發的4K雲制播技術,運用這項技術剪輯團隊減去了很多繁瑣的傳送時間,對剪輯設備的要求也降低。節目組錄製完後即可在雲端剪輯,讓大型素材快速加工後回傳;再比如為了媒資上傳而開發的自動打點剪輯取標題技術,這項技術開發後,上傳分段節目不再需要大量人力。媒資團隊將節目成片直接上傳後,系統即會自動打點取標題,人力只需要簡單審核編輯即可。

從技術掣肘到助力內容找下一個增長點

「我們追上其他幾家的技術已經是2018-2019年,最開始成立的時候還是吃過一些虧。」盧海波回憶道。

2014年,視頻行業還是優酷、土豆、愛奇藝天下。當時愛奇藝購買湖南衛視綜藝播放版權,讓《快樂大本營》等一批經典綜藝有了網路播放渠道。也是同時期,湖南廣電決定發展視頻平台,作為重要戰略成立了芒果TV。因為與愛奇藝的合同約定,湖南衛視仍可在自己的網路平台播放綜藝,這也讓芒果TV有了播放台里媒資的資格。

據芒果TV內部員工回憶,當時,芒果TV受限於技術,媒資上線總比愛奇藝要晚。比如當天播完的《快樂大本營》,愛奇藝在節目播完後幾分鐘即可上線到網站。但芒果TV還在上傳媒資,解碼技術也不好。幾個小時後,《快樂大本營》登錄芒果TV,畫質清晰度也不如愛奇藝。

「那個時候,我們網站還容易崩潰,用戶抱怨卡頓。不像現在,我們經常和業務各部門吃飯,討論的都是未來還能怎麼做了。」盧海波說。

從不被看好到終於追平行業水平,芒果TV走了近五年。

「時代不一樣,創作的陣地也不一樣。我們一定會去配合我們的藝術創作者,去攻堅克難,幫他們配備這樣的工具和場地。」談及未來,盧海波憧憬道。

而對於芒果TV的未來,從技術研究方向及業務布局就可見一斑。

在今年演算法大賽中,有這樣一道賽題,需要參賽選手設計演算法讓手機可檢測音樂節拍並做出互動。在展區,芒果TV以《披荊斬棘的哥哥》為例進行了展示,展示區的手機在使用最新版芒果TV APP播放節目時,手機可配合節目內容實時增加震動與閃光燈。

雖然這樣的呈現方式仍局限於硬體功能(比如手機),但芒果TV已經在文娛類互動體驗方面加碼了。

焦點分析 | 虛擬主持人亮相後,芒果TV帶著技術團隊走向台前 - 天天要聞

芒果超媒旗下劇本殺品牌M-CITY

從芒果TV母公司芒果超媒目前的業態來看,除卻視頻內容業務外,小芒電商與劇本殺、密逃等線下實景娛樂也成為了新的探索性業務。特別是以M-CITY為品牌的劇本殺類業務,作為芒果TV旗下綜藝《明星大偵探》延申業務,目前也依託於資源協同和明偵宇宙IP的知名度在劇本殺行業佔據著一席之地。

吳紅對36氪透露,芒果TV創新研究院針對MR相關的技術研究也已經有了方向,在不久後,創新研究院也會上新MR+劇本殺類工具,讓玩家能在虛擬場景搜證和體驗劇情,增加劇本殺沉浸感。

那麼在未來,芒果TV會往哪兒去?

技術與內容創作深度融合,讓內容不再受限於「一塊屏幕」這樣的呈現方式,一定是必然的。

科技分類資訊推薦

日本液晶面板成絕唱!夏普退出LCD面板領域,OLED前景不明 - 天天要聞

日本液晶面板成絕唱!夏普退出LCD面板領域,OLED前景不明

之前聊LGD廣州面板廠的時候,我們就說過日本夏普的LCD面板業務也已經停滯,大概率是要賣給中國廠商,如果華星光電今年無法拿下LGD廣州廠的話,那麼很有可能在明年轉而收購夏普的LCD面板廠。而現在夏普已經正式宣布:將在2024年底全面停止大型LCD顯示設備的生產。
玫瑰金捲土重來 蘋果iPhone 16全系列配色共8款可選 - 天天要聞

玫瑰金捲土重來 蘋果iPhone 16全系列配色共8款可選

據知名分析師郭明錤今天發布新預測,iPhone 16系列共有8款顏色。其中,iPhone 16 Pro/Pro Max包括黑色、白色(或銀色)、灰色(應該是原色鈦金屬)和玫瑰色;iPhone 16/16 Plus則包括黑色、綠色、粉紅、藍色和白色。而主要變化則在於Pro系列的藍色變成了玫瑰色,預計將成為最搶手的顏色。而iPhone 16/16 Plus則是將
GNOME OS 發行版啟動開發新安裝器、重構 Nautilus 文件管理器 - 天天要聞

GNOME OS 發行版啟動開發新安裝器、重構 Nautilus 文件管理器

IT之家 5 月 20 日消息,GNOME OS 項目在得到德國主權技術基金(Sovereign Tech Fund,STF)的資助後,目前已經啟動安裝器(Installer)的開發工作。官方目前並未披露 GNOME OS 安裝器的更多細節,畢竟該項目還處於開發的早期階段,甚至還沒有 git 倉庫。該安裝器計劃裝備在 GNOME OS 中,後者是由 GNOM
銘凡子品牌「原子俠」X7 Ti迷你主機上架:酷睿Ultra9,4899元起 - 天天要聞

銘凡子品牌「原子俠」X7 Ti迷你主機上架:酷睿Ultra9,4899元起

IT之家 5 月 20 日消息,銘凡子品牌「原子俠」X7 Ti 迷你主機上架,搭載英特爾酷睿 Ultra9 185H 處理器,頂上有一塊 4 英寸的觸控屏,准系統版本(無內存硬碟)4899 元,32GB+1TB 版本 6199 元。原子俠 X7 Ti 搭載英特爾酷睿 Ultra9 185H 處理器,該處理器為 16 核 22 線程,採用 Intel 4 製程
佳雲科技涉嫌信披違規被立案,曾因未披露關聯交易被出具監管函 - 天天要聞

佳雲科技涉嫌信披違規被立案,曾因未披露關聯交易被出具監管函

5月17日,廣東佳兆業佳雲科技股份有限公司(佳雲科技,300242.SZ)公告,公司於當日收到中國證監會《立案告知書》,依據《立案告知書》,因該公司涉嫌信息披露違法違規,中國證監會決定對該公司立案。此次公告並未透露佳雲科技因何觸犯信披規定,但值得注意的是2023年12月8日,佳雲科技曾披露公告稱,收到廣東證監局出具的...
榮耀Magic7系列有望搭載2億潛望長焦 已經在預研了 - 天天要聞

榮耀Magic7系列有望搭載2億潛望長焦 已經在預研了

【CNMO科技消息】榮耀Magic系列旗艦機一向有著高人氣,時間來到年中,大家都開始期待榮耀Magic7系列的到來。據CNMO了解,榮耀Magic7系列有望搭載2億像素潛望長焦鏡頭,博主稱,榮耀已經在預研這顆鏡頭。榮耀Magic6系列  那麼,榮耀Magic7系列啥時候發布呢?根據另一名數碼博主的爆料,新機很可能會提前到來,這對期待它的...
一張英偉達B100售價超21萬,黃仁勛如何管理市值2.27萬億AI晶元巨頭? - 天天要聞

一張英偉達B100售價超21萬,黃仁勛如何管理市值2.27萬億AI晶元巨頭?

本周,AI 領域最關心的重要事件是,「超級權重股」、「AI晶元之王」英偉達(NVIDIA)將於5月22日美股盤後發布2024自然年第一季度財報。據華爾街分析師預計,截至4月份的一季度中,英偉達營收有望達到246億美元,同比增長兩倍多,到2025年1月財年結束時,季度銷售額有望突破300億美元大關;預計同期凈利潤138.6億美元,同比...
AI質檢員替代人工,將漏檢率降至零 | 創新場景 - 天天要聞

AI質檢員替代人工,將漏檢率降至零 | 創新場景

圖片系AI生成痛點施耐德電氣全球武漢工廠是第一家開始全面部署EcoStruxure整體解決方案的工廠。過去,在AI質檢用上前,傳統人工目視檢測和傳統機器視覺的檢測方法,在檢測效率和精度上均存在挑戰。例如,員工需要從各個方向觀察產品,且由於產品的異常位置不固定、缺陷類型不固定,工作量大、效率低。解決方案施耐德電氣選...
小米智能貓眼 2 上架:3MP 攝像頭 + 紅外補光,售價 599 元 - 天天要聞

小米智能貓眼 2 上架:3MP 攝像頭 + 紅外補光,售價 599 元

IT之家 5 月 20 日消息,小米智能貓眼 2 日前上架京東等電商平台,5 月 22 日 10 點開售,售價 599 元(已開售價格為準)。據介紹,這款新品配備 3MP 高清攝像頭,解析度為 2048x1536,同時支持 HDR,呈現更清晰的明暗細節;180° 廣角鏡頭視野開闊,門外盲區更少;8 顆 940nm 紅外夜視燈,5m 紅外補光,配合高靈敏度感測
曝三星Z Flip6將採用更厚的UTG面板 可讓摺痕不再明顯 - 天天要聞

曝三星Z Flip6將採用更厚的UTG面板 可讓摺痕不再明顯

【CNMO科技消息】近日,CNMO了解到,據韓國媒體TheElec報道,三星即將推出的Z Flip6可能會帶來一項備受期待的顯示屏升級。這次升級的關鍵在於採用了更厚的超薄玻璃(UTG)應用在可摺疊顯示屏上。UTG,即超薄柔性玻璃蓋板,是一種專為摺疊屏手機設計的特殊玻璃材質,以其超薄的柔性玻璃基板為基礎,製成柔性外層玻璃保護片。...