像傑克一樣,世優科技用實時虛擬技術復活近400個「阿凡達」

2021年10月15日12:31:02 動漫 1956

大河報·大河財立方記者 裴熔熔

瓜子臉、大眼睛、高馬尾⋯⋯一個可愛活力的二次元美少女,在熒屏上唱歌跳舞,讓人挪不開眼。可鏡頭一轉,畫風突變,這個二次元美少女的真身竟然是個五大三粗的大老爺們。

是不是一個令人驚詫的反轉?

這,就是世優(北京)科技有限公司(以下簡稱世優科技)動作捕捉技術與實時數字人技術的直接體現。品牌虛擬吉祥物可以在節目、晚會中與人們互動;動漫角色可以跳齣劇情,與粉絲親切交談。像傑克用意念控制阿凡達一樣,不需後期製作,實時即可完成。

在世優科技的「虛擬工廠」里,已經有近400個虛擬人物被這樣成功復活。

而這一切,都源於創始人紀智輝一個看似荒誕的想法。

像傑克一樣,世優科技用實時虛擬技術復活近400個「阿凡達」 - 天天要聞

「我們不僅能夠做到,還能做得更好」

2010年,好萊塢導演卡梅隆的3D巨作《阿凡達》在中國內地上映,炫酷的畫面和技術讓國內觀眾大受震撼。不少人熬夜排隊買票,一票難求。

就像一顆種子,《阿凡達》拉開了3D版立體電影的序幕,也讓創業多年的紀智輝,又一個夢想發芽:「裡面的虛擬技術,我覺得我們不僅能夠做到,還能做得更好。」

乍一聽,紀智輝的想法是不是有些荒誕?

號稱十年醞釀、四年打造、5億美元成本製作的《阿凡達》,豈能說超就超?紀智輝這個預判,從何而來?

其實紀智輝早在2004年,就與合伙人組建了虛擬技術實驗室,開始研究包括數據挖掘、圖形圖像演算法、工作流引擎、實時動捕技術等前沿技術,成為國內比較早一批研發實時數字人技術的高頂尖團隊,但是當時的市場一直沒有成熟落地化的應用。

直到《阿凡達》的出現,讓他嗅到了虛擬技術的潛在市場,積累多年的技術終於有了變現的風口。

「《阿凡達》採取的主要是動作捕捉技術。演員穿上一套特殊的服裝,上面有很多感應球,用來記錄捕捉到演員的表情動作數據,但並不是實時全身動捕。那時候的表情捕捉技術十分有限,很難實時追蹤嘴唇運動蹤跡。而是採用先記錄下面部和身體數據表演捕捉數據,結束後再將捕捉的演員數據放到工作站上後期解算,然後經過人工精修,最後再離線渲染等多個工序才能輸出最終畫面。」紀智輝說。

長期在實驗室從事動作捕捉技術研究,讓他意識到,這項技術還可以再優化,實現「實時」複製,不再需要後期的渲染和加工。

於是在2011年,世優科技誕生了。

「像傑克一樣,用意念操控阿凡達」

2020年底,一批國漫迷在追劇、催更《狐妖小紅娘》時,驚喜地發現,自己的偶像塗山蘇蘇竟然從動漫中走出,開起了直播。

一頭金黃的頭髮、兩隻粉色的狐狸耳朵、一襲粉白國風少女裙,「原裝」的塗山蘇蘇,在直播間賣萌、跳舞、唱歌,還和粉絲進行實時互動。不少粉絲驚呼:有生之年看到了「活著」的女神。

其背後的支撐技術,就是紀智輝最初的設想——實時數字人技術。

就像一場雙簧或者提線木偶表演,屏幕前的虛擬人物擺出各種姿勢,跳躍、旋轉、唱歌、做鬼臉;屏幕後則是一個真身演員,身穿動捕服、頭戴面部設備、手戴數據手套,與任意虛擬形象進行點對點的綁定,進行實時消抖運算、動畫修正、處理表情身體手指的同步,並把數據實時發給渲染引擎,進行即時渲染與環境模擬,輕鬆地對屏幕前的虛擬人物進行操縱。

像傑克一樣,世優科技用實時虛擬技術復活近400個「阿凡達」 - 天天要聞

「就像傑克躺在艙里,用意念控制了一個阿凡達,讓阿凡達按照他的意願活動說話,就是這樣一個概念。」紀智輝說。

在虛擬世界裡,除了虛擬數字人,還有虛擬場景才能構成虛擬世界。

2021年央視牛年春晚的舞台上,一首《牛起來》讓很多人印象深刻。在虛擬的大紅中國元素舞台上,劉德華時而置身於金邊紅色高台,時而置身於「中國結」上與機械牛共舞,簡直炫酷到沒朋友。歌曲最後,舞台由虛入實,劉德華與王一博關曉彤合唱互動,完美融合。

無縫銜接的畫面,讓很多人以為劉天王也來到了春晚現場。但事實上,除了王一博、關曉彤和真實的春晚舞台,劉德華部分的演出都是由世優科技的實時虛擬合成系統實時摳像合成。

像傑克一樣,世優科技用實時虛擬技術復活近400個「阿凡達」 - 天天要聞

除此之外,TCL雙11總裁直播、伊利金領冠年味大街帶貨直播、網易大話西遊青春同路直播、飛碟汽車全系新品發布會、騰訊王者榮耀KPL虛擬直播等,都是由世優科技製作完成。

作為國內實時虛擬技術的先行者,世優科技如今已經成為眾多品牌和平台的首選技術提供商。至今服務騰訊、天貓、京東、網易、華為小米等頭部品牌商超1000個,與央視、鳳凰衛視、東方衛視、湖南衛視、浙江衛視等達成深度合作,成功復活的虛擬人物近400個。2020年,實現了近3000萬元的營收額,今年預計超5000萬元。

「有鎚子卻沒有釘子」

不到10年間,紀智輝的理想照進現實,帶領世優科技成為行業領軍者。但回首創業路,其實並沒有那麼容易,世優科技甚至坐了好幾年的「冷板凳」。

2011年,新生的世優科技,很快陷入了一個尷尬的境地:有技術積累,沒有硬體設備;等兩者都有了,卻沒有適合的市場。

「我們算是涉足虛擬技術很早的一批,當時全球都買不到相關穿戴設備,也沒有經過驗證的商業模式。《阿凡達》製作使用的設備都是他們內部研發,且只有部分身體設備。所以我們全部都是自己進行設計和研發。」紀智輝說。

因為有前期多年的技術儲備,在2012年,世優科技就自主研發出了Puppeteer虛擬工廠系統,這是國內首創的實時&快速虛擬內容製作、虛擬IP打造平台,實時數字人和快速動畫製作技術在國內外都處於領先水平。

但彼時的市場並不給力。

「2014年之前,國內使用的還是3G網路,也沒有Wi-Fi,這樣的通信基礎條件根本無法支持大規模地推行虛擬技術,國內也沒有這種類型的電影。所以很少有人用我們的技術,一般還是採用傳統CG(計算機繪圖)人工製作方式做動畫。」紀智輝說。

空有一流技術,卻沒有市場,世優科技被多個投資人調侃:「典型的有鎚子卻沒有釘子。」但因為對虛擬市場堅定看好,「只出不進」的世優科技並未被拋棄。

隨著4G、5G網路鋪開,短視頻、直播等各種新業態浪潮迭起。尤其是隨著Z世代(即1995~2009年間出生的一代人)的崛起,二次元、三次元文化在年輕人當中成為潮流。真人演繹和傳統CG動畫無法實時還原虛擬世界的精妙,且製作成本高、效率低,市場對虛擬技術的訴求越來越高。

到了2017年,世優科技終於有了大施拳腳之機。

「未來有萬億的藍海市場」

如今的世優科技,實時虛擬技術已運用到教育、媒體、影視動漫、遊戲、綜藝娛樂、金融、品牌營銷、直播/短視頻等多個領域,用紀智輝的話說是「現階段世優科技對外的業務,無論是從技術演算法、硬體設備、軟體系統、技術製作等多方面均能提供全體系的技術和產品的商業化應用」。

不過在他看來,實時虛擬技術仍處於早期階段,很多行業和領域都沒有鋪開,未來將有萬億的藍海市場。

僅從直播行業來看,據前瞻產業研究院數據,2019年中國視頻直播行業收入達到1082億元,全國有3.9億人在關注虛擬偶像,其中最大的二次元活動社區B站月活用戶達1140萬,虛擬主播占直播營收 40%。同期,B站、虎牙等大型直播平台也都開啟了線上、線下虛擬主播活動。同期遊戲市場規模達到2300 億元,其中與數字人相關度較大的RPG類遊戲約佔30%的份額。

對於公司下一步發展,紀智輝表示,將在不斷提高研發水平和服務能力的基礎上,在全國範圍內拓展更多合作公司和子公司,推進實時虛擬技術在更大範圍內落地。

今年年初,世優科技在鄭州建立了分公司——鄭州世優華冠動漫科技有限公司,旨在深度挖掘中原大地豐富的文化資源,打造黃河文化IP,使河南特色文化走出中原,走向世界。在此次2021年全國雙創活動周上,世優華冠將會發布少林寺的IP形象——功夫寶寶。

像傑克一樣,世優科技用實時虛擬技術復活近400個「阿凡達」 - 天天要聞

「世優華冠以行業首創的IPCT模式為基礎,對『功夫寶寶』進行深度的開發。『功夫寶寶』憨萌可愛,十八般武藝樣樣精通。他骨子中流淌著中原人善良質樸、勇敢正直、樂於助人、熱情好客的性格,始終用知足常樂的心態,通過製造快樂和傳遞好運給更多的人帶去正能量。」紀智輝說。

據介紹,未來世優華冠將圍繞「功夫寶寶」品牌,進行大量創意內容開發,通過系列微內容在新媒體平台的傳播,有效提升用戶對品牌文化的認可度;同時持續在線下舉辦各種主題活動,進一步增強形象與受眾的互動性,實現經濟效益和社會效益的雙豐收。

延伸閱讀

世優科技是領先的虛擬技術提供商,專註於實時虛擬技術與AI數字人的研發與應用。公司自主研發的Puppeteer虛擬工廠系統是國內首創(2012年)的實時&快速虛擬內容製作、虛擬IP打造平台,在實時數字人和快速動畫製作領域在國內外處於領先水平。

在AI應用方面,世優科技定位做為AI的「UI」,深度結合AI技術,曾研發過的AI類應用有某品牌手機智能助手、AI伴讀寶、7*24小時AI虛擬虛擬主播、全息AI可交互數字人等產品,為手機、教育、直播帶貨、數字展廳虛擬接待等領域提供了智能多元化應用。

公司主要業務是為B端客戶提供軟硬體系統產品和技術服務,典型客戶行業為廣電、互聯網、短視頻/直播、品牌營銷、教育、影視動畫等。

廣電行業典型案例如歷年央視春晚的虛擬技術及支撐及服務(2021年春晚劉德華「牛起來」),鳳凰衛視、東方衛視、湖南衛視、山東衛視、浙江衛視、廣西衛視等也都採購或使用過世優科技的技術服務。另外,世優科技為華為、小米、騰訊、百度、網易、京東、阿里蘇寧、海爾、TCL、歐萊雅等頭部企業提供虛擬IP打造服務或相關產品。

目前,世優科技實時IP庫中已累計「復活」的虛擬IP形象近400個。

責編:劉安琪 | 審核:李震 | 總監:萬軍偉

動漫分類資訊推薦

斗羅大陸劇場版定檔,劍斗羅父親登場,唐三唐昊出現卻被罵慘了 - 天天要聞

斗羅大陸劇場版定檔,劍斗羅父親登場,唐三唐昊出現卻被罵慘了

哈嘍,大家好,我是木子。在《斗羅大陸》第一部完結之後,動漫官方曾經說過要出一部劇場版,不過這部劇場版的主角並不是唐三小舞等人,而是劍斗羅塵心,如今這部劍斗羅劇場版已經正式宣布定檔了,在這次宣布定檔的時候還放出了一個定檔預告視頻,在這裡面有著不少的情報內容,那麼接下來就一起來看看吧。斗羅大陸劇場版定檔...
「五金鎚子」火了,網友用黃銅配件爆改「手辦」,五金店主:配件緊缺,很多女生送男友 - 天天要聞

「五金鎚子」火了,網友用黃銅配件爆改「手辦」,五金店主:配件緊缺,很多女生送男友

近日,不少網友分享自己在五金店買配件做鎚子的經歷。目前,關於配料清單的帖子可以輕鬆做到點贊過萬。更有不少商家上架「五金版鎚子」「金箍棒」,有網店已售6000件。 什麼是「五金版鎚子」?其實,它是指當下一些五金店特製的鎚子,用不鏽鋼管和黃銅配件組合起來,形似「雷神之錘」。在這些五金店,根據不同配件的規格,...
收77.4萬美元,為43名泰國人「通關脫罪」,兩名警官被查 - 天天要聞

收77.4萬美元,為43名泰國人「通關脫罪」,兩名警官被查

據柬單網消息,柬埔寨反腐機構持續加大打擊力度,5月26日,金邊初級法院裁定對兩名涉嫌受賄的警官實施司法羈押,案件涉案金額高達77.4萬美元,牽涉43名非法居留與非法就業的泰國公民。 據反貪局(ACU)通報,落網人員分別為馬德望省博威縣警察局副局長與國防部技術裝備總局副局長助理。 案件源於今年5月2日,執法機關在靠近...
署期檔核彈新游第一波!韓國紳士PC新增黑絲戰袍,MOD已就位 - 天天要聞

署期檔核彈新游第一波!韓國紳士PC新增黑絲戰袍,MOD已就位

今年的大作可謂是格外的多,馬上來臨的六月,也算是到了暑期檔,不少新游都蜂擁而至,每年的這個時段遊戲圈也都熱鬧非凡。今天就讓我們為大家盤點一下,那些即將在6月與我們見面的新作吧。拼好魂來了,你敢玩嗎?《艾爾登法環:黑夜君臨》——5月30日《艾爾登法環:黑夜君臨》是FS社最新的一款多人合作PVE遊戲,遊戲內容建...
「六一」兒童節「上新」!馬迭爾推出「小兔 小虎」冰淇淋 - 天天要聞

「六一」兒童節「上新」!馬迭爾推出「小兔 小虎」冰淇淋

隨著「六一」兒童節的臨近,5月26日,哈爾濱市中央大街飄來陣陣誘人的甜香,百年老字號馬迭爾今年特別推出「小老虎」和「小兔子」造型冰棍,萌萌的動物造型配上清爽的楊枝甘露口味,立即成為街頭最受歡迎的兒童節禮物。記者在現場看到,這些造型精緻的冰棍不僅讓孩子們愛不釋手,更喚起了許多80後、90後父母的童年回憶。「...
好消息!下周只上四天班 - 天天要聞

好消息!下周只上四天班

本周六就是端午假期了。依據國務院辦公廳《關於2025年部分節假日安排的通知》,5月31日(周六)至6月2日放假,共3天。過完端午假期接下來還有國慶節、中秋節連著休8天(來源:央視新聞)更多精彩資訊請在應用市場下載「極目新聞」客戶端,未經授權請勿轉載,歡迎提供新聞線索,一經採納即付報酬。24小時報料熱線027-867777...