動作捕捉技術(shù)類型大PK:“激光+慣性”將占據(jù)C位

IM2MakerOpr 4年前 (2022-04-20)

最近,虛擬主播的熱度持續(xù)升溫。

被稱為現(xiàn)象級虛擬人的美妝達(dá)人柳夜熙,第一條視頻漲粉上百萬,出道即巔峰;攜“聲優(yōu)”首發(fā)優(yōu)勢,快速卡位虛擬直播的抖音主播許安一,三周多時間,漲粉近10萬,引發(fā)圍觀熱潮。更早一些,洛天依、ayayi、清華學(xué)生華智冰……越來越多的虛擬數(shù)字人受到追捧,并迅速躥紅。

研究數(shù)據(jù)顯示,當(dāng)前虛擬數(shù)字人市場規(guī)模已超2000億元,預(yù)計2030年達(dá)到2700億元,虛擬人賽道有望涌現(xiàn)超過5家以上的獨角獸企業(yè)。其中以虛擬主播、明星虛擬分身、品牌代言人等為代表的身份型虛擬人將在未來將占據(jù)主導(dǎo)地位,體量達(dá)1750億元。

虛擬人,借著元宇宙基礎(chǔ)設(shè)施的東風(fēng),一下子站到風(fēng)口浪尖上。特別是在內(nèi)卷化嚴(yán)重的MCN、主播市場中,虛擬人的出現(xiàn),解決了IP穩(wěn)定性、不愿出鏡、差異化競爭等難題,甚至被認(rèn)為是主播逆襲的工具。提及虛擬人,除了內(nèi)容端的形象設(shè)計建模、渲染外,決定虛擬人靈活性、穩(wěn)定性、使用門檻的動作捕捉技術(shù),是兵家必爭之地。

激光+慣性:易搭建、易攜帶,連續(xù)直播不“掉線”

4月17日,抖音虛擬主播許安一直播間,人聲鼎沸。“到一萬人就給大家倒立,還能隨意跳舞,我還會倒立洗頭呢,絕活可多了”,在線數(shù)據(jù)很快飆升到1萬人,許安一二話不說,當(dāng)場就來了個倒立,整個動作行云流水,絲毫不拖沓。

但恰恰就是這樣一個線下直播的“常規(guī)”動作,如果讓虛擬數(shù)字人“照辦”,對動作捕捉技術(shù)和設(shè)備的要求就相當(dāng)苛刻了。

動作捕捉技術(shù)類型大PK:“激光+慣性”將占據(jù)C位

有了“激光定位+慣性”的動捕技術(shù),才讓許安一“有恃無恐”。因為在采用STEPVR的動捕方案前,虛擬主播在窗口前很容易“掉鏈子”,或是突然形象崩塌,或是大幅動作“穿幫”,因此,不得不謹(jǐn)小慎微。有了“激光+慣性”動捕技術(shù)的加持,主播可以在直播間里肆意表演,跳舞、倒立、翻跟頭等高難度動作,都能流暢完成,還支持多人實時動捕,觀賞性一下子就拉高很多。

相比其他類別動捕技術(shù),“激光+慣性”還有超強穩(wěn)定性的優(yōu)勢,連續(xù)直播10小時,不會拉胯,不需要矯正復(fù)位等多余的操作。另外值得一提的是,這一動捕技術(shù)性價比極高,使用門檻極低,對空間要求也很低,主播如果想換個“場子”,拎著箱子出去,在任意小空間都可以靈活搭建,直播起來,幾乎是傻瓜式操作。

慣性:成本低廉,但短板很明顯,需15分鐘矯正

目前,應(yīng)用在虛擬直播上的慣性動作捕捉技術(shù)占主流。從原理上講,是將慣性傳感器應(yīng)用到數(shù)據(jù)采集端,通過慣性原理對數(shù)據(jù)進行處理,從而完成運動目標(biāo)的姿態(tài)角度測量,可以簡單理解為手機里那個陀螺儀。

好處是,成本相對低廉,短板也非常突出,誤差比較大,重復(fù)精度比較低。因為動作捕捉數(shù)據(jù)由推算而來,所以絕對位置的數(shù)據(jù)精準(zhǔn)度非常低。比如現(xiàn)實世界的才藝表演,主播回到原點后,虛擬世界跟隨同樣的運動后,慣性式虛擬人極有可能回不到最初的原點,甚至跑到旮旯去了。數(shù)據(jù)誤差不斷積累的話,就需要每15分鐘,復(fù)位矯正一次設(shè)備。

對虛擬主播來說,這就尷尬了,往往難以忍受。

所以,使用了單一慣性動捕技術(shù)的虛擬主播,不管是跳舞、運動,上限時間是15分鐘左右,之后主播不得不回到座椅上“休息”一下,實際上是為了復(fù)位校正。再者,使用慣性動捕時,如果周邊手機設(shè)備較多的話,電磁信號復(fù)雜,很可能導(dǎo)致虛擬人會突然姿態(tài)崩潰、失控。目前,國外代表性的企業(yè)有Xsence,國內(nèi)采用慣性的動捕企業(yè)也不少。

光學(xué)相機:影視級別效果,搭建復(fù)雜,可移動性差

最后一類是光學(xué)相機動捕技術(shù),這一流派并不陌生,在《阿凡達(dá)》等好萊塢動畫片中,有著廣泛應(yīng)用。技術(shù)原理上是通過多個紅外發(fā)射攝像頭,對室內(nèi)空間進行覆蓋,在被追蹤物體上放置反光點,通過捕捉這些反光點反射回來的圖像,確定其在空間中的位置信息。

優(yōu)勢是影視級別效果,因為多年技術(shù)沉淀,成片視覺效果細(xì)膩。當(dāng)然,這自然是所有虛擬主播所追求的目標(biāo),品質(zhì)體驗上對粉絲更為友好,但可惜的是,價格極高,讓人望而卻步。而且操作起來相當(dāng)復(fù)雜,需要進行長時間培訓(xùn),無法實現(xiàn)快速搭建,搭建完成后不能輕易“挪動”,可移動性差,需要專業(yè)人員定期維護。

但這與虛擬主播的未來發(fā)展趨勢有點兒相悖,他們需要更高的自由度。

比如聲優(yōu)主播許安一借助虛擬人,以黑馬姿態(tài)出位;柳夜熙爆火后,馬不停蹄地在線下開展攻勢,接品牌代言;麥當(dāng)勞推出首位虛擬代言人,超寫實數(shù)字人Ayayi也成品牌合作大戶,以及未來虛擬人走向帶貨場景。這意味著虛擬人面向的未來場景更多元,不僅僅存在于直播間,這就要求背后的動捕技術(shù)具有靈活、可移動、快速搭建、免維護的特征。顯然,光學(xué)相機一派的弊端明顯,有些難以適從。

動作捕捉技術(shù)類型大PK:“激光+慣性”將占據(jù)C位

對比了一番后,動作捕捉技術(shù)究竟孰強孰弱?結(jié)果可能已經(jīng)不言而喻:慣性短期內(nèi)有一定成本優(yōu)勢,但長期看未來可能是“激光+慣性”技術(shù)的天下。

最后,記得關(guān)注微信公眾號:鎂客網(wǎng)(im2maker),更多干貨在等你!

鎂客網(wǎng)


科技 | 人文 | 行業(yè)

微信ID:im2maker
長按識別二維碼關(guān)注

硬科技產(chǎn)業(yè)媒體

關(guān)注技術(shù)驅(qū)動創(chuàng)新

分享到