“ 感知技術(shù) · 感觸CG · 感受藝術(shù) · 感悟心靈 ”

中國很有影響力影視特效CG動(dòng)畫領(lǐng)域自媒體

現(xiàn)今這個(gè)數(shù)字化時(shí)代，AI幾乎是滲透到了各個(gè)領(lǐng)域。技術(shù)發(fā)展也是日新月異，差不多是隔段時(shí)間就能給大家?guī)韨€(gè)新驚喜。

動(dòng)畫制作領(lǐng)域也不例外，新技術(shù)新工具層出不窮。這不，又推出了一工具，用于的全新GPU加速AI動(dòng)作捕捉插件。

是一款由 RTX GPU提供支持的AI面部追蹤器，能夠從標(biāo)準(zhǔn)720p 攝像頭和傳統(tǒng)視頻文件中提取演員面部運(yùn)動(dòng)數(shù)據(jù)，并將其實(shí)時(shí)流式傳輸?shù)絼?dòng)畫軟件。

同時(shí)兼容的自動(dòng)唇形同步系統(tǒng),可以為多種語言生成精確的唇形運(yùn)動(dòng)。

如果預(yù)算有限，不能購買昂貴動(dòng)作捕捉制作硬件，可以考慮一下，同樣能為你提供頂級(jí)的面部捕捉效果。

從任何視頻源捕捉表演

【實(shí)時(shí)面部追蹤】

與獨(dú)立的USB網(wǎng)絡(luò)攝像頭或配備了集成網(wǎng)絡(luò)攝像頭的筆記本電腦兼容,可提供在720p分辨率下每秒30幀的優(yōu)化跟蹤。

通過頭盔式設(shè)置調(diào)整視頻方向的能力，可以在同步進(jìn)行身體和手部跟蹤的同時(shí)，保證穩(wěn)定的面部捕捉。

【獨(dú)立的基于視頻的檢測】

避免與專業(yè)動(dòng)作捕捉設(shè)備相關(guān)的高昂成本,選擇消費(fèi)級(jí)相機(jī)或普通手機(jī)來錄制素材。

對(duì)于缺乏原始素材的動(dòng)畫師來說,始終有一個(gè)強(qiáng)大選擇,就是適配、等現(xiàn)有的視頻。

【支持遠(yuǎn)程協(xié)作】

憑借從標(biāo)準(zhǔn)錄制視頻中進(jìn)行準(zhǔn)確面部捕捉的能力,可以讓制作室與世界各地的專業(yè)演員或配音人員無縫協(xié)作,將動(dòng)畫生產(chǎn)力從設(shè)備依賴及時(shí)間/位置的限制中解放出來。

校準(zhǔn)準(zhǔn)確性和個(gè)性化

可以優(yōu)化面部的表情范圍,建立中性狀態(tài)作為表情的基準(zhǔn)；通過進(jìn)一步校準(zhǔn)眉毛運(yùn)動(dòng)來捕捉演員的真實(shí)表情和個(gè)性化表演。

【Live模式校準(zhǔn)】

通過簡單直觀的引導(dǎo)過程定制角色的面部設(shè)置以匹配現(xiàn)場表演者，可以即時(shí)接受動(dòng)畫反饋進(jìn)行徹底的調(diào)整。

【模式校準(zhǔn)】

當(dāng)從單個(gè)視頻源獲得理想校準(zhǔn)姿勢有困難時(shí),可以在多個(gè)視頻文件中搜索校準(zhǔn)幀。

【全光譜動(dòng)作捕捉優(yōu)化】

還提供了一系列工具來解決諸如噪音、抽動(dòng)、干擾和錯(cuò)誤觸發(fā)等問題。

力度平衡

根據(jù)演員的個(gè)性調(diào)整面部區(qū)域的力度,平衡表情強(qiáng)度，以捕捉更逼真的表演，或者轉(zhuǎn)變?yōu)榱硪环N動(dòng)畫風(fēng)格。

平滑濾鏡

消除由于超出跟蹤角度、頭發(fā)過度遮擋、照明不均勻及陰影等原因?qū)е碌母檾?shù)據(jù)中的不良抽動(dòng)（ ）。

降噪

由于抖動(dòng)會(huì)給各個(gè)等級(jí)的運(yùn)動(dòng)追蹤帶來困擾，去噪可以有效地平滑不穩(wěn)定的運(yùn)動(dòng),同時(shí)不會(huì)損害性能的廣度。

抗干擾

的抗干擾功能，可以減少非必須的頭部、眉毛和嘴巴運(yùn)動(dòng)；有效解決跨區(qū)域干擾和觸發(fā)導(dǎo)致的表情混亂問題。

精確的音頻匹配

【單通道音頻同步】

與需要單獨(dú)的音頻對(duì)齊才能完全同步語音和表演的面部捕捉解決方案不同,可以一次性捕捉音頻數(shù)據(jù)和面部動(dòng)畫。

無論是來自實(shí)時(shí)網(wǎng)絡(luò)攝像頭還是預(yù)先錄制的視頻,都可以快速生成語音同步動(dòng)畫。不論源媒體的幀率設(shè)置為24、30還是,引擎都將根據(jù)源幀率持續(xù)生成音頻同步動(dòng)畫。

【嘴唇和舌頭發(fā)音】

可以實(shí)現(xiàn)其他面部捕捉無法實(shí)現(xiàn)的復(fù)雜嘴唇和舌頭運(yùn)動(dòng)。

通過從語音中提取文本數(shù)據(jù),可生成一個(gè)額外的 （控制唇型關(guān)鍵幀的時(shí)間軸），以實(shí)現(xiàn)精確的口型同步。

如果想要完全控制面部動(dòng)作捕捉的細(xì)微之處,可以利用的面部鍵編輯器、面部圖層和曲線編輯器。

【多語言支持】

可以通過繞過語音轉(zhuǎn)文本的方式,將口型同步功能擴(kuò)展到英語之外的其他語言。

可以通過提供其他語言的文本腳本來提高非英語語音的口型檢測和同步精度，也有免費(fèi)工具可以將其他語言的音頻轉(zhuǎn)換為對(duì)應(yīng)的羅馬音,來幫助口型同步。

【時(shí)間碼同步實(shí)現(xiàn)無損錄制】

通過時(shí)間碼同步匹配,可以根據(jù)視頻的幀率進(jìn)行無損幀錄制,而不受計(jì)算機(jī)規(guī)格和性能的限制。

價(jià)格和系統(tǒng)要求

End