面捕動畫更精準！基于GPU加速的實時AI面部

“ 感知技術 · 感觸CG · 感受藝術 · 感悟心靈 ”

中國很有影響力影視特效CG動畫領域自媒體

現今這個數字化時代，AI幾乎是滲透到了各個領域。技術發展也是日新月異，差不多是隔段時間就能給大家帶來個新驚喜。

動畫制作領域也不例外，新技術新工具層出不窮。這不，又推出了一工具，用于的全新GPU加速AI動作捕捉插件。

是一款由 RTX GPU提供支持的AI面部追蹤器，能夠從標準720p 攝像頭和傳統視頻文件中提取演員面部運動數據，并將其實時流式傳輸到動畫軟件。

同時兼容的自動唇形同步系統,可以為多種語言生成精確的唇形運動。

如果預算有限，不能購買昂貴動作捕捉制作硬件，可以考慮一下，同樣能為你提供頂級的面部捕捉效果。

從任何視頻源捕捉表演

【實時面部追蹤】

與獨立的USB網絡攝像頭或配備了集成網絡攝像頭的筆記本電腦兼容,可提供在720p分辨率下每秒30幀的優化跟蹤。

通過頭盔式設置調整視頻方向的能力，可以在同步進行身體和手部跟蹤的同時，保證穩定的面部捕捉。

【獨立的基于視頻的檢測】

避免與專業動作捕捉設備相關的高昂成本,選擇消費級相機或普通手機來錄制素材。

對于缺乏原始素材的動畫師來說,始終有一個強大選擇,就是適配、等現有的視頻。

【支持遠程協作】

憑借從標準錄制視頻中進行準確面部捕捉的能力,可以讓制作室與世界各地的專業演員或配音人員無縫協作,將動畫生產力從設備依賴及時間/位置的限制中解放出來。

校準準確性和個性化

可以優化面部的表情范圍,建立中性狀態作為表情的基準；通過進一步校準眉毛運動來捕捉演員的真實表情和個性化表演。

【Live模式校準】

通過簡單直觀的引導過程定制角色的面部設置以匹配現場表演者，可以即時接受動畫反饋進行徹底的調整。

【模式校準】

當從單個視頻源獲得理想校準姿勢有困難時,可以在多個視頻文件中搜索校準幀。

【全光譜動作捕捉優化】

還提供了一系列工具來解決諸如噪音、抽動、干擾和錯誤觸發等問題。

力度平衡

根據演員的個性調整面部區域的力度,平衡表情強度，以捕捉更逼真的表演，或者轉變為另一種動畫風格。

平滑濾鏡

消除由于超出跟蹤角度、頭發過度遮擋、照明不均勻及陰影等原因導致的跟蹤數據中的不良抽動（ ）。

降噪

由于抖動會給各個等級的運動追蹤帶來困擾，去噪可以有效地平滑不穩定的運動,同時不會損害性能的廣度。

抗干擾

的抗干擾功能，可以減少非必須的頭部、眉毛和嘴巴運動；有效解決跨區域干擾和觸發導致的表情混亂問題。

精確的音頻匹配

【單通道音頻同步】

與需要單獨的音頻對齊才能完全同步語音和表演的面部捕捉解決方案不同,可以一次性捕捉音頻數據和面部動畫。

無論是來自實時網絡攝像頭還是預先錄制的視頻,都可以快速生成語音同步動畫。不論源媒體的幀率設置為24、30還是,引擎都將根據源幀率持續生成音頻同步動畫。

【嘴唇和舌頭發音】

可以實現其他面部捕捉無法實現的復雜嘴唇和舌頭運動。

通過從語音中提取文本數據,可生成一個額外的 （控制唇型關鍵幀的時間軸），以實現精確的口型同步。

如果想要完全控制面部動作捕捉的細微之處,可以利用的面部鍵編輯器、面部圖層和曲線編輯器。

【多語言支持】

可以通過繞過語音轉文本的方式,將口型同步功能擴展到英語之外的其他語言。

可以通過提供其他語言的文本腳本來提高非英語語音的口型檢測和同步精度，也有免費工具可以將其他語言的音頻轉換為對應的羅馬音,來幫助口型同步。

【時間碼同步實現無損錄制】

通過時間碼同步匹配,可以根據視頻的幀率進行無損幀錄制,而不受計算機規格和性能的限制。

價格和系統要求

End