CMAvatar3.0首發(fā)！青瞳視覺攜原力重新定義AI動捕
在數(shù)字娛樂內(nèi)容創(chuàng)作領域，動作捕捉技術已成為影視、游戲及動畫制作的核心生產(chǎn)力工具。
近年來，這一領域內(nèi)已涌現(xiàn)出眾多現(xiàn)象級作品，背后離不開動捕技術的強力支撐，無論是通過青瞳視覺動作捕捉技術賦能的國產(chǎn)3A大作《影之刃零》，還是助力原力打造的國內(nèi)首部采用"真人動捕+實時渲染"技術的動畫作品《凡人修仙傳》，這一技術作為創(chuàng)意產(chǎn)業(yè)的核心支撐，既是效率加速器，更是連接科技與創(chuàng)意的關鍵橋梁。
但長久以來，從數(shù)據(jù)采集到最終成片的動捕過程中，耗時以天計的解算流程、無法避免的人工修正、動捕過程中由于遮擋錯失的標記點信息等痛點，像枷鎖般禁錮著動捕效率。
去年5月，原力推出自研的基于神經(jīng)網(wǎng)絡的動作捕捉解算系統(tǒng)DeepMocap，以海量的實際生產(chǎn)動作捕捉數(shù)據(jù)為基礎，并對動捕數(shù)據(jù)進行了符合先驗分布的數(shù)據(jù)增強作為訓練數(shù)據(jù)集，由此實現(xiàn)在不完美甚至錯誤marker標記點信息下解算出正確的骨骼動畫數(shù)據(jù)的效果，大幅提升動捕解算效率，減少人工修正成本。時隔一年，原力將該技術進一步打磨升級，發(fā)布全新的Kenitiq AI解算器，顛覆性提升行業(yè)效率、解決多項傳統(tǒng)動作捕捉流程痛點！
CMAvatar全新升級！動捕不再是“慢工出細活”
全新升級版CMAvatar3.0正式發(fā)布！青瞳視覺再次與原力展開深度合作，通過把原力數(shù)字自研的Kinetiq AI解算器獨家集成到青瞳的CMAvatar動捕系統(tǒng)中，極大地提升了動捕解算效率，減少人工修正成本，解決多項傳統(tǒng)動作捕捉流程痛點，讓使用者的動捕體驗與動捕效率大大提升。
相較于CMAvatar2.0動捕系統(tǒng)，Kinetiq AI解算器擁有諸多優(yōu)勢：
1.更 “聰明” ：標記點掉了、被擋住了、標錯位置了……傳統(tǒng)解算系統(tǒng)應付不了的，Kinetiq都能解決；
2.更 “省事” ：集成的Kinetiq擁有“超高智能”，對骨骼動畫數(shù)據(jù)的解算又快又準，幾乎無需人工再次矯正；
3.更 “靈活” ：Kinetiq擁有2種集成模式和2種解算模式，可以靈活適配不同的使用情況和需求；
4. ……
（開啟Kinetiq解算器前后效果對比）
青瞳視覺&原力數(shù)字科技
強強聯(lián)手，打造頂尖動捕數(shù)據(jù)處理流程
作為全球光學動捕領域頭部服務商，憑借深厚的技術積累和豐富的行業(yè)經(jīng)驗，青瞳視覺攜手行業(yè)領軍者原力數(shù)字科技，深度合作共同探索光學動作捕捉技術的新范式。經(jīng)過兩年多的不懈努力與技術攻堅，成功將Kinetiq AI解算器無縫集成至CMAvatar 3.0，不僅延續(xù)了高精度動捕數(shù)據(jù)處理的優(yōu)勢，更突破性地解決了傳統(tǒng)流程中的多項痛點，為用戶帶來前所未有的動捕體驗，大幅提升動捕效率，為行業(yè)樹立了新的標桿。
AI 解算器 Kinetiq 具備2種可靈活適配的集成模式，為不同動捕場景打造定制化解決方案。
模式一：從Marker點云到骨骼數(shù)據(jù)的全流程解算|專攻復雜場景
針對標記點易混淆或遮擋的復雜場景， Kinetiq AI 解算器可以提供強大的全流程自動化處理模式。
在青瞳視覺的光學攝像頭快速采集并重建動捕演員身上的原始 未標注3D 標記點后，無需人工操作，藝術家可以直接將這些未處理的標記點輸入 Kinetiq AI解算器。解算器會依次完成兩項核心任務：
先通過神經(jīng)網(wǎng)絡化身 “智能標注員”，自動識別并標注每個 3D 點對應的身體部位（如判斷某個點對應的是 “左手腕” 還是 “右膝蓋”），以更高效的AI計算替代傳統(tǒng)流程中耗時的人工標注環(huán)節(jié)；隨后，基于智能標注過的標記點，解算骨骼關節(jié)的旋轉、位移數(shù)據(jù)等，最終輸出流暢自然的動作動畫。
采用此模式的CMAvatar 3.0優(yōu)勢在于，從數(shù)據(jù)采集到動作生成，全程幾乎無需人工干預，即使在武打戲肢體交疊、舞蹈高速旋轉等極端場景下，也能憑借 AI 的智能處理能力穩(wěn)定輸出可用數(shù)據(jù)。
（ 被遮擋情況下Kinetiq AI解算器仍能準確解算）
模式二：比傳統(tǒng)優(yōu)化算法更加準確的骨骼解算|分工增速提效
當經(jīng)典動捕流程提供高質(zhì)量的標記點識別結果時，AI 解算器 Kinetiq 則化身 “高效解算引擎”，專注于骨骼運動學解算的核心環(huán)節(jié)。
在經(jīng)典動捕流程完成對3D標記點的預標注后，藝術家即可將標注后的數(shù)據(jù)輸入AI解算器 Kinetiq 。Kinetiq 解算器對于標注數(shù)據(jù)的深度理解與優(yōu)化能力，讓它不僅可以接受自身處理的標記數(shù)據(jù)，也能充分適應不同數(shù)據(jù)來源的標記，大大增強了實際應用中的普適性和可操作性。
此時解算器只需專注于骨骼運動學解算這一核心環(huán)節(jié)，可以集中算力，全力運行，將計算資源集中于關節(jié)旋轉、位移數(shù)據(jù)的精準解算。
這種分工協(xié)作、專注單一流程的模式大幅降低了AI解算器的計算負擔，讓解算效率進一步提升，尤其適合單人簡單動作捕捉或?qū)崟r性要求極高的場景。
注：采用此方案時，需要確保標記點標注的高度準確性，避免將錯誤傳遞至后續(xù)解算。
（Kinetiq 實時解算，無懼復雜場景及遮擋）
通過 “全流程智能” 與 “精準分工” 的有機結合，集成了Kinetiq AI解算器的CMAvatar3.0成功構建起幾乎可覆蓋全應用場景的動捕數(shù)據(jù)處理流程。兩種集成模式相輔相成，充分考慮落地情況，能夠更合理地應對實際生產(chǎn)過程中的不同情況，共同打造出更高智能、高效率、高質(zhì)量的行業(yè)領先的動捕實時解算工具。
擺脫傳統(tǒng)動捕痛點
顛覆突破，Kinetiq AI解算器打造行業(yè)新標
為了更好地適應不同實踐情況，Kinetiq 解算器還提供了兩套專業(yè)解算模式：實時解算模式和后處理解算模式。
實時解算模式在marker標記點丟失或者錯誤標注時，仍可以解算出合理的骨骼位置，方便拍攝人員查看實時效果。且隨著訓練數(shù)據(jù)集的不斷擴大，神經(jīng)網(wǎng)絡能夠持續(xù)迭代優(yōu)化最終的解算效果。
后處理解算模式則能夠充分利用前后幀數(shù)據(jù)信息，進一步提升解算結果的準確性，大幅減少動捕拍攝人員需要逐幀修復marker標記點數(shù)據(jù)來生成合理骨骼動畫數(shù)據(jù)的工作量。
[骨骼解算結果對比]
CMAvatar2.0解算結果中存在大量錯誤標記點（紅色部分），動作出現(xiàn)變形、移位。
集成了Kinetiq AI解算器的CMAvatar3.0則能完美解算出正確動畫，無需后期修復。
可以看出，相較CMAvatar2.0，Kinetiq AI解算器加持的CMAvatar3.0能夠很好地處理marker標記點不準確甚至錯誤的情況。
比如動捕演員在做復雜動作或多人交互表演時，標記點幾乎不可避免地貼近甚至在鏡頭里“重合”或被遮擋，沒有配備“AI大腦”的傳統(tǒng)流程無法應付這類場景，只能生成凝滯甚至亂晃的錯誤解算動畫，必須依靠人力進行修復和矯正。
而CMAvatar3.0憑借Kinetiq AI解算器強大的解算機制，則能通過“智慧”完美地解算出正確的骨骼動畫數(shù)據(jù)，讓傳統(tǒng)的動捕解算流程從“系統(tǒng)輔助，依賴人工”徹底顛覆，走向“AI 全自動解算”的新時代。
除了減少人工標記和校準時間，提升解算效率，Kinetiq AI解算器在數(shù)據(jù)處理流程、環(huán)境適應性、遮擋處理等方面均有不同程度的提升，解決傳統(tǒng)流程中多項痛點。
無論是效率、質(zhì)量還是穩(wěn)定性，Kinetiq AI解算器都為動捕相關的生產(chǎn)需求提供了更加完美的選擇。
[CMAvatar2.0 VS 集成Kinetiq AI解算器的CMAvatar3.0]
●數(shù)據(jù)處理流程：CMAvatar2.0數(shù)據(jù)依賴人工處理，藝術家要花費大量時間進行校準、標記點追蹤和后期手動修復；得益于Kinetiq AI解算器神經(jīng)網(wǎng)絡的端到端處理能力，CMAvatar3.0可以實現(xiàn)自動化解算，既節(jié)省人工成本，也能節(jié)省大量校準時間。
●環(huán)境適應性：CMAvatar2.0對光照已有優(yōu)秀的抗干擾處理能力，但在特殊場景下仍可能會出現(xiàn)部分干擾情況；而集成Kinetiq AI解算器的CMAvatar3.0大幅提升抗光照干擾能力，能夠充分適應各種復雜環(huán)境。
●遮擋處理：CMAvatar2.0的標記點一旦遇到遮擋，會有概率出現(xiàn)丟失數(shù)據(jù)的情況，需要花費大量的人力和時間進行人工補幀；而 Kinetiq AI解算器可以通過神經(jīng)網(wǎng)絡預測遮擋部位運動，讓CMAvatar3.0魯棒性顯著提升。
注：魯棒性，即robustness 的音譯，總體來說其可以用于反映一個系統(tǒng)在面臨著內(nèi)部結構或外部環(huán)境的改變時也能夠維持其功能穩(wěn)定運行的能力。
（kinetiq解算器與非AI解算器效果對比-撞墻測試）
（kinetiq解算器與非AI解算器效果對比-交纏測試）
將骨骼解算結果重疊對比，我們可以很直觀地看到，集成了 Kinetiq 解算器的CMAvatar3.0能準確地解算出演員被遮擋或身體重疊時的動作數(shù)據(jù)，而CMAvatar2.0則會讓演員的動作“到處亂飛”，增加了大量的人工修正成本。
從依賴人工修正繁瑣數(shù)據(jù)的CMAvatar2.0，到AI自主解析實現(xiàn)全流程智能化的升級版系統(tǒng)，集成了 Kinetiq AI 解算器的CMAvatar3.0不僅為動捕產(chǎn)業(yè)效率按下"快進鍵"，更突破了傳統(tǒng)應用邊界。此外，對于數(shù)字娛樂領域內(nèi)經(jīng)常出現(xiàn)的手指精細動作、四足動物以及多剛體型復雜道具的捕捉難題，CMAvatar3.0亦能為藝術家?guī)砀r、省力、省成本的暢快創(chuàng)作體驗！
除Kinetiq AI 解算器外，原力數(shù)字的黑科技還有很多，目前正在通過強化學習開發(fā)精修工具，從而實現(xiàn)專業(yè)級數(shù)據(jù)修復，智能修正動捕數(shù)據(jù)的細節(jié)瑕疵。期待未來，青瞳視覺能與原力展開更多深化合作，將更多尖端的AI技術融入到動捕創(chuàng)作流程中，讓全球創(chuàng)作者都能實現(xiàn)更智能的藝術表達。
無論是影視作品中栩栩如生的角色演繹，游戲場景中流暢自然的互動體驗，還是虛擬數(shù)字人的真實情感表達，青瞳視覺的技術創(chuàng)新正重新定義數(shù)字內(nèi)容的生命力。
除數(shù)字娛樂外，無論您是從事具身智能、工程科研，還是虛擬現(xiàn)實、生命科學、教育等領域，我們都能提供專業(yè)的全棧式定制化解決方案，如您對我們的方案或產(chǎn)品感興趣，可在【青瞳視覺】官方微信進行留言，或撥打電話15214312374（微信同號）進行聯(lián)系，獲取專屬方案。青瞳視覺官網(wǎng) www.chingmu.com。
