Wonder Animation是什么

Wonder Animation 是 Autodesk 旗下 Wonder Dynamics 推出的創新 AI 技術,Wonder Animation測試版現已上線Wonder Studio。Wonder Animation基于 Video to 3D Scene 技術將視頻序列轉換成 3D 動畫場景,加速動畫電影制作。Wonder Animation能處理多剪輯和不同鏡頭的視頻,用 AI 在 3D 空間重建場景,匹配攝像機與角色及環境的相對位置和動作,實現包含所有攝像機設置和角色動畫的虛擬場景。Wonder Animation支持藝術家在保留完全創意控制的同時,將任何場景轉化為包含 CG 角色的 3D 環境,提高制作效率、降低技術門檻。

Wonder Animation  視頻序列轉換成3D動畫場景的AI解決方案 第1張Wonder Animation的主要功能視頻到3D場景轉換:將視頻序列轉換成3D動畫場景,加速動畫電影制作。多剪輯和鏡頭處理:能拍攝和編輯包含多個剪輯和不同鏡頭(如廣角、中景、特寫)的視頻序列。AI重建場景:基于AI技術在3D空間中重建場景,精確匹配攝像機與角色及環境的相對位置和動作。虛擬場景創建:創建包含攝像機設置和角色身體及面部動畫的虛擬場景。完全可編輯元素:在首選軟件(如Maya、Blender或Unreal)中完全編輯動畫、角色、環境、照明和攝像機跟蹤數據。創意控制:與依賴自動化輸出的生成式AI工具不同,Wonder Animation強調藝術家的創意控制權,支持藝術家塑造創意愿景。Wonder Animation的技術原理視頻捕捉與分析:用攝像機捕捉視頻序列,包括多個剪輯和不同鏡頭的視頻。深度學習與計算機視覺:用深度學習和計算機視覺技術,分析視頻中的動作和場景,識別角色、攝像機位置和環境元素。3D空間重建:用AI算法在3D空間中重建視頻場景,包括角色、攝像機和環境的精確位置和動作。數據匹配與同步:將重建的3D場景與原始視頻數據匹配,確保動作和場景的同步和一致性。輸出與集成:將重建的3D場景輸出為在3D軟件中編輯的格式,如Maya、Blender或Unreal Engine,便于藝術家創作和調整。云渲染技術:基于云渲染技術提高效率,釋放本地計算資源,加快動畫制作流程。Wonder Animation的項目地址項目官網:wonder-animation-video-to-3d-scene-technologyWonder Animation的應用場景動畫電影制作:在傳統的動畫電影制作中,加速角色動畫的制作流程,減少對物理動作捕捉設備的需求。視頻游戲開發:游戲開發者快速將實拍視頻轉化為游戲中的3D動畫場景,提高游戲環境和角色的真實感。虛擬制作:在影視制作中,創建虛擬背景和環境,讓演員在綠幕或LED墻前表演時,能實時看到自己與虛擬環境的交互。增強現實(AR)和虛擬現實(VR):在AR和VR應用中,生成逼真的3D環境和角色,提升用戶體驗。廣告和營銷:廣告商快速制作出吸引人的3D動畫廣告,提高廣告的視覺沖擊力。