央美攜手火山引擎、PICO打造會“動”的藝術世界
日前，一場別開生面的元宇宙藝術盛宴在中央美術學院亮相。戴上 VR 設備，眼前的油畫突然“立體”起來，人物仿佛走出畫布，背景的山水也有了真實的空間層次。
在這場名為“逐光而行”的全球首 hi個應用 AI+VR 的虛擬畢業展中，中央美術學院攜手火山引擎、PICO，通過 AI 技術聯手打造了一個會“動”的藝術世界，讓畢業作品在數字空間里綻放出別樣光彩。
火山引擎三維視頻負責人焦少慧表示，通過運用理解模型對美院同藝術作品的視覺畫面、文本描述以及空間等深度信息進行分析、二次創作，讓觀眾以更加立體、身臨其境地觀看畢業展品。
從2D到3D，讓“躍然紙上”成為現實
在傳統的畫展當中，觀眾只能盯著平面的靜態畫布充分發揮自己的空間想象，不過在這次的虛擬展覽當中，火山引擎通過創新性的二維圖片轉空間照片（2D to 3D Spatial Photo）算法方案，以及雙目立體視頻的方式讓平面藝術獲得了立體新生。
攝影作品? 2D轉3D空間照片
在中央美院畢業展的實際應用中，單目深度估計、主體分割、圖像填充網絡和視差映射渲染機制等核心模塊協同工作，所生成的空間照片實現了從靜態畫面到三維空間的有效轉換，為觀眾帶來強烈的空間臨場感和沉浸式藝術感受，拓展了藝術作品數字化展示和傳播的新可能。
傳統依賴單目深度估計或稀疏點云重建的通用算法，在處理藝術內容時，很容易出現幾何失真、結構不清或風格偏離等問題，無法滿足藝術品高保真還原的需求。
針對這一痛點，火山引擎設計了基于“空間分層+智能填充”的技術框架，先分析各個元素的前后層次，再為被擋住的部分“補畫”，嚴格遵循原作的筆觸、色彩風格等藝術特征，確保填充區域與原作無縫融合。
最后，通過精確的視差映射渲染機制，將處理后的分層內容合成為具有真實空間感的三維呈現。
微動視頻，為靜態藝術注入生命律動
如果說2D 轉3D 讓畫面有了空間感，那么“微動視頻”技術則給藝術作品注入了時間維度。
藝術作品
微動視頻
通用的圖生視頻算法，對藝術畫的特殊風格和情感傳達理解有限，生成的動態效果模式化，缺乏與藝術畫本身的深度融合。
火山引擎所提供的解決方案，采用新型風格解析再融合的視頻生成技術框架，引入風格解析模塊提取藝術風格錨點，通過“更懂”藝術的風格條件注入，實現藝術風格在視頻序列中的有效滲透，解決了通用算法中“首幀風格強烈、后續幀風格衰減”的問題，提升了藝術風格一致性。
該算法針對藝術畫數據集專項訓練，通過多模態特征融合與風格解析模塊，生成時序連貫且風格統一的動態序列，完成對藝術作品時空維度的二次創作。
三維生成與重建，構建虛實交融的藝術宇宙
除了平面作品，雕塑、裝置等立體藝術品在虛擬展中也有了新的打開方式。通過火山引擎自研的3D 生成大模型 Beaver3D，實現了雕塑、裝置等立體藝術作品的數字化展示，在虛擬與現實之間構建了全新的藝術表達維度。
該模型支持用戶通過文本、圖像、點云等多種模態輸入條件，生成具備復雜細節和精準拓撲結構的高保真幾何模型，適配多種網格類型，還支持4K 高清紋理和 PBR 材質生成，能夠精準還原金屬雕塑的銹蝕痕跡、木雕作品的年輪細節以及裝置藝術的光影效果。
Beaver3D - 幾何生成框架圖
Beaver3D - 紋理生成框架圖
Beaver3D 功能展示
此外，三維重建技術則解決了靜態藝術作品數字化存檔與展示中空間信息割裂的問題?；鹕揭娑嗝襟w實驗室使用幾何重建大模型，僅需普通相機拍攝的幾張多角度照片，就能通過深度學習算法還原物體的幾何結構、表面材質與空間光影。
與傳統3D 重建技術不同，該技術采用輕量化的前饋方案，結合 Transformer 架構和大規模3D 素材與場景數據訓練，具備強大的泛化能力，能高精度、高效率地完成對各種材質和細節的藝術品重建，實現從平面記錄到立體復活的跨越。
齊白石雕像重建結果
蔡元培雕像重建結果
本次中央美術學院“逐光而行”虛擬畢業展，不僅是科技與藝術深度融合的典范，更是一次面向未來的展覽模式革命。 它借助 AI 與 VR 的強大力量，不僅完整呈現了畢業生們的藝術才華，更拓展了藝術表達的邊界。
未來火山引擎還將繼續深度挖掘藝術與科技的融合，讓科技成為藝術表達的“延伸畫筆”，推動更多虛實融合的創新實踐落地。
