查看引用/信息源請點擊:uploadvr
AI可在數秒內將現實物體帶入VR
(中國AI網 2025年11月25日)借助Meta全新的SAM 3D物體模型,AI可在數秒內將現實世界中的物體轉化為3D資產帶入VR。
多年來,利用傳統的攝影測量技術,通過從不同角度拍攝物體的數十張圖像來生成其3D模型已經成為可能。例如,Epic的RealityScan需要大約15到45分鐘的云端處理時間,而蘋果為其iPhone Pro機型提供的設備端Object Capture API則需要大約5分鐘。
但在過去一年左右的時間里,先進的AI模型不斷涌現,它們能夠在幾秒鐘內從單張圖像生成3D資產。盡管其質量尚無法與攝影測量技術相媲美,但隨著每個新模型的發布,生成質量正在穩步提高,這反映了AI領域的整體快速進步。

關于這項技術如何應用于VR的一個例子是,Takahiro “Poly” Horikawa在SideQuest發布了一款Quest應用,通過手動追蹤功能,你能夠框選特定的現實世界物體并進行拍照。這背后利用了Meta的透視攝像頭API。隨后,這張圖像提供給Stability AI并基于TripoSR模型的Stable Fast3DAPI進行處理,生成的3D模型會作為虛擬物體出現在圖像拍攝位置的旁邊。
然而,TripoSR模型推出至今已近兩年。數天前,Meta發布了SAM 3D物體模型,這是從單張圖像生成3D資產的全新尖端模型。
你可以在Meta AI Demos頁面通過網頁瀏覽器免費測試SAM 3D物體模型。只需提供一張圖像,你就可以選擇想要轉換為3D模型的物體。幾秒鐘后,你將看到一個3D視圖,并可以用鼠標或手指環繞查看該物體。
Meta的這個網站并非為移動設備屏幕設計,所以你最好使用PC、筆記本電腦、平板電腦或VR頭顯。另外請注意,模型僅針對無生命物體設計,不適用于人物或動物。
這個免費的公開演示版不允許你下載3D模型。但SAM 3D物體模型是開源的,可在GitHub和Hugging Face獲取。這意味著開發者應該能夠將其部署在提供GPU的云計算平臺,并用它來提供類似EchoTheReality演示的體驗,但輸出質量更高,因為本質上就是將現實物體拉入VR世界。
Meta尚未宣布將所述功能添加到Horizon Worlds的計劃,但這似乎是未來順理成章的一步,可與其剛剛推出的Hyperscape世界形成互補。

