MR+足球訓(xùn)練

中國(guó)AI網(wǎng) 2025年05月05日)隨著Meta正式開(kāi)放Passthrough Camera API,社區(qū)正在進(jìn)行一系列的用例實(shí)驗(yàn)。日前,一位開(kāi)發(fā)者在Reddit分享了所述API的實(shí)驗(yàn)。使用對(duì)象識(shí)別和追蹤技術(shù),一個(gè)真實(shí)的物理足球可以結(jié)合數(shù)字圖形目標(biāo),從而支持足球訓(xùn)練或足球小游戲等各種用例。

上面這個(gè)簡(jiǎn)短的演示視頻展示了具體的原理。可以看到,數(shù)字目標(biāo)可以動(dòng)態(tài)投射到真實(shí)的墻壁,然后你的任務(wù)是將球踢中目標(biāo),成功后,目標(biāo)就會(huì)奔潰分裂。這樣的設(shè)置可以幫助足球員訓(xùn)練精準(zhǔn)度,提高過(guò)程的趣味性。

實(shí)際上,我們從視頻中可以看到,Passthrough Camera API的質(zhì)量相當(dāng)高。這個(gè)演示突出了Meta Quest 3的攝像頭系統(tǒng)是如何將物理和數(shù)字橋接起來(lái),包括對(duì)象識(shí)別,對(duì)象追蹤,對(duì)象渲染等技術(shù),從而將物理和數(shù)字無(wú)縫地集成到XR體驗(yàn)之中。

Passthrough Camera API實(shí)驗(yàn):MR+足球訓(xùn)練  第1張

當(dāng)然,這個(gè)API依然屬于實(shí)驗(yàn)性質(zhì)。不過(guò),開(kāi)發(fā)者已經(jīng)在進(jìn)行各種各樣的測(cè)試。

需要注意的是,目前它只支持Meta Quest 3和3S。每個(gè)攝像頭每秒可以傳送30幀,最高可達(dá)1280 × 960像素。然而,由于延遲在40到60毫秒之間,追蹤快速移動(dòng)的對(duì)象或精細(xì)的細(xì)節(jié)可能依然存在一定的挑戰(zhàn)。