基于遮擋剔除的圖像信號處理

中國AI網 2025年05月27日)對于XR頭顯,現有的圖像渲染技術通常采用遮擋剔除技術來確定XR環境中存在的虛擬對象從camera角度來看極有可能可見,并僅將與所述虛擬對象相關的信息傳達給處理器以用于合成目的。

但由于有的虛擬對象會遮擋XR環境中存在的真實對象,所以即便不在最終的XR圖像可見,與真實對象對應的像素圖像數據依然會由圖像傳感器讀出,然后圖像數據由處理器處理。這是一個非常耗時和計算密集的過程。

在一份專利申請中,Varjo提出了一種基于基于遮擋剔除的圖像信號處理方法,跳過光敏表面區域的像素數據,以完全省略所述區域的圖像信號處理,從而以高計算效率和時間效率的方式生成XR圖像。

在一個實施例中,包括數據存儲庫和服務器的系統配置為:從數據存儲庫訪問虛擬環境的第一3D模型和現實世界環境的第二3D模型;組合所述第一3D模型和第二3D模型,以生成XR環境的組合3D模型;使用組合的3D模型進行遮擋剔除,從一個視點的角度識別一組遮擋XR環境中真實物體的虛擬對象;并向顯示設備發送表示所述虛擬對象集的VR圖像和指示從視點角度與所述虛擬對象集遮擋的真實對象對應的視場部分的信息。

......(全文 2708 字,剩余 2254 字)

映維網會員請登錄SCC板塊閱讀完整文章
PICO公司員工可聯系映維網免費獲取權限