PICO 發布 Native XR SDK v3.0.0,原生 XR 開發重大更新
(中國AI網 2025年05月09日)PICO日前正式發布了PICO Native XR SDK v3.0.0,這是專為 PICO 設備原生 XR 開發打造的重要版本更新。本次更新不僅帶來了廣泛的 OpenXR 擴展支持,而且首次引入了 SecureMR —— 一個面向混合現實場景理解且具有隱私保護的 AI 開發框架。?
通過 SDK v3.0.0,開發者將獲得從渲染、追蹤到設備端場景理解等強大功能,同時延續了 PICO 致力于構建開放、注重隱私的 XR 開發生態的承諾。?
PICO的荊可和趙珈彬專門撰文進行了介紹:

?
OpenXR 1.1 支持與核心特性?
SDK 3.0.0 彰顯了 PICO 對 OpenXR 標準的堅定支持,并完全兼容 OpenXR 1.1。PICO XR Runtime 現已無縫集成官方 Khronos OpenXR Loader,開發者無需再單獨下載 PICO 專屬 SDK,即可直接使用標準 OpenXR SDK 進行開發。?
這是邁向行業互通性的重要一步,體現了我們持續踐行開放標準和傾聽開發者反饋的承諾。本次發布中,PICO Neo3 系列與 PICO 4 系列(包括 PICO 4 Ultra MR 設備)均獲得了大量新增 OpenXR 擴展能力 —— 包括 OpenXR 生態內的公共擴展與 PICO 專屬擴展 —— 解鎖更高級的設備能力,幫助開發者構建更具沉浸感、高性能、隱私友好的混合現實應用。?
?
SDK 3.0.0 中新增的 OpenXR 擴展?
以下是本次 SDK 中新增擴展的完整列表,包括擴展名稱、分類與支持設備:?
?

注:眼動交互功能僅在具備眼動追蹤硬件的設備上可用(如 Neo3 Pro Eye、PICO 4 Enterprise)。XR_EXT_overlay 擴展當前已在 PICO 4 Ultra 啟用,Neo3 / 標準版 PICO 4 的支持計劃將在后續系統更新中加入。?
借助 Native SDK,公共 OpenXR 擴展現已支持在 PICO 頭顯上運行,使跨平臺 XR 應用更易適配。同時,PICO 也引入了若干專屬擴展(標注為 PICO Only),以釋放更多設備潛力。開發者可自由組合使用公共與專屬擴展,打造更豐富的 XR 應用體驗。所有擴展接口均已在 PICO OpenXR SDK 文檔中詳細說明,方便集成使用。?
?
使用 PICO Loader 簡化開發流程?
SDK 3.0.0 的另一項重點提升是引入對官方 OpenXR Loader 的兼容支持。現在,只要使用 PICO OS 5.9 及以上版本并集成 SDK 3.0.0,PICO Runtime 即可與 Khronos 提供的 Android 版本 OpenXR Loader 協同工作,進一步簡化原生開發流程。?
?
這對開發者意味著什么??
你無需再使用 PICO 專屬 Loader 或額外下載 SDK 包。只需使用標準 Khronos OpenXR Loader,并引入 PICO 提供的擴展頭文件和庫即可。新版 PICO Loader 可確保你的應用正確找到并初始化 PICO OpenXR Runtime,同時通過標準 OpenXR 機制暴露 PICO 的定制擴展。?
這一變更讓代碼更具可移植性,跨平臺開發更高效——你的 OpenXR 應用幾乎無需修改即可運行在 PICO 設備上。同時也便于你持續采用 OpenXR 的新特性。PICO 始終是 OpenXR 生態的積極貢獻者,而 SDK 3.0.0 對 Loader 的支持,正是我們為開發者打造統一 XR 開發體驗的重要體現。?
歡迎查閱我們的《官方文檔,了解 Loader 配置步驟及如何啟用 PICO 擴展接口。?
?
SecureMR:隱私保護的混合現實 AI 框架?
SDK 3.0.0 的另一項核心特性是 SecureMR,這是一個集成式框架,用于開發注重隱私的混合現實場景理解應用。SecureMR 通過 XR_PICO_secureMR 擴展及相關 API 提供,允許開發者在設備端進行場景理解和計算機視覺任務,而無需暴露原始攝像頭數據。?
換句話說,你的應用可以通過設備內運行的 AI 流水線獲取用戶真實環境的洞察(如檢測表面、識別物體或手勢),而無需訪問原始圖像。?
?
SecureMR 的工作原理:?
與其將攝像頭畫面傳給應用程序,SecureMR 會在設備的 DSP/NPU 上以隔離方式運行已訓練的 AI 模型。這些模型可訪問 RGB 和深度傳感器數據,但只會將處理后的結果(如語義標簽、空間網格或物體位置)返回給應用程序。這一設計實現了對環境的深入理解,同時保障用戶隱私 —— 原始圖像永遠不會離開受保護的處理環境。?
例如,開發者可使用 SecureMR 實現應用對房間中家具的識別、或進行遮擋檢測而無需操作任何原始視頻數據。這將為混合現實應用帶來新的體驗可能,如智能遮擋、避障導航、環境感知交互等,且完全在隱私保護前提下實現。?
SecureMR 是 SDK 3.0.0 的核心組成部分,體現了 PICO 對混合現實場景下隱私與安全的重視。?
我們建議開發者閱讀 SecureMR 專題文章,了解詳細原理及典型用例。該博文包含如何開始使用 SecureMR、模型部署工具以及典型 AI 任務的示例說明。?
此外,文檔中還提供了 SecureMR 開發指南和示例項目,幫助開發者快速構建具備內建隱私保護的 MR 應用。?
如需實際上手,可查閱《創建你的首個原生 SecureMR 應用程序》教程,該教程將引導你使用 SecureMR API 構建一個 MR 場景理解 Demo。?
SecureMR 目前支持運行 SDK 3.0.0 且系統已更新的 PICO 4 系列設備。?
?
SDK 3.0.0 已知問題?
如同所有大型更新,SDK 3.0.0 存在一些我們正在修復的已知問題:?
當前版本的身體追蹤 API 存在問題:XrBodyJointAccelerationPICO 中的 accelerationFlags 和 XrBodyJointVelocityPICO 中的 velocityFlags 返回的數據無效(即標志值無法正確表示當前加速度或速度狀態)。?
該問題影響所有試圖通過 PICO 身體追蹤擴展讀取加速度或速度標志的應用程序。?
我們的工程團隊已定位問題根源,并正在積極修復。此問題預計將在下一次 SDK 補丁更新中解決。?
值得注意的是:身體關節的位置和旋轉值不受影響,僅標志字段異常。?
我們對由此帶來的不便表示歉意,并建議開發者在此版本中避免依賴上述 flag 字段。請留意后續版本更新以獲取修復。?
?
意見反饋與支持渠道?
技術問題(SDK 使用、游戲/應用開發相關):?請使用開發者網站右下角的 LLM 智能助手,或提交支持工單,或通過郵箱 developer@support.picoxr.com 聯系開發支持團隊。?
PICO Developer Center (PDC) 使用問題:? 請參考 PDC 故障排查文檔。如問題仍未解決,可在 PDC 客戶端 PC 軟件的“反饋”頁提交問題報告并上傳日志,我們的工程團隊將進行跟進。?
非技術類問題(如商務合作、應用上傳、審核狀態、平臺使用等):?請使用開發者平臺網頁右下角的“聯系我們”功能。?
企業設備與行業方案相關支持(PICO 4 Ultra Enterprise、PICO 4 Enterprise、Neo 3 Pro/Eye、G3、G2 4K 等):?請聯系企業技術支持團隊:pico-business-techsupport@bytedance.com,獲取專業支持。?

