蘋果表示將向輔助功能開發(fā)者提供一個訪問頭顯主攝像頭的API

Vision Pro QQ群交流:653565822

中國AI網(wǎng) 2025年05月14日)蘋果日前預(yù)告了一項全新的Apple Vision Pro輔助功能。其中,頭顯的主攝像頭可以放大視圖中的任何元素,并可以啟用實時機(jī)器學(xué)習(xí)環(huán)境描述。例如在廚房烹飪菜肴時,設(shè)備可以放大食譜中的圖文元素。

另外,蘋果表示將向輔助功能開發(fā)者提供一個訪問頭顯主攝像頭的API。

蘋果Vision Pro輔助功能升級:開放攝像頭API+意念操控  第1張

這項全新的放大功能既適用于虛擬對象,又能支持現(xiàn)實世界物體。蘋果表示,對于存在視障問題的用戶,visionOS可以通過Apple Vision Pro先進(jìn)的攝像系統(tǒng)擴(kuò)展視覺輔助功能。隨著Zoom功能的強大升級,用戶可以使用主攝像頭放大視場中的一切,包括周圍環(huán)境。

對于VoiceOver用戶,visionOS中的實時識別使用設(shè)備的機(jī)器學(xué)習(xí)來描述周圍環(huán)境,查找對象,閱讀文檔等。對于輔助功能開發(fā)者來說,一個全新的API將允許獲批的應(yīng)用程序訪問主攝像頭,從而提供實時的、人對人的視覺解釋幫助。

值得一提的是,蘋果宣布將在visionOS、iOS和iPadOS添加一個新協(xié)議,通過“切換控制”Switch 輔助功能來支持腦機(jī)接口BCI。根據(jù)《華爾街日報》,這個協(xié)議是蘋果與Synchron合作開發(fā),而后者將率先支持所述協(xié)議,并屆時用戶將能通過意念控制Apple Vision Pro等蘋果設(shè)備。