Apple 已經發布了 iOS18.2的第一個開發者測試版,其中包含許多新的 Apple Intelligence 功能。新功能之一是期待已久的與 ChatGPT 的集成,借助此功能,您現在可以向 Siri 詢問有關您在設備屏幕上看到的內容的詳細信息。

通過將 ChatGPT 集成到 Siri,Apple 的虛擬助手將使用 OpenAI 平臺回答復雜問題。但是,它還可以讀取 iPhone、iPad 或 Mac 屏幕上的內容。例如,如果您正在觀看視頻或在 Instagram 上查看某人的照片,您可以問“這是哪里?”或“那張照片上的建筑物是什么?”之類的問題。

來源:9to5mac

Siri 會截取屏幕截圖并將其上傳到 ChatGPT,后者能夠理解上下文并使用其數據庫提供答案。當然,出于隱私原因,Siri 在截取設備屏幕截圖并將其發送到 ChatGPT 之前始終會征求您的許可。

對于沒有 iPhone16的人來說,該功能尤其有趣,因為 iPhone16是迄今為止唯一一款獲得 Visual Intelligence 的設備。借助此功能,用戶可以按下“相機控制”來獲取有關他們在相機上看到的內容的信息。Visual Intelligence 使用 Apple Intelligence、ChatGPT 和 Google 來提供答案。

蘋果還在利用 Apple Intelligence 語言模型開發自己的屏幕感知功能。不過,該功能將隨 iOS18的另一次更新一起推出——可能是明年。一旦該功能可用,Siri 將理解上下文并根據屏幕上的內容采取行動——所有處理都在設備上進行。

來源:9to5mac

除了 ChatGPT 集成之外,iOS18.2還附帶了 Image Playground、Genmoji 和重新設計的郵件應用程序。

目前, iOS18.2測試版僅適用于與 Apple Intelligence 兼容的設備。這意味著 iPhone15Pro 或更高版本 和 M1iPad 或更高版本。當然,此更新最終也將適用于其他設備。

蘋果此前曾暗示 iOS18.2將于12月向公眾發布。iOS18.1將于下周發布,其中包含蘋果智能寫作工具以及通知和文本摘要。