主題指南
空間運算
運用空間介面、RealityKit、沉浸式媒體、共享體驗與 3D 內容，為 visionOS 設計及建構產品。
空間運算結合介面設計、算繪、媒體、輸入與臨場感。這些 Session 說明如何從視窗式 App 邁向能理解空間的體驗，同時兼顧舒適度、清晰度與效能。
- Session
- 65
- 2026
- 16
- 2025
- 19
- 2024
- 30
這個主題涵蓋的內容
- visionOS 介面與互動設計
- RealityKit、3D 內容與算繪
- 沉浸式媒體與共享體驗
WWDC 2026
16 場 Session- HTML Model Element 入門了解 model 元素如何為網站帶來互動式 3D 內容，現已支援 iOS、iPadOS、macOS 和 visionOS。探索建立及最佳化 3D 資源的工具。認識 model 元素的功能，並了解 Web 標準如何塑造 Web 3D 的未來。
- visionOS 團體 Lab線上加入我們，與 Apple 工程師和設計師一同深入探索 WWDC26，提出問題、取得建議，並參與本週 visionOS 重大發表的討論。活動以英語進行。
- 使用 Reality Composer Pro 3 強化空間工作流程透過 Reality Composer Pro 強大的圖形化工具組，完全在其中建構豐富的互動功能與驚豔的視覺效果。了解如何使用 Shader Graph 製作動態材質、透過 Animation Graph 混合骨架動畫，以及使用 Compute Graph 模擬粒子效果。更進一步使用 Script Graph 串接應用程式互動功能、以 Sequencer 協調場景事件，並透過 Behavior Trees…
- 使用 Reality Composer Pro 3 更快反覆調整空間場景探索 Reality Composer Pro 3 用於建構空間體驗的強大全新功能。瞭解如何直接在編輯器內，為沉浸式場景加入內容、視覺效果、光線和互動功能，全程不必離開編輯器。探索如何使用編輯器內建的 AI 輔助功能快速反覆調整。
- 使用 Reality Composer Pro 3 設計無程式碼遊戲探索如何在 Reality Composer Pro 3 中使用 ScriptGraph，為應用程式和遊戲製作無程式碼 3D 內容。瞭解如何運用視覺化節點建構動畫、創造互動時刻，並加入 SwiftUI 元素，為體驗增添對話框和其他 UI。
- 使用 Xcode 擴充 Reality Composer Pro 3 功能探索 Reality Composer Pro 3 如何協助你建構更大型、更具企圖心的空間專案。瞭解如何建立專案專用外掛程式，以編輯自訂元件、執行自訂系統及建構自己的 ScriptGraph 節點，完整掌控空間內容製作工作流程。
- 使用 visionOS 27 建構新一代體驗使用 visionOS 27 的新功能，建構新一代應用程式、遊戲和空間體驗。探索在 visionOS 上建構體驗的不同途徑，包括使用 Apple 原生工具和框架、從 Mac 或 PC 串流沉浸式內容、運用第三方引擎，或移植現有的 iOS 應用程式。探索如何運用 3D 內容製作、沉浸式媒體和物件追蹤的最新進展，提升空間運算專案。
- 使用注視點串流將沉浸式內容帶入 visionOS瞭解注視點串流如何將遠端算繪的場景以完整擬真度傳送至 Apple Vision Pro。探索這個框架如何以完全無線的方式結合原生 visionOS 功能與第三方串流技術，並透過 OpenXR 場景和 NVIDIA CloudXR 示範。瞭解 FoveatedStreaming 框架、NVIDIA CloudXR SDK 整合，以及動態注視點串流如何在保護隱私的同時帶來效益。
- 在 visionOS 中協作處理結構化 3D 模型瞭解如何在 visionOS 中讓結構化 3D 模型生動呈現。我們將介紹 USDZ 準備流程、示範如何操控階層式組件中的個別實體，並使用剖面平面檢視模型的內部元件。為 Apple Vision Pro 上的設計審查與協作體驗，製作令人驚豔的爆炸圖動畫。
- 探索 RealityKit 的最新進展探索 RealityKit 的最新進展，讓應用程式和遊戲比以往更具沉浸感和真實感。探索互動式布料模擬、NavMesh 路徑搜尋、混合實境照明，以及可自訂的殘響網格等強大全新功能，增強空間音訊體驗。透過改良的陰影、角色算繪增強功能和高斯潑濺支援，提升視覺擬真度。
- 探索 USDKit 和 OpenUSD 的新功能深入瞭解 Apple 平台對 Universal Scene Description (USD) 支援的最新進展，包括以 Swift 為基礎的 USDKit、全新的 Spatial Preview API，以及強化的空間 Web 功能。探索 OpenUSD 標準的最新更新如何加入輔助使用、高斯潑濺和壓縮幾何支援。我們也會帶你瞭解 Mac「預覽程式」中擴充的 USD…
- 探索 visionOS 中的沉浸式網站環境使用全新的 JavaScript Immersive API，將網站訪客帶入 Apple Vision Pro 的虛擬環境。探索如何從行內模型元素要求沉浸式轉場、使用影片停駐等功能建立引人投入的沉浸式體驗，並最佳化豐富實際尺度體驗的效能，只要在網站上執行幾行程式碼即可完成。
- 探索 visionOS 物件追蹤的增強功能瞭解 visionOS 如何推進物件追蹤和空間配件輸入。探索追蹤移動中和手持物件的新方式，連結實體與數位世界。認識全新支援的空間配件類別，以及建構自訂配件所需的項目，在應用程式中實現獨特的互動模式。
- 為 Apple Immersive Video 建構現場製作工具深入現場 Apple Immersive Video 製作的幕後。探索如何依循 SMPTE 2110 標準，封裝沉浸式影片、空間音訊與場景中繼資料，以便透過 IP 網路傳輸。運用 Apple 的 Immersive Media Support、Video Toolbox 與 AVFoundation 框架，支援即時 Apple Immersive Video 工作流程。若要充分掌握本 Session…
- 為 visionOS 應用程式和空間 Web 設計沉浸式環境了解如何為應用程式、網站和 SharePlay 體驗建立逼真的 visionOS 環境。探索讓環境呈現真正沉浸感的設計原則，並了解如何建立或擷取參考素材、準備高精細度 CG 資源，以及製作動態和光線等即時效果。
- 認識 Spatial Preview 框架瞭解全新的 Spatial Preview 框架如何將 Mac 上的內容直接帶入 visionOS。探索如何透過即時同步和跨平台雙向編輯，建構動態工作流程。瞭解 SpatialPreview API、裝置探索、2D 與 3D Session 整合，以及全新的 Quick Look 功能，提升 Mac 應用程式的空間體驗。
WWDC 2025
19 場 Session- RealityKit 最新功能運用 RealityKit 新功能發揮創意，為 iOS、iPadOS、macOS、tvOS 與 visionOS 打造豐富的 3D 內容。瞭解如何直接透過 RealityKit 存取 ARKit 資料。探索如何使用物件操控功能，以更自然的方式與 3D 內容互動。並透過互動式範例，認識場景理解、環境混合、實例化等多項新 API。
- SwiftUI 新功能探索 SwiftUI 新功能：以 Liquid Glass 帶來全新外觀、透過框架改進與新 instruments 提升效能、整合 Web 內容與富文字編輯，並在三維空間配置 view。
- visionOS 26 最新功能探索 visionOS 26 的精彩新功能。認識強化的立體空間 API，並瞭解如何結合 SwiftUI、RealityKit 與 ARKit 的強大功能。探索如何運用更快速的手部追蹤與空間配件輸入，打造更引人入勝的應用程式與遊戲。搶先一覽 SharePlay、Compositor Services、沉浸式媒體、空間 Web、Enterprise API 等多項更新。
- 使用 SwiftUI 在 visionOS 中設定場景探索精彩的新 API，強化 visionOS 應用程式中的視窗、立體空間與沉浸式空間。微調場景在重新啟動或鎖定位置時的行為。運用裁切邊界與吸附功能，讓立體空間適應周遭環境。從 Mac 串流沉浸式內容到 Vision Pro。以立體空間與沉浸式空間提升現有的 UIKit 應用程式。
- 在 visionOS 應用程式中支援沉浸式影片播放探索如何在 visionOS 應用程式中播放沉浸式影片。我們將介紹各種沉浸式算繪模式、檢視支援這些模式的 framework，並逐步說明如何在應用程式中算繪沉浸式影片。若想充分掌握本影片內容，建議先觀看 WWDC25 的「探索 visionOS 影片體驗」。
- 強化 App 的錄音功能使用 iOS 與 iPadOS 26 的輸入選擇器彈性選取音訊裝置、透過 AirPods 高品質錄製人聲，並以 AudioToolbox、AVFoundation 與 Cinematic 框架錄製及編輯空間音訊，包括分離語音與環境背景音。
- 探索 visionOS 影片體驗瞭解在應用程式中建立與呈現沉浸式影片體驗的不同方式。我們將探索 visionOS 26 提供的多種媒體類型，包括適用於 180°、360° 與廣視野影片的描述檔、製作及播放 Apple Immersive Video 的選項，以及 2D、3D 與空間影片的擴充功能。探索最適合你的應用程式與內容的描述檔。
- 探索 visionOS 的空間配件輸入瞭解如何將空間配件整合到應用程式中。顯示虛擬內容、與應用程式互動、在空間中追蹤配件，並取得互動資訊，在 visionOS 上提升虛擬體驗。
- 探索空間商務 App 的強化功能了解 visionOS 26 如何擴展去年的企業能力，以全新功能建立模型訓練工作流程、強化影片來源，並透過區域網路對齊座標系統，打造內部協作體驗。
- 最佳化 visionOS 的自訂環境探索如何使用程序式工具，為 visionOS 應用程式或遊戲建立精美的沉浸式環境。我們將分享建立高品質環境的基本元件，再深入探討最佳化流程。瞭解如何使用 Apple 提供的一系列 Houdini 工作流程，降低場景的多邊形數量、清理幾何圖形、封裝 UV 貼圖，並建立 USD 素材，以便匯入 Reality Composer Pro 或你選用的遊戲引擎。
- 沉浸式應用程式的 Metal 算繪最新功能探索 Compositor Services 為沉浸式應用程式的 Metal 算繪帶來的最新改進。瞭解如何加入懸停效果以突顯應用程式的互動元素，以及如何透過動態算繪品質提供更高擬真度。認識全新的漸進式沉浸樣式，並探索如何直接將 Metal 內容從 Mac 算繪到 Vision Pro，為 macOS 應用程式帶來沉浸式體驗。若想充分掌握本 Session 內容，請先觀看 WWDC23 的「探索適用於沉浸式應用程式的…
- 為 visionOS 設計 widget為 visionOS 26 設計自然融入周遭環境的 widget，加入深度並自訂空間運算材質、大小與樣式；也可調整既有 widget，或設計如真實物件般的新 widget。
- 為 visionOS 設計懸停互動探索如何為 visionOS 應用程式建立進階互動。我們將探討如何設計精彩的自訂懸停效果與動畫、避開常見錯誤、善用「注視捲動」等互動方式，以及運用持續效果打造直覺的媒體控制項。
- 相輔相成：SwiftUI 與 RealityKit探索如何在 visionOS 26 中流暢結合 SwiftUI 與 RealityKit。我們將介紹 Model3D 的改進，包括動畫與 ConfigurationCatalog 支援，並示範如何順暢轉換至 RealityView。你將瞭解如何利用 SwiftUI 動畫驅動 RealityKit 元件變更、實作互動式操控、使用新的 SwiftUI 元件提供更豐富的互動，以及從 SwiftUI 程式碼觀察…
- 瞭解 Apple Projected Media Profile深入認識 Apple Projected Media Profile (APMP)，瞭解 APMP 如何透過 Video Extended Usage 訊號，在 QuickTime 與 MP4 檔案中啟用 180º/360º 和 Wide FoV 投影。我們將說明如何使用作業系統提供的 framework 與工具，轉換、讀寫、編輯及編碼包含 APMP 的媒體。我們也會介紹 Apple Positional…
- 空間 Web 新功能探索 visionOS 26 Web 的最新空間功能：使用全新 HTML model 元素顯示行內 3D 模型、加入模型光源、互動與動畫，嵌入 360 度影片與 Apple Immersive Video，並預覽網頁自訂環境。
- 與附近的人共享 visionOS 體驗瞭解如何為同一空間中配戴 Vision Pro 的人建立共享體驗。我們會示範如何在應用程式中整合 SharePlay 並運用 ARKit、介紹為附近與 FaceTime 參與者更新的視窗共享流程，以及說明專為順暢協作設計的新 API。探索最佳做法，讓協作功能更突出、更容易被發現，並為同處一個空間的人提供引人入勝的體驗。
- 認識 Apple Immersive Video 技術探索 Apple Immersive Video 和 Apple Spatial Audio Format 技術的功能，建立身歷其境的體驗。認識全新的 ImmersiveMediaSupport 框架，它提供讀取和寫入必要中繼資料的功能，以支援 Apple Immersive Video。了解如何按照指引編碼及發佈獨立檔案中的 Apple Immersive Video 內容，以便播放或透過 HLS…
- 認識 SwiftUI 空間佈局探索使用 SwiftUI 建構空間體驗的新工具。瞭解 visionOS 上 3D SwiftUI 顯示方式的基礎、使用深度對齊自訂現有佈局，以及透過修飾器在空間中旋轉與放置顯示內容。探索如何使用空間容器，在同一個 3D 空間中對齊顯示內容，協助你打造沉浸且引人入勝的應用程式。
WWDC 2024
30 場 Session- SwiftUI 新功能使用 SwiftUI 建立各 Apple 平台 App。探索 iPadOS 標籤頁與文件外觀、視窗 API、visionOS 沉浸空間與體積控制，以及圖表、文字自訂和版面改進。
- USD 與 MaterialX 新功能探索 Apple 平台對 Universal Scene Description 與 MaterialX 的更新。了解它們如何支援 3D 內容製作與交付、簡化空間體驗工作流程，以及 RealityKit、Storm 和系統工具的相關進展。
- visionOS Quick Look 新功能改善 App 中的 visionOS 檔案預覽與編輯體驗。整合 App 內與視窗式 Quick Look、使用新 API 自訂視窗體驗，並查看 3D 模型顯示的最新改進。
- 介紹 visionOS 企業 API使用新的 visionOS 企業 API，在 Apple Vision Pro 建立可提升員工與客戶生產力的空間體驗。
- 使用 ARKit 建立更進階的空間運算體驗使用 ARKit 最新功能建立沉浸式體驗。探索房間與物件追蹤、回應環境光線變化，以及更直覺的手部追蹤和平面偵測改進。
- 使用 RealityKit 建立空間繪圖 App在建立空間繪圖 App 的過程中運用 RealityKit。整合 ARKit 與 SwiftUI，了解 RealityKit 資源，以及如何用低階網格與材質 API 快速更新使用者筆觸。
- 使用 RealityKit 音訊強化空間運算 App運用 RealityKit 的環境音訊、殘響與即時程序化音訊，讓 3D 沉浸式內容更生動、更具特色。
- 使用 WebXR 建立沉浸式 Web 體驗了解如何透過 WebXR 在 visionOS 網站加入完整沉浸體驗、善用 visionOS 輸入能力，並在 macOS 上以 Simulator 測試。
- 在 Reality Composer Pro 編排互動式 3D 內容使用 Reality Composer Pro 時間列，透過反向運動學、混合形狀與骨架姿勢建立角色及物件互動的動畫故事。了解內建與自訂動作、動作排序、觸發條件與自然動作。
- 在 SharePlay 自訂空間 Persona 模板在 visionOS SharePlay 體驗中使用自訂空間 Persona 模板，精確安排 Persona 與 App 的位置。於範例 App 採用模板、移動參與者座位，並在 Simulator 測試。
- 在 SwiftUI 中使用視窗建立 visionOS、macOS 與 iPadOS 單視窗和多視窗 App。以程式開關視窗、調整位置與尺寸、替換視窗，並了解配合使用者工作流程的設計原則。
- 在 visionOS 中使用透視環境算繪 Metal 內容將 Metal 體驗延伸到 visionOS。了解如何透過透視環境整合算繪內容與實體環境、讓內容對準現實世界，並以可追蹤錨點預測降低延遲。
- 在 visionOS 建立自訂懸停效果建立隨視線更新 view 的懸停效果，以透明度、縮放與裁切組合按鈕展開效果，同時兼顧舒適度與無障礙需求。
- 在 visionOS 開始使用 HealthKit使用 HealthKit 發揮空間畫布能力。了解平台功能、將既有 iPadOS App 帶到 visionOS、訪客使用者階段的注意事項，以及 SwiftUI、Swift Charts 與 Swift 並行的用法。
- 將 iOS 或 iPadOS 遊戲帶到 visionOS把 iOS 或 iPadOS 遊戲轉為獨特的 visionOS 體驗。加入 3D 邊框或沉浸式背景，並以立體顯示或頭部追蹤為視窗增加深度。
- 建立空間照片與影片體驗在 App 採用空間照片和影片。了解立體媒體類型、在 iPhone 15 Pro 的 iOS App 擷取空間影片、偵測和呈現方式、visionOS QuickLook Preview Application API，以及相關 metadata 與立體概念。
- 探索 Object Capture 區域模式Object Capture 區域模式讓 iOS 能擷取與重建一處空間。使用 macOS 重建範例 App 改善擷取品質，透過 Quick Look 在 Apple Vision Pro、iPhone、iPad 或 Mac 查看成果，並以新 API 建立自訂影像處理管線。
- 探索 iOS、macOS 與 visionOS 的 RealityKit API使用 RealityKit 全新跨平台 API 建立 iOS、macOS 與 visionOS 沉浸式 App，並透過實例查看懸停效果、光影和穿越傳送門等功能。
- 探索 visionOS 多重視角影片播放使用 AVExperienceController 在 Apple Vision Pro 播放多部影片。查看採用建議、從不同角度觀看賽事或同時觀看多場比賽等案例，並設計直覺的多重視角體驗。
- 探索 visionOS 物件追蹤使用物件追蹤把現實物件化為 visionOS App 的虛擬錨點。了解完整流程，包括以 Create ML 機器學習建立參照物件，再透過 Reality Composer Pro、RealityKit 或 ARKit API 附加相對內容。
- 探索 visionOS 遊戲輸入設計與實作 visionOS 遊戲輸入。了解系統手勢如何簡化互動，以及支援自訂手勢和遊戲控制器的做法。
- 提升自訂環境中的媒體觀看沉浸感使用 Reality Composer Pro 的 Docking Region、Reverb 與 Virtual Environment Probe 元件擴充媒體觀看體驗，再透過 Reflections、Tint Surroundings Effect、SharePlay 和 Immersive Environment Picker 提升沉浸感。
- 深入 RealityKit debugger使用 RealityKit debugger 檢查空間 App 的 entity 階層、除錯異常轉換、尋找遺失 entity，並定位造成系統問題的程式碼。
- 深入了解體積與沉浸式空間自訂 visionOS 體積與沉浸式空間的縮放和移動回應，以座標轉換讓兩者互動，回應數位錶冠的沉浸程度調整，並動態改變透視環境色調。
- 為 visionOS 沉浸式 App 建立自訂環境為 Apple Vision Pro 建立視覺豐富且效能良好的自訂 App 環境。了解設計準則、專家建議，以及適用各種數位內容製作工具的技巧。
- 為空間 Web 最佳化發揮 visionOS 的 Web 能力，包括選取反白、全螢幕空間照片與全景影像。運用 WebSpeech 的聽寫與文字轉語音、WebAudio 的空間音景，以及 WebXR 的沉浸式體驗。
- 為空間運算最佳化 3D 素材了解 3D 素材最佳化的完整流程，包括網格、材質與貼圖，以及 shader graph、baking 和 material instance，在提升場景效果的同時改善效能。
- 設計 visionOS 互動體驗向 Encounter Dinosaurs 設計團隊學習 Apple Vision Pro 互動敘事。了解它與 App、媒體及遊戲的差異，設計能適應各種空間與尺寸、具多層互動的故事，並運用動畫、空間音訊與自訂手勢提升沉浸感。
- 設計出色的 visionOS App從沉浸感、眼睛與手部操作、深度、比例及空間著手設計空間運算 App，並查看優秀 visionOS App 的設計案例與思路。
- 認識 visionOS 的 TabletopKit使用 TabletopKit 從零建立 visionOS 桌上遊戲。設定遊戲、以 RealityKit 加入算繪，並用少量程式碼透過 FaceTime 空間 Persona 啟用多人遊玩。