话题指南
空间计算
使用空间界面、RealityKit、沉浸式媒体、共享体验与 3D 内容设计和构建 visionOS 产品。
空间计算把界面设计、渲染、媒体、输入与临场感连接起来，展示如何从窗口式 App 走向理解空间的体验，同时兼顾舒适、清晰和性能。
- Session
- 65
- 2026
- 16
- 2025
- 19
- 2024
- 30
这一话题涵盖什么
- visionOS 界面与交互设计
- RealityKit、3D 内容与渲染
- 沉浸式媒体与共享体验
WWDC 2026
16 场 Session- HTML Model Element 入门了解 model 元素如何将交互式 3D 内容带到网站，现在已支持 iOS、iPadOS、macOS 和 visionOS。探索创建和优化 3D 资源的工具。探索 model 元素的功能，并了解 Web 标准如何塑造 Web 3D 的未来。
- visionOS 群组实验室在线加入我们，与 Apple 工程师和设计师一起深入了解 WWDC26，提出问题、获取建议，并参与本周 visionOS 重要发布的讨论。使用英语进行。
- 为 Apple Immersive Video 构建直播制作工具深入了解 Apple Immersive Video 直播制作幕后。了解如何使用 SMPTE 2110 标准打包沉浸式视频、空间音频和场景元数据，以便通过 IP 网络传输。利用 Apple 的 Immersive Media Support、Video Toolbox 和 AVFoundation 框架，为实时 Apple Immersive Video 工作流提供支持。为了充分理解本 Session，请观看…
- 为 visionOS App 与空间 Web 设计沉浸式环境了解如何为 App、网站和 SharePlay 体验创建照片级真实感的 visionOS 环境。探索让环境真正具有沉浸感的设计原则，并了解如何创建或采集参考资料、准备高保真 CG 资源，以及制作运动和光照等实时效果。
- 使用 Reality Composer Pro 3 全面提升空间工作流了解如何完全在 Reality Composer Pro 中使用强大的图形化工具套件，构建丰富交互与亮眼视觉效果。学习使用 Shader Graph 创建动态材质、通过 Animation Graph 混合骨骼动画，并使用 Compute Graph 模拟粒子效果。进一步通过 Script Graph 连接 App 交互、使用 Sequencer 协调场景事件，并通过 Behavior Trees 设计智能 NPC…
- 使用 Reality Composer Pro 3 更快迭代空间场景发挥 Reality Composer Pro 3 中用于构建空间体验的强大新功能。了解如何为沉浸式场景添加内容、视觉效果、光照和交互性，全程无需离开编辑器。了解如何直接在编辑器中使用 AI 辅助功能快速迭代。
- 使用 Reality Composer Pro 3 设计无代码游戏了解如何使用 Reality Composer Pro 3 中的 ScriptGraph，为 App 和游戏创建无代码 3D 内容。了解如何利用可视化节点构建动画、创建交互时刻，并加入 SwiftUI 元素，为体验添加对话气泡和其他 UI。
- 使用 Xcode 扩展 Reality Composer Pro 3 功能了解 Reality Composer Pro 3 如何帮助你构建更大、更具雄心的空间项目。学习创建项目专用插件，让你可以编辑自定义组件、运行自定义系统并构建自己的 ScriptGraph 节点，从而完全掌控空间创作工作流。
- 使用 visionOS 27 构建下一代体验使用 visionOS 27 的新能力构建下一代 App、游戏和空间体验。探索在 visionOS 上构建体验的不同路径：使用 Apple 原生工具与框架，从 Mac 或 PC 流式传输沉浸式内容，利用第三方引擎，或移植现有 iOS App。了解如何使用 3D 内容创作、沉浸式媒体和对象跟踪方面的最新进展提升空间计算项目。
- 使用注视点流式传输将沉浸式内容带到 visionOS了解注视点流式传输如何以完整保真度将远程渲染场景交付到 Apple Vision Pro。通过 OpenXR 场景和 NVIDIA CloudXR 演示，探索此框架如何完全无线地结合 visionOS 原生能力与第三方流式传输技术。了解 FoveatedStreaming 框架、与 NVIDIA CloudXR SDK 的集成，以及动态注视点流式传输如何在保护隐私的同时带来优势。
- 在 visionOS 中协作处理结构化 3D 模型了解如何在 visionOS 中生动呈现结构化 3D 模型。我们将介绍 USDZ 准备工作，展示如何操控层级装配中的单个实体，并使用剖切平面检查模型内部组件。在 Apple Vision Pro 上创建亮眼的爆炸视图动画，用于设计审查与协作体验。
- 探索 RealityKit 的新进展探索 RealityKit 的最新进展，让 App 与游戏比以往更具沉浸感和真实感。探索强大的新能力，包括交互式布料模拟、NavMesh 寻路、混合现实光照，以及可自定义的混响网格，以增强空间音频。通过改进的阴影、角色渲染增强功能和对高斯泼溅的支持，提升视觉保真度。
- 探索 Spatial Preview 框架了解新的 Spatial Preview 框架如何将 Mac 内容直接带到 visionOS。了解如何通过跨平台实时同步和双向编辑构建动态工作流。学习 SpatialPreview API、设备发现、2D 与 3D Session 集成，以及可为空间化提升 Mac App 的新 Quick Look 能力。
- 探索 USDKit 与 OpenUSD 新功能深入了解 Apple 平台上 Universal Scene Description (USD) 支持的最新进展，包括基于 Swift 的 USDKit、新的空间预览 API，以及增强的空间 Web 能力。了解 OpenUSD 标准的最新更新如何增加对无障碍功能、高斯泼溅和压缩几何体的支持。我们还会逐步介绍 Mac Preview 中扩展的 USD 编辑与渲染工具，展示如何在自己的 App 中利用这些能力。
- 探索 visionOS 中的沉浸式网站环境使用 JavaScript 中新的 Immersive API，将网站访客带入 Apple Vision Pro 的虚拟环境。探索如何从内嵌 model 元素请求沉浸式转场、使用视频停靠等功能创建引人入胜的沉浸式体验，并优化丰富、现实世界尺度体验的性能，只需在网站上运行几行代码。
- 探索 visionOS 对象跟踪增强功能了解 visionOS 如何推进对象跟踪和空间配件输入。探索跟踪移动物体和手持物体的新方式，连接物理与数字世界。了解新支持的空间配件类别，以及构建自定义配件以在 App 中启用独特交互模型所需的内容。
WWDC 2025
19 场 Session- RealityKit 新功能使用 RealityKit 新功能发挥创造力，为 iOS、iPadOS、macOS、tvOS 和 visionOS 构建丰富的 3D 内容。了解如何直接通过 RealityKit 访问 ARKit 数据。探索如何使用对象操控功能，更自然地与 3D 内容交互。通过交互式示例了解用于场景理解、环境融合、实例化等功能的新 API。
- SwiftUI 新功能了解 SwiftUI 的新功能，为任意 Apple 平台构建出色的 App。我们将探索如何通过 Liquid Glass 为 App 带来全新外观与体验。了解如何借助框架增强功能和新 Instruments 提升性能，并集成 Web 内容与富文本编辑等进阶能力。我们还会展示 SwiftUI 如何扩展到更多场景，包括在三维空间中布局视图。
- visionOS 26 新功能探索 visionOS 26 中精彩的新功能。了解增强的体积 API，以及如何结合 SwiftUI、RealityKit 和 ARKit 的能力。了解如何使用更快的手部跟踪和空间配件输入，构建更具吸引力的 App 与游戏。抢先了解 SharePlay、Compositor Services、沉浸式媒体、空间 Web、Enterprise API 等方面的更新。
- 与附近用户共享 visionOS 体验了解如何为同一房间内佩戴 Vision Pro 的用户创建共享体验。我们将展示如何在 App 中集成 SharePlay 并利用 ARKit，介绍针对附近用户和 FaceTime 参与者更新后的窗口共享流程，并介绍为顺畅协作设计的新 API。探索最佳实践，让协作功能更加出众、易于发现，并吸引同一空间中的用户共同参与。
- 为 visionOS 设计小组件了解如何为 visionOS 26 设计精美小组件，使其自然融入用户周围的环境。了解如何为小组件设计增加深度，并针对空间计算自定义材质、大小和样式。我们将分享如何让现有小组件适配 visionOS，或设计感觉如同真实物体的新小组件。
- 为 visionOS 设计悬停交互了解如何为 visionOS App 创建进阶交互。我们将探索如何设计引人入胜的自定义悬停效果与动画、避免常见错误、利用 Look to Scroll 等交互，并通过持久效果构建直观的媒体控件。
- 了解 Apple Immersive Video 技术探索 Apple Immersive Video 和 Apple Spatial Audio Format 技术的能力，创建真正沉浸式的体验。认识新的 ImmersiveMediaSupport 框架，它提供读写启用 Apple Immersive Video 所需元数据的功能。了解将 Apple Immersive Video 内容编码并发布为独立文件以供播放，或通过 HLS 流式传输的准则。为了充分理解本…
- 了解 Apple Projected Media Profile深入了解 Apple Projected Media Profile (APMP)，以及 APMP 如何使用 Video Extended Usage 信令，在 QuickTime 和 MP4 文件中支持 180º/360º 与宽 FoV 投影。我们将提供指导，介绍如何使用系统提供的框架与工具转换、读写、编辑和编码包含 APMP 的媒体。我们还将回顾 Apple Positional Audio Codec…
- 优化 visionOS 自定义环境了解如何使用程序化工具，为 visionOS App 或游戏创建精美的沉浸式环境。我们将分享创建高质量环境的构建模块，然后深入介绍优化过程。了解如何使用 Apple 为 Houdini 提供的一系列工作流，减少场景多边形数量、清理几何体、打包 UV 贴图，并创建可导入 Reality Composer Pro 或所选游戏引擎的 USD 资源。
- 协同更出色：SwiftUI 与 RealityKit了解如何在 visionOS 26 中顺畅融合 SwiftUI 与 RealityKit。我们将探索 Model3D 的增强功能，包括动画与 ConfigurationCatalog 支持，并演示如何顺畅转场到 RealityView。你将了解如何利用 SwiftUI 动画驱动 RealityKit 组件变化、实现交互式操控、使用新的 SwiftUI 组件提供更丰富的交互，以及从 SwiftUI 代码观察…
- 在 visionOS App 中支持沉浸式视频播放了解如何在 visionOS App 中播放沉浸式视频。我们将介绍各种沉浸式渲染模式，回顾支持这些模式的框架，并逐步讲解如何在 App 中渲染沉浸式视频。为了充分理解本视频，建议先观看 WWDC25 的“探索 visionOS 视频体验”。
- 在 visionOS 中使用 SwiftUI 设置场景探索可增强 visionOS App 中窗口、体积和沉浸式空间的精彩新 API。微调场景在重新启动或固定到位时的行为。通过裁剪边距与吸附，让体积适应周围环境。将沉浸式内容从 Mac 流式传输到 Vision Pro。通过体积和沉浸式空间提升现有基于 UIKit 的 App。
- 增强 App 的音频录制能力了解如何改进 App 的音频录制功能。探索在 iOS 和 iPadOS 26 上通过输入选取器交互灵活选择音频设备。了解使用 AirPods 进行高质量语音录制的可用 API。我们还将介绍空间音频录制与编辑能力，让你可以分离语音和环境背景声，全部通过 AudioToolbox、AVFoundation 和 Cinematic 框架完成。
- 探索 visionOS 上的空间配件输入了解如何将空间配件集成到 App 中。显示虚拟内容、与 App 交互、在空间中跟踪配件并获取交互信息，以增强 visionOS 上的虚拟体验。
- 探索 visionOS 视频体验了解在 App 中创建和呈现沉浸式视频体验的不同方式。我们将探索 visionOS 26 中提供的多种媒体类型，包括适用于 180°、360° 和宽视野视频的 Profile；创建和播放 Apple Immersive Video 的选项；以及 2D、3D 和空间视频的扩展能力。了解哪些 Profile 最适合 App 及其内容。
- 探索空间商务 App 的增强功能了解 visionOS 26 的最新增强功能和 API 如何扩大访问范围，并扩展去年发布的企业能力。了解这些全新功能如何简化模型训练工作流、增强视频画面，并让你可以通过局域网对齐坐标系，为内部 App 开发协作体验。
- 沉浸式 App 的 Metal 渲染新功能探索使用 Compositor Services 为沉浸式 App 进行 Metal 渲染的最新改进。了解如何添加悬停效果以突出 App 中的交互元素，以及如何通过动态渲染质量进行更高保真度的渲染。了解新的渐进式沉浸样式。探索如何通过从 Mac 向 Vision Pro 直接渲染 Metal 内容，将沉浸式体验带到 macOS App。为了充分理解本 Session，请先观看 WWDC23 的“探索适用于沉浸式…
- 空间 Web 新功能探索 visionOS 26 上 Web 的最新空间功能。我们将介绍如何使用全新的 HTML model 元素显示内嵌 3D 模型，并分享模型光照、交互和动画等强大功能。了解如何在网站中嵌入新支持的沉浸式媒体，例如 360 度视频和 Apple Immersive Video。还可抢先了解如何向网页添加自定义环境。
- 认识 SwiftUI 空间布局探索使用 SwiftUI 构建空间体验的新工具。学习 visionOS 上 3D SwiftUI 视图的基础知识、使用深度对齐自定义现有布局，并使用修饰符在空间中旋转和定位视图。了解如何使用空间容器在同一 3D 空间中对齐视图，帮助你创建沉浸式且引人入胜的 App。
WWDC 2024
30 场 Session- SwiftUI 新功能了解如何使用 SwiftUI 为任意 Apple 平台构建出色的 App。探索 iPadOS 中标签页与文档的全新外观和体验。使用新的窗口 API 改进窗口管理，并进一步控制 visionOS App 中的沉浸式空间与体积。我们还会介绍其他精彩改进，帮助你创建富有表现力的图表、自定义并布局文本等。
- USD 与 MaterialX 新功能探索 Apple 平台上对 Universal Scene Description 和 MaterialX 支持的更新。了解这些技术如何为 3D 内容创作和交付奠定基础，以及它们如何帮助简化出色空间体验的创作工作流。了解 RealityKit 和 Storm 中对 USD 与 MaterialX 的支持、系统自带工具的改进等。
- visionOS 中的 Quick Look 新功能探索 visionOS 中的 Quick Look 如何提升 App 的文件预览和编辑体验。我们将介绍 App 内 Quick Look 与窗口式 Quick Look 的集成，以及一个可在 App 中自定义窗口式 Quick Look 体验的全新 API。我们还会分享在 Quick Look 中查看 3D 模型的最新改进。
- 为 visionOS 沉浸式 App 创建自定义环境了解如何为 Apple Vision Pro 创建视觉丰富且性能出色的自定义 App 环境。学习设计准则，获取专家建议，并探索可在任意数字内容创作工具中使用的技术，以开始构建沉浸式环境。
- 为 visionOS 设计交互式体验跟随 Encounter Dinosaurs 的设计师，了解如何为 Apple Vision Pro 设计引人入胜的交互式叙事体验。了解此类体验与现有 App、媒体和游戏有何不同，并探索如何设计将观众带入新世界的叙事。了解如何创建可适应任意空间和尺寸的故事、提供多层次交互以方便所有人使用，并运用动画、空间音频和自定义手势，让用户更深入地沉浸在体验中。
- 为空间计算优化 3D 资源深入了解从头到尾优化 3D 资源创作的工作流。探索在数字内容创作工具中优化网格、材质和纹理的最佳实践。了解如何利用着色器图、烘焙和材质实例增强 3D 场景，同时优化性能。使用原生工具更高效地处理资源，并提升 App 性能。
- 介绍适用于 visionOS 的企业 API了解如何使用适用于 visionOS 的新企业 API，创建可提高员工与顾客在 Apple Vision Pro 上工作效率的空间体验。
- 使用 ARKit 创建增强的空间计算体验了解如何利用 ARKit 的最新功能创建引人入胜的沉浸式体验。探索如何使用房间跟踪与对象跟踪，进一步与周围环境互动。我们还将介绍 App 如何响应此平台上的环境光照变化。了解手部跟踪和平面检测方面的改进，让空间体验更加直观。
- 使用 RealityKit 构建空间绘图 App在构建空间绘图 App 的过程中发挥 RealityKit 的强大能力。在创建融合 RealityKit、ARKit 和 SwiftUI 的醒目空间体验时，你将探索资源在 RealityKit 中的工作方式，并了解如何使用底层网格与纹理 API 等功能，快速更新用户的画笔笔触。
- 使用 RealityKit 音频增强空间计算 App使用 RealityKit 音频提升空间计算体验。了解空间音频如何让 3D 沉浸式体验生动呈现。从环境音频、混响到可为 3D 内容增添个性的实时程序化音频，了解 RealityKit 音频 API 如何让 App 更具吸引力。
- 使用 WebXR 构建沉浸式 Web 体验了解 WebXR 如何帮助你为 visionOS 中的网站添加完全沉浸式体验。了解如何构建充分利用 visionOS 输入能力的 WebXR 体验，以及如何使用 Simulator 在 macOS 上测试 WebXR 体验。
- 在 Reality Composer Pro 中编排交互式 3D 内容了解 Reality Composer Pro 中的时间线视图如何让 3D 内容生动起来。了解如何使用反向运动学、混合形状和骨骼姿势，创作角色与对象相互互动并与周围世界交互的动画故事。我们还会展示如何使用内置和自定义操作、为操作编排序列、应用触发器并实现自然动作。
- 在 SharePlay 中自定义空间 Persona 模板了解如何在 visionOS SharePlay 体验中使用自定义空间 Persona 模板，微调 Persona 相对于 App 的位置。我们将展示如何在带有 SharePlay 的示例 App 中采用自定义空间 Persona 模板、在座位间移动参与者，并在 Simulator 中测试更改。我们还会分享设计自定义空间模板的最佳实践，让体验更加出色。
- 在 SwiftUI 中使用窗口了解如何在 visionOS、macOS 和 iPadOS 中创建出色的单窗口与多窗口 App。探索可通过编程方式打开和关闭窗口、调整位置与大小，甚至用一个窗口替换另一个窗口的工具。我们还会探索窗口设计原则，帮助用户将 App 融入自己的工作流。
- 在 visionOS 中创建自定义悬停效果了解如何开发自定义悬停效果，在用户注视视图时更新视图。了解如何构建结合不透明度、缩放和裁剪效果的扩展按钮效果。探索如何创建舒适且尊重用户无障碍需求的效果。
- 在 visionOS 中开始使用 HealthKit了解如何使用 HealthKit 创建充分利用空间画布的体验。了解 HealthKit 在该平台上的能力、如何将现有 iPadOS App 带到 visionOS，以及访客用户 Session 期间使用 HealthKit 时的特殊注意事项。你还将了解如何使用 SwiftUI、Swift Charts 和 Swift 并发，通过 HealthKit 构建创新体验。
- 在 visionOS 中通过透视渲染 Metal 内容准备好将 Metal 体验扩展到 visionOS。了解通过透视功能将渲染内容融入用户物理环境的最佳实践。了解如何定位渲染内容以匹配现实世界、通过可跟踪锚点预测降低延迟等。
- 增强自定义环境中的媒体观看沉浸感使用 Docking Region、Reverb 和 Virtual Environment Probe 等 Reality Composer Pro 组件扩展媒体观看体验。了解如何通过 Reflections、Tint Surroundings Effect、SharePlay 和 Immersive Environment Picker 进一步增强沉浸感。
- 将 iOS 或 iPadOS 游戏带到 visionOS了解如何将 iOS 或 iPadOS 游戏转变为独特的 visionOS 体验。通过 3D 边框或沉浸式背景增强沉浸感（和趣味性）。还可以通过立体显示或头部跟踪为窗口增加深度，让玩家更深入地进入游戏世界。
- 探索 Object Capture 的区域模式了解 Object Capture 的区域模式如何扩展 Object Capture 功能以支持区域采集和重建，从而在 iOS 上提供新的 3D 采集可能性。了解如何使用新的 macOS 重建示例 App 优化 iOS 采集质量，以及如何通过 Quick Look 在 Apple Vision Pro、iPhone、iPad 或 Mac 上查看最终结果。了解 3D…
- 探索 visionOS 中的多视图视频播放了解 AVExperienceController 如何在 Apple Vision Pro 上启用多个视频的播放。回顾采用这项功能的最佳实践，并探索出色的使用场景，例如从不同角度观看体育赛事直播，或同时观看多场比赛。还可了解如何在 App 中设计引人入胜且直观的多视图体验。
- 探索 visionOS 中的游戏输入了解如何为 visionOS 游戏设计和实现出色的输入体验。了解系统手势如何让玩家顺畅地与游戏互动，并探索支持自定义手势与游戏控制器的最佳实践。
- 探索 visionOS 的对象跟踪了解如何使用对象跟踪，将现实世界中的物体转化为 visionOS App 中的虚拟锚点。了解从头到尾使用对象跟踪构建空间体验的方式。了解如何在 Create ML 中使用机器学习创建参考对象，并通过 Reality Composer Pro、RealityKit 或 ARKit API，附加相对于目标对象定位的内容。
- 探索适用于 iOS、macOS 和 visionOS 的 RealityKit API了解 RealityKit 中新的跨平台 API 如何帮助你为 iOS、macOS 和 visionOS 构建沉浸式 App。查看新的悬停效果、灯光与阴影以及穿越门户功能，并通过真实示例观察实际效果。
- 构建引人入胜的空间照片与视频体验了解如何在 App 中采用空间照片和视频。探索不同类型的立体媒体，并了解如何在 iPhone 15 Pro 上通过 iOS App 采集空间视频。了解检测和呈现空间媒体的各种方式，包括 visionOS 中新的 QuickLook Preview Application API。深入了解让照片或视频具有空间效果的元数据与立体概念。
- 深入 RealityKit 调试器认识 RealityKit 调试器，了解这款新工具如何帮助你检查空间 App 的实体层级、调试异常变换、查找缺失实体，并检测代码中的哪些部分正给系统造成问题。
- 深入了解体积与沉浸式空间探索在 visionOS 中自定义体积和沉浸式空间的强大新方式。了解如何微调体积调整大小的方式，以及体积如何响应用户在周围移动。借助坐标转换，让体积与沉浸式空间彼此交互。了解当用户通过 Digital Crown 调整沉浸程度时，如何让 App 作出响应，并使用周围环境效果动态自定义沉浸式空间体验中的透视色调。
- 认识适用于 visionOS 的 TabletopKit使用 TabletopKit 从头开始构建 visionOS 棋盘游戏。我们将展示如何设置游戏、使用 RealityKit 添加强大的渲染能力，以及只需添加几行代码，即可在 FaceTime 中通过空间 Persona 启用多人游戏。
- 设计出色的 visionOS App了解如何通过采用沉浸式体验、围绕眼睛和双手设计，以及利用深度、比例与空间，创建引人入胜的空间计算 App。我们将分享多个出色的 visionOS App 示例，并探索其设计师如何为该平台构思新体验。
- 针对空间 Web 进行优化了解如何在 Web 上充分运用 visionOS 功能。探索选择高亮改进，以及全屏展示空间照片和全景图像等近期更新。了解如何利用现有 Web 标准，通过 WebSpeech 实现听写和文本转语音、通过 WebAudio 构建空间声景，并通过 WebXR 打造沉浸式体验。