戴上 Vision Pro 飞到冰岛看极光，苹果在 WWDC 上悄悄干了一件酷事

戴上 Vision Pro 飞到冰岛看极光

今年 WWDC 的 keynote 看下来，大多数人都在聊 AI 聊芯片，但有个细节让我特别在意——苹果在 visionOS 27 里加了一个冰岛高地的沉浸式场景，你戴上 Vision Pro 就能「瞬移」到索斯默克（Thórsmörk），坐在群山环抱的湖边看极光。

讲道理，这功能没什么技术革命，但体验是真的上头。

一个场景背后的技术细节

说回正题。visionOS 27 这次新增的「Environment」功能其实去年就有了，visionOS 26 的时候和 NASA 合作搞了个木星场景，能让你站在木卫五表面看大红斑。但今年这个冰岛场景不太一样——它加入了动态光影联动。

怎么说呢，就是你在播放视频的时候，如果开启深色模式，雪地、湖水的颜色会跟着画面内容一起变化。比如你正在看一部暖色调的电影，整个环境的光照也会偏暖；切换到冷色调的时候，极光的颜色会同步响应。这个细节苹果在 keynote 上几乎没提，但实际体验下来确实很加分。

从技术角度讲，要做到这种程度的实时环境映射，需要处理大量空间光照信息。Vision Pro 的 R1 芯片在这块一直是强项，但能把环境光和视频内容做联动，这背后至少涉及实时光照估计、场景语义分割和动态色调映射这几个环节的协同优化。

除了新场景，visionOS 27 还允许你把普通照片直接转化成空间场景。这个功能挺实用的——以前要拍空间照片得用 iPhone 15 Pro 系列或者 Vision Pro 自己拍，现在普通的 2D 照片也能转了。

我试着转了几张之前旅行拍的风景照，效果比预期的好。虽然不能和原生空间照片比深度精度，但放在沉浸式模式下看，那种「身临其境」的感觉已经够用了。特别是大场景的风景照，转换后的空间感比小物体强很多。

作为一个写代码的，我更关注的其实是 visionOS 27 给开发者开了什么新接口。目前已知的几个方向：

一是空间场景的 API 更开放了。以前开发者只能调用苹果预设的几个场景，现在可以通过新的 EnvironmentKit 接口做更多自定义的沉浸式背景。

二是手势交互的精度有提升。visionOS 27 对手部追踪的采样频率做了优化，这意味着做交互密集型的应用（比如空间画图、模型编辑）的时候，用户的误触率会明显下降。

还有就是体积视频的播放支持。虽然不是新东西，但这次苹果把体积视频的编码效率往上提了一截，同样画质下码率降低了大概 20%。对做空间视频内容的人来说，存储和传输的压力小了不少。

坦白讲，Vision Pro 这代产品到现在，销量确实没有达到苹果的预期。三万块的价格摆在那，不是谁都能闭眼买的。但每次系统更新，苹果都在一点一点地打磨体验。从木星到冰岛，从固定场景到环境联动，你能看出他们不是在画大饼，而是在把整个空间计算的概念一步一步落地。

当然，对于大部分开发者来说，现在入场 Vision Pro 可能还为时过早。用户量摆在那，变现路径也不清晰。但如果团队正好在做 3D 内容或者空间交互相关的方向，提前熟悉一下 visionOS 的这套框架，没什么坏处。

毕竟，风口来了再学，就已经晚了。