今年晚些时候,iOS 27将推出一项令人惊叹的新功能——一种全新的照片编辑模式,其效果犹如电影《银翼杀手》中的场景再现。原本静态的照片瞬间变得生动起来,你可以随意转动视角,照片即呈现出3D效果。只需轻微调整拍摄角度,周围环境便会随之重新渲染。
作为一名长期使用VR/AR设备,并在苹果Vision Pro上投入大量时间的用户,当我在苹果2026年全球开发者大会上目睹这一展示时,不禁点头称奇。我深感其中的关联,这一功能正是苹果一直以来探索的3D工具的延伸,以极具吸引力的方式呈现在我们面前。就像我在iOS 27开发者测试版上,对自己的照片尝试这种3D倾斜空间重构效果一样,我满怀期待,想看看还有哪些惊喜在等待着我们。
我认为,这不仅仅局限于照片编辑的范畴,其意义远不止于此。
这是我去年在一次头戴设备会议后,与苹果的杰夫·诺里斯和史蒂夫·辛克莱尔并肩而立,化身虚拟形象讨论虚拟形象技术的场景。今年,Vision Pro将通过VisionOS 27,运用类似的高斯泼溅技术,在头戴设备内将全景照片转换为3D环境。图为苹果提供。
迈向可扫描世界的坚实步伐
苹果实现这些3D效果所依赖的工具集,名为高斯泼溅。正是这一技术,让我的身体在Vision Pro头戴设备上得以3D虚拟化呈现,也使得苹果地图的3D展示更加栩栩如生。这是我多年来见证的一项新兴技术,它已能将3D物体、环境乃至视频转化为令人叹为观止的逼真可探索世界。
Vision Pro上的应用程序已展示了高斯泼溅效果的强大,它能捕捉并转化整个街区,创造出令人难以置信的虚拟世界。事实上,今年冬天,我为其中一些最佳应用颁发了Polys奖。(你可以通过下图截图探索获奖的Pfarrkirche Kefermarkt泼溅效果,这是一个绝佳的范例。)Meta的Quest头戴设备同样能运用此技术扫描你的空间,并创建出令人惊叹的3D可探索复制品。
对我而言,这代表了摄影和视频的未来走向,以及我们记录回忆的新方式。然而,对于苹果来说,这项技术尚未在其自家的相机应用中亮相……至少目前还没有。
苹果在引入高斯泼溅技术时显得既谨慎又多元。在今年的全球开发者大会上,苹果在iOS的空间重构中展示了这项技术,并在Vision Pro上推出了一款新的全景照片转换工具,能将之前拍摄的全景照片转换为环绕式的3D环境,供你探索使用。同时,苹果还改进了3D地图视图,尽管这些视图尚未以沉浸式方式融入任何Vision Pro模式,尽管谷歌的3D地图是去年三星Galaxy XR头戴设备上最令我惊艳的功能之一。
今年荣获Polys奖的Pfarrkirche Kefermarkt是一座采用高斯泼溅技术进行全3D扫描的教堂。图为Scott Stein/CNET的截图。
边缘逐渐清晰
去年,我与苹果的Vision团队就Vision Pro上的虚拟形象进行了深入交谈,当时苹果首次透露了其使用高斯泼溅技术作为实现这些令人印象深刻的面部捕捉效果的秘诀。而今,苹果在新的iOS 27/VisionOS 27功能中再次运用了相同的高斯泼溅模型,却带来了截然不同的全新效果。
对我而言,空间重构就像是去年照片可以转换成的空间场景的升级版,更加互动且在Vision Pro上呈现出令人印象深刻的头部倾斜3D效果(或者通过前后倾斜你的手机来实现)。当然,它也存在类似的限制,即你无法真正深入照片内部,或者将一切事物都翻转过来。它是由AI生成的一系列逐渐变化的角度,模拟出某人背后或刚好超出视野范围可能存在的景象。
然而,能够重新固定一个新角度并使其永久化的自由度是前所未有的,这种控制水平让我在探索全3D高斯泼溅捕捉时有了更深的体验。
当然,更大的扫描需要更多的照片来拼接。这可能是苹果的下一个挑战,因为开发者已经在其他地方实现了这一点。
我期待苹果能有一种方法,将一个地点的多张照片拼接成一个完整的场景,或者重现一个我可以漫步其中的空间。VisionOS 27中的全景转换工具现在几乎就能实现这一点,尽管我还未亲自尝试。它能将一张照片环绕起来,创造出一种身临其境的体验,只是暂时还不能自由走动。
我认为这一愿景终将实现。但苹果首先需要推出真正价格亲民的沉浸式眼镜或头戴设备,而苹果预计要到明年才会推出任何智能眼镜——这些型号甚至可能一开始都没有内置显示屏。然而,价值3500美元的Vision Pro头戴设备却能轻松进行全房间扫描,苹果可以通过自己的应用程序来处理这一切。同时,iPhone也可以进一步改进其相机工具。
最终,这将是沉浸式视频和照片真正意义的未来。而现在,我们正有幸一窥其全貌。

