近日，Meta公司的多家线下元宇宙体验店已陆续开放。

而扎克伯格下一个发展方向已经开始瞄向你的客厅：Meta将于下周发布一个允许开发者轻松将真实世界背景融入至VR的SDK。这将标志着Meta向混合现实体验迈进一大步：在未来的世界中，头显可以感知我们周遭的世界，并模糊AR和VR之间的界线。

同时，Meta首席执行官马克·扎克伯格（Mark Zuckerberg）放出了Project Cambria的彩色透视功能预告片，演示了这款高端头显所能实现的逼真彩色透视体验。

他在接受Protocol采访时表示：“我们的赌注是，（AR和VR）是硬币的两面。”

1. 将真实与虚拟相结合

Meta将于下周发布包含Presence Platform完整工具集的SDK迭代，例如语音和手势交互，以及一系列与视频透视相关的功能。

Quest能够通过前置摄像头获取周遭环境的实时黑白视图，而现在开发者可以利用相同的视频源，并叠加VR动画对象。所述设备同时允许人们绘制房间映射，告诉VR应用程序墙壁、桌子、沙发和其他物体的位置。一旦房间以这种方式映射，VR应用就可以将真实世界的表面融入至游戏内容之中。

这种混合现实体验非常具有潜力，例如你可以在客厅地板砸开一个虚拟大洞，在虚拟湖泊进行钓鱼，将椅子模型放到真实客厅等等。

Meta同时开发了名为《The World Beyond》的演示内容。在游戏中，玩家可以与一个喜欢玩球的可爱小怪物互动。同时，你可以看到虚拟球体会从现实世界的墙壁或家具反弹。

这家公司将于下周向公众发布《The World Beyond》，并向开发者提供源代码。

2. 从追踪到混合现实及其他

Meta通向混合现实的道路几乎是从偶然开始。当这家公司从PC VR架构的外向内追踪转变为Quest的内向外追踪时，团队使用有效的摄像头传感器来定位控制器和玩家在房间中的位置。扎克伯格表示：“我们最初只是为了追踪而制造传感器。然后，一位工程师灵机一动，看看在离开追踪边界时能够继续启用。”

所以除了追踪，相关传感器开始用于提供外部世界的黑白视图，从而帮助Quest用户规划游戏空间，远离墙壁和桌子。一旦进入虚拟现实，同样的边界将作为出现。当你超出防护空间时，头显画面将从虚拟现实切换到基于传感器的真实世界透视视图。扎克伯格表示：“我们最初只是希望它成为一种安全功能。”

随着时间的推移，Meta不断扩展了安全功能，增加了显示进入游戏空间的人、宠物和物体。然后，团队开始尝试更直接地结合虚拟和真实对象，包括真实世界空间的映射，以及为混合现实添加持久性的空间锚。

Meta旗下的虚拟现实协作软件Horizon Workrooms是最早融入所述技术的体验之一。Workrooms允许人们绘制办公桌映射，将一台真正的笔记本电脑整合到基于虚拟数字人的虚拟现实会议中，并在真实环境中锚定一个虚拟白板。扎克伯格指出：“最初几乎只是作为将众多技术结合在一起的演示。但随着时间的推移，我们越来越清楚地认识到，Workrooms的作用不仅仅只是技术演示，我们开始更广泛地对其进行扩展和应用。”

整合透视视频只是迈向沉浸式混合现实未来的第一步。同样重要的是对象识别。尽管Meta尚未透露任何将对象识别技术引入未来头显的具体计划，但它可能代表着这项技术的巨大转变。

现在，如果你映射并标记桌子，Quest只能知道你坐在一张桌子前面。然而，未来的头显或许能够同时识别桌子和桌子上的物体，从而将一切无缝地融入混合现实体验中。

但Reality Labs产品经理帕布·帕塔萨拉西（Prabhu Parthasarathy）提醒道，要达到这一目标并不容易：“对象识别是一个非常复杂的工程问题。我不指望任何人……包括我们（Meta）在内，我不指望任何人能很快解决这个问题。”

当然，他认为这项功能具备非常大的潜力：“无论是VR还是AR，对物体的理解将成为头显使用方式的根本转变。”

3. 即便没人相信，Meta都会押注于虚拟现实

诚然，Quest的追踪传感器缺乏保真度，但开发者可以通过将注意力转移到更高保真的虚拟现实对象来进行弥补。帕塔萨拉西指出：“当你置身于这种（强调高保真虚拟现实对象的）体验中时，你会忘记黑色和白色。我们认为，即便是Quest，它都存在构建出色混合现实体验的大量机会。”

随着未来的头显配备更优秀的图像传感器，情况将会不断改善，例如将于今年发布的Cambria。然而，现在VR融合AR同样关乎视觉计算的未来。通过允许开发者在现实世界中叠加虚拟对象，他们可以早早体验未来AR硬件的潜力，从而提高Meta对AR纯粹主义者的吸引力。

扎克伯格表示：“有一群人认为AR将成为下一个未来，但他们对VR还不太相信。能让这一整群人加入我们的行列令人感到兴奋。”

VR怀疑论不仅仅是开发者中的一种现象，不少企业都开始把焦点放到AR，而不是VR，即便这意味着研发昂贵且不适合消费者的设备。扎克伯格认为，这种做法忽视了现有的消费者习惯。

扎克伯格指出：“科技行业存在这样的偏见：认为手机很重要，而电视不重要。但普通美国人花在电视上的时间和花在手机上的时间一样多，甚至更多。”

所以对于Meta而言，VR头显可能会成为电视机的一种沉浸式版本，而AR眼镜则会成为在未来替代手机的移动设备。这就是Meta投资这两种技术的原因。

扎克伯格表示：“能够推出获得主流采纳的虚拟现实设备，并建立一个开发者社区，这允许我们能够在AR未来到来之前为开发者构建相关的工具链、一个合理的社区和营收手段。”

所以，支持开发者畅游两个世界的混合现实工具将能帮助他们为未来做好准备。扎卡伯格最后补充说：“这是我们的赌注。我可能是错的。但到目前为止，数据表明虚拟现实将非常重要。所以我对我们所走的道路相当有信心。”

协会介绍    入会申请     解决方案     联系协会

关注公众号回复“进群”即可加入群聊