Presence提供新的混合现实和互动体验创建工具

在 Facebook 日前所展示的元宇宙愿景中,Presence Platform 是重要的一个环节,该平台可让你构建更加互联的体验,如混合现实环境、互动和语音体验等,还能让你轻松地在各个世界之间移动。

从一个名为《World Beyond》(超越世界)的示例体验中,我们可以看到 Presence 的潜力。它包括一系列新工具,如 Insight SDK、Interaction SDK、Voice SDK 和 Tracked Keyboard SDK 等;这些新功能,连同已经存在的元宇宙(Metaverse)构建块,将成为 Facebook 元宇宙体验的支柱。

Insight SDK

Insight SDK 允许你构建 MR 体验,提供逼真的临在感。今年早些时候,Facebook 向开发人员提供了Passthrough API Experimental,并鼓励他们构建突破性的 MR 内容。开发人员很快便创建出独特的体验,有效地展示了 Oculus Passthrough 技术的潜力。在 Facebook Connect 2021 上,Facebook 宣布,在下一个版本中,每个人都可以使用 Passthrough 功能构建、测试和交付体验。

在新版本中,开发人员将获得对空间锚的访问权限,从而在物理空间中创建和永久放置虚拟内容。连接到空间锚点的虚拟对象将在会话期间保持在指定位置。Spatial Anchors Experimental 可以让你在特定的 6DoF 姿势中创建空间锚,跟踪相对于 VR 头显的 6DoF 姿势,在设备上保留空间锚,然后检索当前跟踪的空间锚列表。

通过同时使用 Passthrough 和 Spatial Anchors,开发人员可以获得额外的场景理解功能。使用场景理解,你可以轻松创建复杂的场景感知体验,使用场景模型与你的环境交互,这将为你提供空间的几何和躯体表示,让你可以构建房间规模的 MR 体验。

例如,你可以将虚拟屏幕附加到物理墙上,或者在整个现实世界环境中导航具有逼真遮挡的虚拟角色。此外,这项技术允许你将物理对象带入 VR。为了创建场景模型,Facebook 将提供一个系统引导的场景捕捉流程,让你四处走动并捕捉你的场景。场景理解功能将在明年初作为实验功能提供。

Interaction SDK

使用 Interaction SDK Experimental,你可以更轻松地在 VR 中集成手部和以控制器为中心的交互。Unity 库将于明年初推出,其中包含一组随时可用的交互组件,如 grab、poke、target 和 select。组件可以一起使用,也可以独立使用或集成到其他交互中。Interaction SDK 通过解决许多与基于计算机视觉的手部跟踪相关的棘手的交互挑战,还提供标准化的交互模式。另外,你还可以藉此构建自己的自定义手势。

Voice SDK

Voice SDK Experimental 是一组专注于使用自然语言的功能,可让你创建免提导航和语音驱动的游戏。这种技术的潜在用例几乎是无穷无尽的。想象一下,你喊出魔法咒语,或使用自己的语音与游戏中的商人以物易物。Voice SDK 将由 Facebook 的 Wit.ai 自然语言平台提供支持。

Tracked Keyboard SDK

Facebook 曾在去年推出面向开发人员的 Tracked Keyboard(跟踪键盘)功能。在 Facebook Connect 2021 上,Facebook 表示将努力在明年初推出作为 Presence Platform 一部分的 Tracked Keyboard SDK 。不过,对此项功能,Facebook 没有太多提及。

Presence Platform 和 Oculus Platform SDK

Presence Platform 和 Oculus Platform SDK 都旨在协同工作,因此你可以同时使用两者,在 Oculus Quest 设备上创建 MR 体验和自然交互。Facebook 将在即将发布的版本中提供开发人员文档,以便你可以开始原型设计。【数字叙事 黎雾】

有问题和想法?与数字诗人讨论、交流,以获得更多的信息、意见。

赞赏
黎雾
黎雾
技术一直以来都是艺术不可或缺的因素
本文系数字叙事原创(编译)内容,未经授权,不得用于商业目的,非商业转载须注明来源并加回链。

订阅

受欢迎的

相关文章
Related