搜索 Unity

Unity Slices: Table,一瞥混合现实社交应用的未来

2021年10月28日 类别 新闻 | 8 分 阅读
Unity Slices Table
Unity Slices Table
涵盖的主题
分享

Is this article helpful for you?

Thank you for your feedback!

Unity Labs团队在今天的Facebook Connect上分享了一个新的概念验证原型,Unity Slices: Table。原型展示了由Passthrough VR支持的带有可触界面的混合现实社交体验。

在今天的Facebook Connect活动上,我们的团队展示了一个名为Unity Slices: Table的混合现实(MR)体验。该项目探索了可触界面的未来,利用Oculus Passthrough功能融合虚拟与现实,将人们聚集在最为古老的社交场合——桌子边上。

Unity Slices: Table可看作是一个社交性混合现实的概念验证原型,其目标是让人们在虚拟空间中聚在一起,无论彼此间的距离是一张桌子,还是一片海洋。

Unity Slices: Table

此内容由第三方提供商托管,该第三方提供商不允许在未接受“Targeting Cookies”的情况下观看视频。如果想观看来自这些提供商的视频,请将“Targeting Cookies”的 Cookie 首选项设置为“是”。

作为Unity Labs团队的高级研究工程师,我负责将XR的未来设想转化为实际的原型。而Unity Slices: Table就是这么一次设想。

这款即将推出的游戏样品将发布在Oculus App Lab,最多能让四名玩家一起享受经典的桌面游戏。Unity Labs团队花了一年时间投身于该体验的原型设计和迭代。这里,我们很高兴地与大家分享其幕后的制作。

制作原型

在制作原型期间,我们首先要做的是让虚拟空间中的桌面与现实的桌子或办公桌对齐。由于Oculus Quest 2尚未有在Unity中精确检测平面的方法,我们只能用控制器来手动摆放虚拟桌面到准确的位置。

在对齐完毕后,我们需要考虑联网方式。这看起来很简单,但以桌子为中心的社交体验有许多因素需要考虑。无论是在近处还是远程连接,共享的可触界面从每名参与者看来都应有正确的观感。

因此,我们制作了更为生动的共享数字体验。Oculus Quest 2带有先进的、包含关节动作的手部追踪,我们充分利用了硬件成功地让每张桌子都能变成一张巨大的触摸屏。但VR的可能性远不止这些,我们想做的也不止一个平面界面,因此我们开始尝试多种可互动的3D对象。

我们为国际象棋游戏的测试制作了多个带体积的3D棋子,棋子会在玩家出手时变得扁平。早期的测试表明,不恰当的棋子形状可能导致玩家误解物体的互动方式。由于棋子在垂直方向上变得扁平,玩家会认为自己必须举起手向下指才能与棋子互动。这时一个问题出现了,如果手部追踪系统不能清楚地识别出手的上层轮廓,系统将无法很好地跟踪手部动作。

虽然未来风的3D界面非常有吸引力,但我们还是决定将互动中的棋子做成扁平。这有两个关键的好处:首先,棋子的选取会更加简单。其次,用户不会再想着要弯曲双手,可以直接触摸和拖动棋子。

我们发现,平面上的互动可以大致保留传统触屏的特点,而3D空间中的手掌位置也可以衍生出新的互动。比如高光显示手掌附近可能触发的界面,让体验更具游戏性和预测性。

我们花了不少时间来搭建了一个流畅的系统,随后用自己的虚拟形象加入了一次联网体验。你可以看到并在语音聊天中听到对方敲打桌子,仿佛对方就坐在对面,这种感觉非常特别。将现实中的社交活动带入到线上体验感觉就像魔术一般。

Passthrough

此内容由第三方提供商托管,该第三方提供商不允许在未接受“Targeting Cookies”的情况下观看视频。如果想观看来自这些提供商的视频,请将“Targeting Cookies”的 Cookie 首选项设置为“是”。

Passthrough VR是一种将AR图像导入VR头显、在头盔内显示现实图像的新方法。除了远程共享虚拟体验外,Passthrough还能让参与者分享周围的现实空间。你不仅能看到远方朋友的虚拟形象,还能看到现实中坐在你身边的人。

在整合了Passthrough后,我们提出了几种候选的实施方案。传统的AR技术会将内容覆盖于现实世界之上,你的手在与内容重叠时后者会显示在上方,这样很容易打破临场感。而有了Passthrough后,我们可以控制真实世界和虚拟世界的融合方式,为手部创建一片遮罩网格,让手能显示在内容的上方,借此提高内容的可信度。

为了进一步拓展这种内容覆盖、控制现实事物与虚拟事物的互动方式,我们设想出了一种传送门:你可以把头和手伸到传送门中来踏入虚拟世界。

我们最终决定在桌子周围建立起一个包裹性的气泡空间。玩家在投入到游戏或应用中时会将大部分注意力放在虚拟内容及周遭的虚拟环境上。如果玩家把目光移开,就可以看到现实世界,甚至不用摘下头显就能吃零食、喝饮料。这种双手在气泡空间与现实间进出的感觉我们团队最喜欢的一种XR体验。

在进一步完善三这三种体验方式后,我们想让用户能以一种简单的方式在三者间切换。于是我们使用了一种滑条控制法。在虚拟和现实之间自由切换也是该体验的一大亮点,其美妙之处需要亲手尝试才能理解。

试用Passthrough和Unity Slices: Table

我们很高兴能与Unity创作者社区分享Unity Slices: Table。Unity Labs团队希望这个实验性作品能为大家的混合现实创作提供灵感。你也可以立即前往Unity资源商店,用Oculus SDK实验性功能开始开发自己的Oculus Passthrough体验。

我们将继续拓展Unity Slices: Table的适用范围,让每个人都有机会前来试玩。更多相关更新请关注我们的社媒频道。

2021年10月28日 类别 新闻 | 8 分 阅读

Is this article helpful for you?

Thank you for your feedback!

涵盖的主题