三个关键技术给予AR界面的力量

王林
发布: 2023-06-10 11:59:49
转载
594 人浏览过

本篇文章将从技术角度出发,并以最近推出的苹果MR为例,分析AR世界里所需要依托的三个关键技术点:眼动追踪、手动识别和空间计算。让我们一起看看作者对这三个技术点的分析吧~

三个关键技术给予AR界面的力量

在物理世界中,用眼观察、手操作是最自然的交互方式了。实现这种自然交互在AR世界中的延续,需要依靠三个关键技术点。

我们并未感到失望,因为Apple Vision Pro的发布展示了三种技术所带来的自然交互能力。

一、眼动追踪技术

我们在现实中如果需要与哪个物体有进一步的交互,都会自然地将视线集中在它的身上,当我们耗费注意力让视线聚焦在它身上的时候,就已经代表了我们的选择。

这个过程涵盖了目前界面领域上的两个状态:激活态(聚焦)和点击态(选择)。眼动追踪技术,实现的是看到聚焦这个过程。

这个技术当然并不是首创。AR眼镜的先驱,Microsoft Holoens第2代的交互就主打了Eye-gaze,就是用眼睛来聚焦的功能。

而在之前,Microsoft Holoens第1代的头动(Head-gaze)交互其实也已经有用眼睛来看和激活的概念了。但Head-gaze里使用头部微微移动来控制屏幕中心的一个点(Gaze)来激活内容,和我们本来的自然交互始终是有差距的,因为实际上我们聚焦一个物体,并不需要每次都靠头动,靠眼睛动就行了。

不过,虽然眼动追踪技术更解决自然交互的标准,但头动交互并不是没有可取之处,比如我团队目前自研的眼镜还只能支持Head-gaze交互。这种交互手段的成本和技术难度更低,比起用手/鼠标/遥控器等去聚焦激活的方式,它更加贴近我们用眼睛看这个自然交互理念。

另外,眼动追踪技术实现了激活态,却还没真正实现选择,也就是那个点击态。作用是告诉机器我确认是它了。

在严谨的说法中,对于不需要操作的事物,省略手动确认步骤非常必要。比如,我一边吃零食一边追剧的时候,就很希望不用每次操作前都要擦一擦我的脏手……在制造领域,类似这种解放双手的需求也经常被客户提出。

为了更自然的交互,也许这也可以成为我们畅想的一部分。之前我写过一个专利,就是靠脑电波技术来进行简单的确认。

二、手势识别技术

眼动追踪满足用眼睛看这部分的交互,用手操作,则需要手势识别技术。

这也不是什么新技术了,之前很多ARVR的设备上都有搭载,当然实现程度还要实际体验再确认。

Vision Pro的宣传视频里,手势识别看上去很自然,手甚至都不需要抬起来,这应该是依靠4组下视角相机(这大概也是需要12个摄像头配置的原因之一吧)。

三个关键技术给予AR界面的力量

相比Hololens2的宣传视频,可以看出手势是在头顶摄像头涵盖范围的。

三个关键技术给予AR界面的力量

因为手势识别是需要依托摄像头的(计算机需要输入才能知晓你的手在怎么动),那么同样的手势从不同角度拍摄的结果就不一样,识别的结果也会受到影响。

另外,2D手势识别和3D手势识别技术的体验感也不太一样。

三、空间计算

要让眼睛看得更爽,用手操作得更自然,设备需要有对空间的理解能力。空间计算,也是Vision Pro想主推的,对于这个能力的注重,让他们认为这块能力可以划分一个时代

“空间计算时代”。

许多交互是自然而然发生的,因为机器具备了空间计算能力,换言之,如果机器没有理解空间的能力,这些交互便不能自然而然地发生。Nerf、SLAM、3DOF、6DOF都是空间计算技术的一部分,听到的都属于这个范畴。

从体验角度来说,空间深度所带来的物体之间、物体与用户之间的距离感知; 用户在不同位置和姿态下的视角朝向所带来的物体形状变化;真实环境中因时间和天气等光线不同所导致的色彩感知变化;甚至不同空间位置所传来的声音等,空间计算能给予设计师更多自然交互的空间。

可以说,空间计算,是能让AR在未来,成为不同于普通屏幕界面的、我们真正所期待的“凡所看之处,皆可成为界面”的关键技术。

专栏作家

林影落,微信公众号:林间有影落,人人都是产品经理专栏作家。一枚会玩卡的用户体验设计师,《AR界面设计》作者,10年 UIUX设计经验,专注于AR及智能化领域用户体验设计6年;设计&心理学教育背景,国家职业认证高级OH卡师/天赋挖掘教练。我希望我的努力能够为智能化未来的设计领域增添价值,并使设计师的职业更具价值

题图来自 Unsplash,基于 CC0 协议

以上是三个关键技术给予AR界面的力量的详细内容。更多信息请关注PHP中文网其他相关文章!

来源:sohu.com
本站声明
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn
最新问题
热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板