距离苹果发布新品已过半月左右,但库克登场说出的那句话 " 正如 iPhone 带我们进入移动计算时代,Apple Vision Pro 将带我们进入空间计算时代 ",仍让人感到兴奋。
兴奋的不仅仅是我们或将迎来的新时代,更有这款产品的交互设计对当下头戴设备的影响。在 Vision Pro 发布半个月的时间中,可以看到诸多体验过 Vision Pro 的博主都对这款产品的交互设计表示甚为惊喜;VR 陀螺近期也与诸多业内人士展开深度交流,能感受到大家对于苹果的交互设计也都一致表示震感。
(资料图片仅供参考)
毕竟 Vision Pro 摆脱了「手柄」外部操控器,用户仅通过眼睛、手、语音便可与设备进行交互,并且眼动、手势与语音之间是打通的,是一整套的交互方式。
毫无疑问,苹果在重新定义 MR 交互方式的标准,而从每个技术上来看,Vision Pro 又是苹果多年来布局的一个体现。
从初代 iPhone,看 Vision Pro 的交互设计乔布斯是一位为产品设计而疯狂的人,在每一个步骤上,他都会推进删除与简化,小到一颗螺丝钉的布局都要经过几个回合的筛选;由此,苹果一直都以其精湛的硬件与软件的设计、极简的风格而闻名全球。
在设计苹果系列产品时,乔布斯曾说 " 我们的设计思想就是「极致的简约」,我们管理公司、设计产品、广告宣传的理念就是一句话——让我们做得简单一点,真正的简单。"
2007 年第一代 iPhone 发布,乔布斯在演讲中说道:
" 今天我们要推出三款同级别的革命性产品。首先是一台带触控的宽屏 iPod,其次是一部革命性的手机,还有一款具有突破性意义的互联网通信设备。所以,是三样东西:一台带触控的宽屏 iPod,一部革命性的手机,一款具有突破性意义的互联网通信设备。一台 iPod,一部手机,一款网络通信器……你们明白我在说什么吗?这不是三台独立的设备,这是一台设备,我们叫它 iPhone"。
苹果为了初代 iPhone 的到来,研发了 2 年多的时间。就在乔布斯登台之前,他还召集了其团队,告诉他们要记住那一刻,也就是 iPhone 问世之前的那一刻。因为,下一刻,一切都会改变。确实,第一代 iPhone 的设计,多点触摸功能的屏幕彻底改变了传统手机按键式操作,打开了智能手机世界的大门,并且在后续机型中引入的 App Store,让手机成为了真正的移动智能终端,主导了当时的黑莓、摩托罗拉等智能手机。
与第一代 iPhone 同年发布的黑莓 Curve 8310,因为实体键盘挤占了空间,所以屏幕只有 2.5 英寸再回看 Vision Pro 的交互方式就如同 iPhone 的多点触摸功能设计,摒弃了多余的工具,更加贴近人体的自然习惯,让人类自己成为自然的交互工具,更重要的是 Vision Pro 让头戴设备充满了「科幻的魅力」。据称,Vision Pro 的交互简单到用户只需要 1 分钟就能适应甚至零成本的学习,界面极度丝滑,窗口就像真实世界中的运动轨迹一样。
视线扫过时的细腻动画效果,图源:苹果在 Vison Pro 发布之后,扎克伯格曾对苹果头显发表了自己的看法,他认为「苹果 Vision Pro 并没有实现 Meta 未探索技术领域的任何重大突破」。其实不仅扎克伯格这么看,业界几乎也认为 Vison Pro 并没有带来创新。但能够看出 Vision Pro 并不重在发明,它的每个点都让人惊喜,亦是一种创新。在技术上来看,Vision Pro 几乎颠覆了第三次人机交互的创新,对于人机交互的发展来说,迈出了极大的一步。
《时代》杂志作家格罗斯曼在 iPhone 发布之后,曾一针见血的指出 "iPhone 并没有真正发明许多新的功能,而是让这些功能实用很多。这很重要,如果工具不顺手,我们往往会觉得自己太傻;如果工具太糟,我们也会觉得自己很逊;而如果有人改进了工具,我们就会觉得体验很好,自己也很完美。"格罗斯曼直接从人文的视角解释了为什么苹果的产品能够大受欢迎,头戴设备一直都未被大众所接受,交互环节的「麻烦」便占据了其中一个原因。乔布斯也曾在一次采访中谈到的一个故事," 一个 6 岁小男孩在未接触过 iPad 的情况下,仅凭直觉就可以用手指在屏幕上滑动,启动应用程序并玩游戏。"
如果头戴设备的交互能够简单到如此地步,还会很难推进大众市场?相信在两三年之后,将会见证 Vision Pro 能否成为下一代空间计算平台以及能否打开大众市场。
其实,苹果每一次新品发布都会伴随交互方式的革新,如 Mac 的鼠标、iPhone 的多触点功能、iPad 的 Apple Pencil 再到如今的 Vision Pro 的眼球、手势与语音。可以说,正是因为有了每一次的交互革新,使用设备的潜能才真正被挖掘出来。
正如 2005 年乔布斯对微软一款平板电脑的评论 " 因为配有一支手写笔,这款产品就废了。" 后来微软的平板电脑也确实被苹果颠覆了,不难看出好的交互设计对于用户而言多么重要。一般人类是通过最基础的五官:眼(视觉)耳(听觉)鼻(嗅觉)舌(味觉)身(触觉)去感知世界。科技企业一直都在不断尝试模拟人类感知世界的五官,从而产生了各种各样的终端产品,只是一直仍未看到一款产品可以真正解决人机交互上存在的缺陷。Vision Pro 的到来,极大满足了人们对人机交互的想象。为了能够很好理解 Vision Pro 的交互设计,以下将从眼动、手势与语音三方面进行拆解。
眼动追踪
眼动追踪一直都是 AR/VR 产业有待攻破的一大技术难题,近两年在很多新发布的 AR/VR 设备中已经可以看到,越来越多的产品搭载了眼动追踪技术,但整体体验上并不是很流畅,甚至有的都没有发挥这一技术的能力。
一方面,眼动追踪的交互方式与手柄的配合十分不完美,用户很难真正把手柄和眼动追踪联合起来运用。如果说叠加一项技术但又不能发挥这项技术的能力,那么就会让人觉得这项技术只有酷炫。另一面,眼动追踪对精准度的要求极高,如果技术不能做到及时捕捉眼睛的视线,就会导致定位不准,体验感极差。
眼动追踪技术研究的三大方向是眼球的注视点看向哪里、何时看、看多久,从而去捕捉用户情绪。在 AR/VR 设备中,眼动追踪的系统包含了近红外光源、高分辨率摄像头、以及图像处理相关的算法,三者缺一不可。因此,能够真正把眼动追踪发挥好,底层技术很重要。近期陀螺君写了一篇《从 Vision Pro 一窥眼动追踪交互的巨大潜力》分析了苹果的眼动追踪技术,可点击详阅。
目前,大多数 AR/VR 设备采用的都是单芯片,在算法与图像处理方面的表现力匮乏。乔布斯就曾评价过英特尔的芯片设计,直指该芯片的图像处理方面太慢,应该有款芯片专门用来处理图像。
多年来,终于在 Vision Pro 这款产品看到了协处理芯片的设计。Vision Pro 搭载 M2 与 R1 芯片,其中 R1 芯片为苹果全新设计,专为头显处理摄像头、传感器的数据传输(包括 12 个摄像头、5 个传感器和 6 个麦克风的输入)。
据苹果表示:传输速率仅需 12 毫秒便可将内容同步到 Vision Pro 的屏幕上,几乎没有延迟,甚至可以达到比眨眼的时间快 8 倍,对比一下 Meta 的 Quest 3 就能够直观的感受到 Vision Pro 的装置是有多「豪」了。
Vision Pro 与 Quest3 部分参数对比为了能进一步提升注视点的准确性,苹果还为 Vision Pro 搭配了精心设计的 UI,可以很好的辅助眼球追踪的功能。
从目前 Vision Pro 的参数与体验者的评价来看,Vision Pro 在技术上完全做到了快与准,甚至都未看到有相关视线定位不准或视线抖动的情况。同时,其眼动追踪也做到了非常自然,用户的眼睛注视图标然后双指捏合,即可打开新的应用,眼睛在菜单栏停留一段时间会自动弹出二级菜单 .......
眼动追踪虽并非苹果首创,但苹果却是首家将其作为核心交互方式的公司。不可否认,Vision Pro 的到来打开了眼动追踪交互的潜力,更创新了眼睛 + 手势 + 语音的整套打法。
裸手交互
在 AR/VR 刚兴起时,业内就几乎确认了裸手交互是未来 AR/VR 的发展趋势,只是要想做好手势交互的确认度,是一项极大的技术难题。
也正由于技术的受限,裸手交互这一方式就一直都未被完整的发挥出来。手部是我们日常生活中交互信息的一个很重要环节,除了嘴巴之外,手部是最常用的信息输出肢体。
回看 PC 时代,即便最初会出现各种交互方式,最终都会落到鼠标、键盘,与手部相关的标准交互上。而发展下一代计算产品,手部交互仍很重要。在技术上未有突破的情况下,手柄是 VR 设备最好的交互方式,相较于裸手交互,手柄的准确度可以达到 100%,尤其体现在玩游戏的过程中,所以现在大多数 VR 设备都采用手柄的交互方式。
此次苹果放弃了手柄这一外部操控器的交互方式,将裸手交互真正发挥了出来,展现了与市场上其他玩家完全不同的策略。也可以说,苹果意图用最便捷的交互方式打开轻度场景的应用,将产品更进一步地推向大众消费市场。
由于 Vision Pro 配备了四颗用于手势识别的摄像头,可以检测腰部以下的手势,用户还可以把手放在膝盖上进行操作,甚是轻松自如。
使用 Vision Pro,双手可以自然搭在双腿上除此之外,Vision Pro 中的摄像头还能够非常精确地追踪眼睛视线,眼睛的位置是一个关键因素,可用于确定你想用手势进行互动的对象。例如,查看应用程序图标或虚拟元素会将其作为目标并高亮显示,然后可以执行手势;或者想要打开的 App,配合手部微小的动作就能完成操作。
还值得一提的是,Vision Pro 已经可以实现虚拟键盘打字的方式。据了解,虚拟打字目前在触感上还未达到理想的状态,但苹果内部已经在着手优化了。
苹果实现虚拟键盘输入在人机交互层面,苹果确实考虑到了用户体验的方方面面,苹果几乎将裸手交互发挥到了目前技术的极致,甚至让交互方式从科幻走入了现实,也让空间计算平台的发展前进了一大步。
智能语音
在 ChatGPT 未发布之前,人工智能技术的发展已经把语音交互提高到了可用的水平,而在 ChatGPT 发布之后,智能语音已经成为十分自然的事情了。
在我们日常生活中,智能设备的出现越发普遍,用户对语音的交互也更为熟悉。例如在智能家居中,天猫精灵、小度、苹果的 Home 再到智能手表与智能座舱,音频的实时交互几乎串联了我们所有生活的场景。
与此同时,淘宝、微信等 APP 的应用对语音输入的支持,都让智能的语音交互迸发出了旺盛的生命力。而作为下一代计算产品的 AR/VR,语音交互必然也会成为其标配。而且实时互动语音技术也能让头戴设备的形态、用户体验产生质的飞跃。
苹果也将智能语音搭载进了头戴设备中,还可配合眼睛与手势进行交互。据称,在 Vision Pro 中你可以通过语音呼叫 Siri,打开和关闭 App 或者页面。VR 陀螺近期也写了一篇文章,详细分析了 Vision Pro 中的 AI 应用,可以点击详阅《深剖 Apple Vision Pro 中暗藏的 "AI"》。
Vision Pro 中呼唤 Siri还值得一提的是,为了不使用户和周围的人隔绝,苹果还开发了一个名为 Eyesight 的反透视功能,这也是 Vision Pro 的一大基础交互设计。当有人在你附近时,设备看上去会是透明的,即让用户能够看到身边的人;而当你完全沉浸时,屏幕会暗下去,旁边的人也会明白此刻的你注意不到他们。
从目前各个方面信息来看,苹果完全创新了人机交互的方式,定义了头戴设备「眼睛 + 手势 + 语音」这一整套的交互标准,更为重要的是苹果将这套交互方式也找到了合理的应用场景,落在办公、视频、家居与观影上等轻度场景上,解决了交互方式与场景结合的难题。
Vision Pro 的到来对头戴设备的影响就像初代 iPhone 的到来对手机市场的颠覆一般,或许并不会有初代 iPhone 那么受欢迎,但人机交互界面是时候该迎来下一场的发展了。
库克将 Vision Pro 称为下一代空间计算产品,并不是 AR/VR,不同于市面上完全追求沉浸感的 VR 产品,Vision Pro 追求的是虚拟与现实的融合,让用户可以在体验沉浸感的同时也不会与外界隔离。
WWDC 2023 大会期间,陆川与苹果副总裁展开了一番对话,其中特别令人印象深刻的是苹果副总裁对 Vision Pro 到来总结的三点,他说:" 第一,我们已经感觉到,一个科技划时代的时刻就要到来了。与其让别人来颠覆我们苹果,不如我们自己来。能颠覆苹果的,只有我们自己。"
" 第二,我们感谢过去开发出的所有全系列苹果产品,因为它们挣回的这些钱。我们可以不计成本的去投入开发一个划时代的产品。我们干了六七年,就等今天。"
" 第三,也要感谢其他的苹果产品,在这些产品的开发过程中。我们才能积累起足够强大的技术,最后把所有的科技,集成在 Vision Pro 这一个产品上。"
从他的回答中,能够看出苹果对新一代产品的重视程度,以及也解释了为什么这件事苹果可以做成。第一,苹果足够的有钱,2022 年账面现金流就已过千亿;第二,苹果的技术累计足够的强,Vision Pro 完全体现了这一点。
VR 陀螺曾统计过,苹果从 2010 年左右就开始陆续收购或投资了多家面部识别、眼动追踪、空间定位、手势识别、动作捕捉等 AR/VR 相关的企业。
最终这些收购的企业技术都落在了 Vision Pro 上,例如苹果内部一直都认为头戴设备用控制器操控是个很「恼人的工具」,由此收购的多家面部追踪公司以及多个传感器公司,用多个传感器实时追踪人眼和手势让操作做到了更简单。可以说是目前为止,Vision Pro 是真正一款面向大众消费者的 MR 产品,你可以用它看电影、工作、娱乐、学习、联系家人 / 朋友等。
如何打通大众消费者,一直都是 AR/VR 努力的方向,但无奈多年来,无论是从硬件设计上还是场景应用上,AR/VR 都未能吸引大众消费者的兴趣,这也是业内为什么会一直都觉得 AR/VR 缺杀手级应用的原因。但使用的不便捷也是让诸多用户避而远之的一大因素,苹果到来或将会真正转变这一点。虽然从目前来看 Vision Pro 在价格与性能仍还有很多进步的空间,但 Vision Pro 确实让人感知到空间计算时代正在到来,站在虚拟与现实的融合发展上,Vision Pro 标志了一个技术的新开端。
未来,随着苹果 MR 产品不断迭代,或许将会替代掉电脑、iPad 与手机,实现万屏归一。
第一时间了解 XR 资讯
关注 VR 陀螺官网(vrtuoluo.cn)
VR 陀螺的联系方式:
商务合作 | 投稿 :
西瓜(微信号 18659030320)
六六(微信号 13138755620)
寻求免费曝光:
六六(微信号 13138755620)