@Lenciel

AVP 初印象 - 交互及总结

这是一个系列文章里的第四部分,前面我们聊了硬件visionOS系统软件

AVP 发布前,XR 从业者一个核心期待应该就是它的交互方式。毕竟, 17 年前 Apple 在 iPhone 推出时带来了多点触控,永远改变了手机这个行业我甚至觉得它改变了人类这个物种,因为我家小孩在学会说话之前就学会了在屏幕上滑动手指。

这篇就来聊聊到底有没有作业可以抄,然后打个「突如其来」的总结。

Look-and-Tap

Facts

用眼睛选中,用手去操作,是 Apple 为 AVP 定义的一种全新的交互方式。除开最常用的夹手指表示「单击」外,还支持一些别的手势:

avp_guestures.jpg
图 1. AVP 支持的 6 种手势

有人会觉得眼动追踪和手势识别在 XR 行业里面已经存在了很多年。

但就像熊彼特说的,创新从来就不是无中生有,而是对「旧要素进行新组合」。

并且,Apple 做的绝不是简单的组合:为了把手眼追踪做到极致,AVP 给每个眼睛各配备了两个专用摄像头,加上宽视场的手部追踪系统,即使用户把手放下或者是放在桌子或者膝盖上休息,识别也很轻松 是不是把手举在空中做动作是判断一个 AVP 用户是不是首次使用的有效判据。

结论:打开 AVP 进行手部和眼部设置的那个引导流程绝对是一个「aha moment」,大部分用户都会感觉这套交互如此自然却又如此强大,仿佛自己突然有了超能力。

Rants

人学习一套新交互是有成本的。所以学习的唯一动力就是它可以比现有方案工作得更加高效。一旦真的密集使用 AVP,就会发现不少问题:

  • 传统的眼睛和鼠标配合的逻辑是:眼睛先看到下一个地方,然后手移动鼠标去到那里,然后手指点击。也就是说选中其实是分两个步骤的(眼睛先看选什么,手再去选中)。因此,眼睛直接选中:
    • 会让我觉得手总是慢半拍,因为手已经习惯了比眼睛慢半拍;
    • 会让我很焦虑,因为我看到的东西就会被选中;
    • 会有很多漂移,比如我打字的时候突然看到了某个地方,或者是看电影的时候手不小心动了一下;
    • 会让新手在进入一个应用的时候有很大概率触发「删除」消除,造成恐慌;
  • 传统的鼠标滚轮被捏合手指拖动取代,这让我感觉到疲惫:
    • 滚轮操作手是没有位移的,但是捏着手指拖动动作还挺大的;
    • 特别是信息比较多的时候,很难定位到想要停下来的位置;
  • 我还可以说半个小时…

结论:因为看电影的时候好几次进度条被误操作,我把手势识别改成了只识别右手,然后在看电影的时候把右手放在裤兜里。这是整个问题有多么烦人的一个缩影难道 AVP 自带了 QSPL 大法

Thoughts

和 XR 世界普遍采用的,被用户们戏称为「鸡腿」的手柄相比,Apple 发明的这套新交互方式,感觉还是跟前面说的发展路线有关系:

  • Quest 的生态既然是靠 Unity 开发者,以游戏为主,就需要有手柄;
  • Apple 的生态是以办公和看片切入,并且作为 AR 降临派,从 2017 年开始 ARkit 年年迭代(RealityKit 要晚几年),推出这种携带和学习成本更小,更自然的交互方式,也算水到渠成;

虚拟键盘

Facts

输入文字时,会弹出一个和宣传册上看起来一样美观的虚拟键盘:

avp_virtual_keyboard.jpg
图 2. AVP 的虚拟键盘

用户既可以伸出手指去戳键盘上的按钮,也可以用眼睛选中然后捏手点选。

Rants

事实证明,在悬浮的虚拟键盘上打字非常累:

  • 有一部分的累是心理层面的:用户在敲击时没有感到应该有的反馈,而之前的任何键盘,哪怕是 iPhone 上虚拟的键盘,敲击的时候都有反馈;
  • 另一部分的累是物理层面的:打字的时候手臂需要支撑,手腕才能有效得到放松;

Thoughts

结论:除开输入(较短的)密码,这个虚拟键盘没法用来干任何别的事情。

Siri

Last but not least,很多场景下和 AVP 最好的交互方式,大概反而是语音。

这实际上也是我们在 FITURE 做镜子时的感受:和 AVP 相似,它没有可以触控的屏幕,没有鼠标、键盘、遥控器这些外设,并且用户在使用的时候,是希望全身心投入到内容里面去的。

总结

本来应该还有一篇是聊「内容」的。

Apple 为 AVP 准备了不少非常不错的内容。比如下面这个 MLS Season Pass 里面,真能看到队员在你面前进球、庆祝并举起奖杯:

avp_season_pass.jpg
图 3. MLS Season Pass 被我加入了必看列表

但既然 AVP 截图都不让,本座也就懒得聊了,直接在这篇末尾打个总结吧。

因为 Apple 选择了我称之为「VR 为体,AR 为用」的路线,所以开箱后会发现,上面没有太多 VR 上的爆款游戏,但同时又没有足够多的 AR 应用或内容,它是真的,真的很想让你用它来办公。

但如果你放下 Mac,用 AVP 去办公,就会听到你的 Mac 开始唱歌。然后你的 AVP 在回嘴,两人你一句我一句,歌声绵绵不绝。在你的脑袋炸开之前,你听到了他们唱的是《阿妮快拿枪》里那首《Anything you can do I can do better》:

Howard Keel 和 Betty Hutton,就像是 Apple 现有的设备和 AVP

大概有两类人是不会失望的用户:

  1. 科技发烧友:AVP 仍然提供了一些极致体验。包括我已经提到的空间视频录制,包括 Apple TV 里面的那些使用 Apple Immersive 格式提供的内容等等。总会有一些人,愿意为其中的某一项买单;
  2. 开发者:今年 AVP 的出货大概会到 40w 台左右。由于内容极度贫瘠(Youtube 等都还没有原厂应用),现在做个体验稍微比较浏览器好一点的套壳就能以美金的价格卖出好几万份。总还是有很多人,愿意为上去淘金做一些投入,而且我估计后面几代的 AVP 说不定没有这代硬件上配置这么豪迈;

而那些相信了 Apple 的宣传,或者一些使用者的宣传,准备迎接未来的用户,估计会在新鲜劲儿过后感到失望。

因为目前 AVP 带来的更多是未来感,而不是未来。

AVP 初印象 - 软件(2)

这是一个系列文章里的第三部分,前面我们聊了硬件visionOS

上次只说了操作系统,接着聊聊内置的系统软件。

目录

互联互通

Facts

visionOS 在设计上的大量选择,都表明 Apple 把 AVP 与其他设备的生态打通作为重点的决心。

但目前没有发现它跟我的手表有什么互动。

我的手机在初次设置的时候,通过扫描一个二维码,同步了我的 id,密码等等,大大减轻了初始化的工作量。

然后它和 AVP 好像就分手了 并且,再说一遍,戴上 AVP 的时候用 passthrough 我根本看不清手机也不能解锁它。

AVP 和我的 iPad 好像也不太联系,大概 iPad 知道 AVP 心里面想要成为它的替代品。

目前 AVP 对 Mac 的支持是最多也最丰富的,因为它只是想做连接到 Mac 上的另一个显示器,能有什么坏心思呢?

结论:目前只有和 Mac 的互联互通做到了可用连接 Mac 到 AVP 上主要是通过Mac Virtual Display这个功能。 。它给人的感觉就是,「啊哈,这才是我想要的 passthrough 的清晰度,这才是跟其他 VR 不一样的地方」。

Rants

可以想象,现在 macOS 团队那边堆了很多来自 visionOS 团队的需求。

但同时他们还有很多自己的需求,watchOS 的需求,iOS 的需求,tvOS 的需求…

才二十万来台货的 visionOS 优先级应该没有多高,所以有很多问题没有被解决:

  • 前面吐槽过的窗口管理问题,叠加现在还不支持多个 virtual display;
  • Mac 下的外设无法完全正常使用,而 virtual screen 里的 Mac 又不太支持眼动;
  • virtual display 不能像其他窗口一样被随意移动和摆放;
  • 它要求两台设备登录同一个 apple id;
  • 我还可以说半个小时…

由于长期使用多个屏幕办公,这里面很多缺陷对我来说还是比较破坏性的。

结论:在一些软件上的改进完成之前,我不会用 AVP 替换现有的外接显示器。

Thoughts

虽然看起来结论很负面,但这些都是软件问题,软件问题只是个优先级问题。

而且,AVP 最大的潜力其实在那个被 diss 为「尿袋」的外挂电池。

如果我们把 AVP 看成是一台电脑,目前外挂的只有电池,头显上有一堆的算力、传感器、显示屏。

在未来,Apple 会不会通过尿袋做中继,逐步把一些计算密集的任务交给 iPhone、iPad 或者 Mac,让头显的成本、重量和耗电都降下去?

结论:想象一下,如果在出差的时候有一台 AVP 和一台 Mac,就可以随时在狭窄的座位上扩展出来一个私人空间,不管是写代码、看书还是娱乐,都是大屏体验,棒不棒?这是 Apple 肯定会去的地方,肯定得让人觉得毫不惊讶甚至有些无聊,但却是其他厂商去不了的地方。

系统软件

People & Personas

People 主要功能是和联系人进行交互。它被打造成一级入口AVP 有三个一级入口:Apps、People、Environments。 ,大概是因为 VR 头显有个历史问题:用户在里面太寂寞了。

通过 Personas 捏个半身像,包括 Zoom、Facetime 等在内的前置摄像头拍摄用户参与的活动,就是数字人上了。

捏脸的过程比较简单,十来秒就完成了(但不知为啥这个过程音量会被自动调到最大,还没法调小,于是我羞愧地躲进了电话亭):

avp_personas_1.jpg
图 1. 捏脸过程很快,除开眼镜没啥可选的

这一系列在营销中被当成 AVP 核心卖点visionOS 在 1.1 的升级里主要推的也是这部分相关的功能。 的功能,实际使用后,我觉得:

  • 简单的捏脸带来的问题是结果比较简陋。实际上,既然是其他人在沟通时看到的「我」的形象,用户是愿意花上个几分钟时间捏出造型更精致细节也更丰富的版本的;
  • 和 Meta 的卡通化相比,AR 爱好者苹果选择了写实风格。 这会带来不少优势,比如看到它的人会马上认识这就是你,并且很认真地对待它;但是追求保真会有它固有的劣势,特别是在今天的技术水平下。比如看到它的人,包括你自己,会认为这虽然是你,但可能是打了太多肉毒杆菌的你,或者是变成鬼之后的你
  • 一起看片甚至是一起玩桌游是个非常不错的体验,但是还没有好到用户不会去问自己为什么不跟对方线下聚聚看个电影或者是玩个桌游;
  • 可以随意走动并且不用手捧着手机是一个视频通话不错的体验,但是这个过程中你其实看不见自己的样子(先不管它像肉毒的你还是变鬼的你),这多少有点让人焦虑;

在找到可以视频的人之前,我先给自己打了一个:

avp_personas_2.jpg
图 2. 通过 AVP 跟 iPhone 打 Facetime,Cyber Horror

结论:这部分功能被设计来让用户没有那么寂寞。但目前它提供的体验水平是在提醒用户,你们这些可怜人真的是寂寞…

Environments

我最喜欢的是呆在月球。

avp_enviroments.jpg
图 3. 现在的窗口管理下,月球很快会被铺满

但久了就有一点点倦,然后发现要切换个 environment 好像还挺困难。

好容易把所有内置场景都换了一遍之后我在想,就是这些了吗?我还想要孤山寺北,立水桥南…

其实 Apple 很明显是有一套第三方 environment 制作标准的。因为除开系统内置,在 Apple TV 应用里,用户可以进入一个电影院,而 Disney+的应用里用户可以到纽约。

结论:做得很棒,但是不够丰富。也许开放接口是个丰富生态的好办法。

Spatial Photo & Video

在 AVP 里观看空间视频的时候,边缘淡出加上 3D 效果,会让用户体验到故地重游的惊喜,所以它成了很多 AVP 用户实际上使用较多,并且击节叫好的功能:

avp_spatial_video_recording.jpg
图 4. 在 AVP 里面录制空间视频

avp_spatial_video_playing.jpg
图 5. 在 AVP 里面播放空间视频

要获得这项魔法目前有两个办法。

  • 如果有 iPhone15,可以打开「空间视频」,然后拍摄的时候就多了这种格式可选。
  • 如果没有,可以使用 AVP 来进行拍摄。

但有三个我感受到的问题:

  • 目前使用 AVP 进行拍摄的控件还有些让人困惑,因为怎么拍全景图,怎么拍一般图,怎么拍视频,入口划分很不清晰;
  • AVP 拍摄的图片和视频的分辨率都经过压缩,只能说基本够用,所以如果是要进行后续处理的创作,最好不要用;
  • 最后也是摩擦力最大的一点是,用户怎么有脸(虽然脸被遮住了)戴着这个东西拍摄呢? 反正我是没法想象自己小孩儿过生日的时候,为了获得可以穿越回去的视频,头顶 AVP 一边唱生日歌一边录像;

结论:虽然分辨率有限,但是被送回那一刻的感受仍然很酷。光是想一下可以这样去回顾自己跟亲人和朋友相处的时刻,就让你觉得几万块也没什么。希望拍摄设备快速普及。

分享和访客模式

如果说 Apple 为了用户没那么寂寞做了一些功能的话,那么它在分享和访客模式这部分还做了很多努力保证你活该那么寂寞。

先说分享。

要通过截图或者录制视频,和其他人分享自己在 APV 里面的体验是很困难的:

  • 那些除开评测大概率用户不想分享的东西(比如这篇里面这些截图),可以通过按键截屏分享:但它们的分辨率很低,跟在 AVP 里面看到的完全不是一个东西;
  • 而所有用户真正想要分享的部分(比如刚刚上线的一些足球集锦视频),按键截屏之后会被涂黑:我知道这是对 Apple 来讲成本最低的实现方式,但这种截图的时候无提示截完了之后不让看的体验无限接近于送用户一句 「fuck you」

avp_screenshot.jpg
图 6. 大部分值得分享的都没法截图

把头显直接拿给朋友去用,就更难了当然,这里有一些难度是意料之中的,毕竟它是跟用户的眼动和手动做了匹配的设备。 ,所以苹果专门开发了访客模式。

应该说,在我非常有限的分享给他人使用的过程中(前前后后就家里几个人),访客模式表现得非常糟心。哪怕「访客」条件优异(不近视,懂英文),戴上它也有可能出现各种问题。本来 AVP 有一个挺好的功能是支持连接到 Mac 上显示当前画面,如果用在访客模式的话,处于指导位的人就可以知道对方目前在眼镜里面看到了什么:但是这个功能一摘下头显就会失效,于是 deadlock 了。

结论:这部分为啥这么差劲,我想不出来原因。