这款AR眼镜背后的独家设计故事
(映维网Nweon 2024年11月21日)《快公司》的马克·威尔逊(Mark WilsonL)日前拜访了Meta并体验了Orion,并采访了可穿戴设备设计负责人关于这款AR眼镜背后的独家设计故事。以下是具体的整理:
Meta非常清楚自己不想做什么。
早在2016年,亦即马克·扎克伯格将Facebook改名为Meta的五年前,设计师松田桂一就发布了一部名为《Hyper Reality》的短片。故事情节十分简单:一位年轻的灵活就业者乘公共汽车前往商店购买杂货。但当故事是通过未来的增强现实眼镜讲述时,这个简单的任务就变成了视觉恐怖体验。
世界的每一个表面都覆盖着数字广告,每一个都在争夺主角的注意力。一只哥斯拉大小的猫咪挡住了天空,一位生活教练敦促她跑步,一只虚拟小狗在推车里呜咽着要买越来越多的东西。尽管本片打造出了一个未来的数字化社会图景,但女主角却不断迷失自我,并不断询问“我是谁?”,“我要去哪儿?”,甚至在最后遭到物理割伤时,本需奔赴医院急救的她却因自己的数字角色丢失所有经验值而选择前往教会“复活”。
Meta负责产品设计、增强现实、人工智能和可穿戴设备的副总裁约书亚·杜(Joshua To)说道:“《Hyper Reality》这个视频萦绕于我们所有人的脑海之中。”Meta产品设计总监米歇尔·普杰斯(Michelle Pujals)表示赞同:“我们认为这是一个巨大的责任。我们点亮的每一个像素都应该是有价值的。”
在不久的将来,Meta打造的AR眼镜就会作为一款完整的消费产品进入市场。但约书亚·杜相信它不会令你困于“Hyper Reality”,而是更接近于一款可以轻松开关的安静计算机。他说道:“这有点像你对Airpods的看法。”
经过两个小时的体验后,以及与Meta高管讨论了Orion之后,我留下了一个明显的印象:Meta是懂行的,他们有可能会把事情做好。
Orion看起来像是尚未减肥的雷朋眼镜。多年来,Meta一直在朝着轻薄化的方向努力。Meta跟我说,当产品正式发货的时候,特定尺寸会比现在展示的模型薄33%到50%。
这款设备充满了先进的技术。它几乎具备智能手机的所有功能,并外加七个摄像头(四个用于定位,两个用于追踪眼睛,一个用于人工智能查询),四块电池,两个Micro LED投影仪。Meta之所以能够将所述组件缩小到如此之小,是因为它们几乎都是定制的硅组件,其中大部分属于专有。
你可以在公共场合佩戴这种眼镜,但里面的内容都是隐秘的。当戴上Orion时,对方实际上看不到你所看到的画面。相反,它的镜片包裹着最薄的碳化硅薄膜。折射率是玻璃的两倍,光不仅从会反射回来,而且实际上通过材料中的微蚀刻通道流动,最终只有佩戴者才能看到。当然,这意味着佩戴Orion会给外界带来微弱的彩虹色光芒。
这种光芒不足以将人脸变成五彩纸屑蛋糕,但它是UX团队在整个界面设计中所倾向的美学。应用图标本身采用宝石般的颜色渐变。“Aero”用户界面的灵感来自于气凝胶,世界最轻的半透明材料。
有两个配件伴随着Orion。第一个是Meta所称的Puck,它负责设备的大部分处理工作。第二个,或许同时是最令人兴奋的一个是神经腕带。
这款腕带可以利用手腕周围的外部传感器来检测控制手腕和手的肌肉电信号,并开辟了一种方便和丰富的新型人机交互形式。不像基于摄像头的系统通过手和手指来检测手部的物理运动,同时不像控制器需要按压和推动,即便你不能做出大幅度动作,或者手指少于五个,手腕的肌肉信号都能提供控制信号。
Orion背后的核心用户体验与Apple Vision Pro非常相似。迎接你的是一组应用于面前浮动的应用图标,你的眼睛如同鼠标一样工作。当你看着特定应用的时候,图标会稍微放大。要打开应用时,你需要用食指轻触拇指。要返回,你可以轻触中指。
另外,拇指轻轻一弹就可以向下滚动一页。双击大拇指可以根据需要呼叫人工智能助手。每个窗口下方都有一个抓取条,你只需要看一下,捏一下就可以重新定位,用户界面会对你的触碰做出轻微的反应。
它的核心手势是手指轻触,并产生“咔哒”的声音,而你的手在半空中点击图标时不会发出这种声音。这种实际振动会加强体验。约书亚·杜表示:“当你的手指相互接触时,你基本上会产生触觉;有反馈,尤其是配上一定的音效和视觉效果,真的会非常令人满意。如果你的触觉是正确的,那是有帮助的……可以强化你对界面的理解。”
尽管目前Orion的尺寸依然很大,但穿戴起来还是很舒服。这在很大程度上不仅是有Hololens作为对比,而且是因为它拥有相对较宽的视场(70度)。
这个视场意味着你可以在面前几英尺的位置打开社交媒体、视频通话和网页浏览器。你可以拖动窗口关闭,或将其推到房间更远的地方。
对于这个视场,最令人印象深刻的时刻是玩《3D Pong》。我站在桌子的一端,而约书亚·杜站在另一端。当我们的眼镜无形地同步,并可以毫不费力地来回击球时,我完全停止了对这款产品技术局限性的思考。突然间,我可以想象我的家人戴着这款眼镜打开一款滑稽的棋盘游戏,或者与他人合作创建一个共享模型。Hololens和Magic Leap都已经触及了其中的一角,但我认为,当它变成一副眼镜形式时,当我可以隔着桌子看到对方的眼睛时,这是完全不同的体验。
米歇尔表示:“我认为,我们所有人都在努力建立人与人之间的联系。让你从(手机)或笔记本屏幕解脱出来,看着那个人。”
实际上,共享全息图和游戏是AR最容易的卖点。
例如在一个演示中,我走到厨房,看着一堆配料,包括一袋袋的奇亚籽、抹茶和燕麦,然后询问人工智能我能做什么。每种配料都有发光的文字标记,人工智能生成的配方会弹出。这只是一个静态的概念证明,而Meta承认这是一个演示体验,没有凌乱的冰箱或食品储藏室来展示不同的实际场景。
尽管如此,这一切依然有点奇怪,在家居环境中,每个物品都顶迷离炫目的发光标签。
约书亚·杜承认:“我认为我们想要达到一个增强现实不会对你造成阻碍的状态:它是你周围世界的一种更自然的延伸,而不是像这种人为的照亮。如果我们想要将相关元素转化成游戏,我想我们应该可以让UI元素变得更加独特。但对于烹饪流程,我认为,如果我们能(从包装上)取一个颜色样本和字体,那就太棒了,让人感觉‘就应该是这样子’。”
在AR中,要做到悄然融入比做到显眼更棘手。为了让屏幕更清晰,米歇尔与硬件和软件工程师合作,正确渲染像素,抚平粗糙的边缘,消除奇怪的畸变(团队同时在开发一种新版本的无衬线字体Optimistic,它的曲线更少,墨印更深,更清晰)。
在向市场正式推出产品之前,Meta需要做出的最大决定之一是围绕着自己的屏幕进行技术权衡:优先考虑视场还是分辨率?
Meta有了一个Orion版本的分辨率是我测试的版本的两倍。但就像你家里的投影仪一样,图像越大,就越模糊。Meta依然在考虑如何调整技术以适应消费者,如何平衡视场和清晰度。
这是一个合理的争论,没人想在65英寸的屏幕玩Gameboy。但同时,如果你的图像小而清晰,则Orion就会接近手机的限制。
如果说渲染已经十分困难,UX编排就更难了。这是约书亚·杜第一次申请Meta职位时的想法,当时他被问到AR的杀手级用例是什么。
约书亚·杜回答道:“我的答案还是一样。让通知变得不那么糟糕,对吧?如果你是总统,你要从一个会议到另一个会议,这要像你的幕僚长对你耳语一样。”
Meta的许多理想可以追溯到20世纪90年代,当时一位名叫马克·韦瑟(Mark Weiser)的研究人员在施乐帕洛阿尔托研究中心工作,并设想了一个人类不需要整天坐在电脑前面,而是通过“环境计算”处理任务的未来。他有时将其称之为“安静的计算”,就如同站在森林里,我们可以吸收各种各样的信息,但永远不会感到不知所措。这就是他想为人类创造的计算机,将电子设备融入我们的世界。
Meta的设计师希望通过个人电子设备重新实现这一理念。他们认为,通过使用增强现实眼镜——呈现在你面前的一个屏幕——他们可以创造出比手机更能融入世界的计算机。米歇尔表示团队的目标是打破定义了我们今天的用户界面的矩形。
约书亚·杜说道:“对于我们的主屏幕是一个网格化的应用排列,我感到有点难过。我期望当我们最终推出一款产品时,我们可以进一步发展。但这有点像早期的拟物化图标(早期iPhone添加假木纹和其他模拟饰面,以帮助人们熟悉新颖的互动),它确实帮助人们了解了什么是可能的。”
Meta对AR的乐观态度可能会让你翻白眼,尤其是这家公司在社交领域的主要营收手段是广告。最终,Meta做出的设计选择将决定这项技术是一种超级广告干扰设备,还是一种能够提升人类幸福感的工具。
约书亚·杜表示:“我认为,在很多情况下,在大多数情况下,我们会采用一种‘嘿,如果你想看的话,我们有东西给你看’的方式,而不是‘这里有什么’的方式。想象一下这样一种模式,你可以看到什么,就像我喵一眼灯光一样,‘你对这个感兴趣吗?’然后,只有当你真的感兴趣的时候,我们才会给你更多的信息。”
在隐私方面,Orion对数据进行加密和抽象,并将大部分信息存储在本地。设计师们认为,他们可以减轻联网带来的最糟糕可能性,比如在你的视线中立即定位任何人并获取对方的所有信息(最近有两名哈佛学生破解了Meta的Ray-bans眼镜,并与面部识别软件配合使用)。
Meta已经建立了自己的内部原型,给你通过Orion看到的人贴上名字标签。约书亚·杜提出了一个小型会议的想法。其中,你可以出席并选择加入,就像在手机分享你的联系方式一样,允许你的名字向其他人显示。但你可以选择不展示自己的名字,这时Orion会让你保持匿名。
他说道:“我认为,如果我们能够以一种非常尊重隐私和深思熟虑的方式精心制作姓名标签,那将是我们非常感兴趣的事情。”
几十年来,增强现实一直都只是一个梦想,而我们现在开始触及这个技术可行性。在试用了Orion之后,我更加相信AR眼镜可以在我们的生活中发挥作用,或者戴起来足够吸引人。但要让它们从整体上有益于人类,这要比简单地将人们的目光从手机屏幕转移到周围的世界更具挑战性。
我们不能只是简单地发文什么是可能的,我们更是不断发文什么是必要的?什么是真正值得的?