AR创业者
关于Meta AR眼镜Orion新产品细节曝光:杀手级应用在哪、隐私、产品迭代......产品负责人描述是AR领域的“AirPods”。
Meta认为其AR眼镜Orion可成为AR领域的“AirPods”
早在今年9月,Meta首次展示了其Orion增强现实眼镜的早期原型。尽管距离成为一款实际可购买的产品还有很长的路要走,但公司确实相信它能够实现这一目标。
实际上,Meta可穿戴设备负责人认为,Orion有朝一日可以成为增强现实设备中的“AirPods”。
Meta和苹果当然在用非常不同的方式解决同一个问题。两家公司都希望最终推出一款真正类似普通眼镜的产品,可以呈现高度真实的AR内容。然而,Meta自豪地展示其开发进展,而苹果的任何原型产品都被严格保存在实验室中。
不过,两家公司似乎共享一个理念,即技术应当增强现实世界的体验,而不是取代它。
这也是苹果CEO库克表示AR比VR更有趣的原因之一。Meta似乎也将其Orion项目视为一种人们需要时佩戴、不需要时摘下的设备,而非全天候佩戴。
Meta公司内部负责人Joshua To在接受《Fast Company》采访时也表达了类似观点。
To认为Orion不会让用户沉浸在“现实2.0”中,而是一个安静的计算设备,你可以轻松佩戴和摘下。他说:“这有点像你使用AirPods时的方式。”
换句话说,当你想稍微从现实世界中抽离出来听音乐时,你会戴上AirPods;而当你希望与周围的人互动时,你会摘下它们。
AR眼镜识别我遇到的人一直是一个“杀手级应用”。Meta表示,它计划实现这一功能,但采用了一种出人意料地类似苹果的隐私保护方式。
Meta已经开发了内部原型,可以通过Orion为你看到的人显示姓名标签。To形容这一体验“非常酷炫”,让你可以认出房间内的每一个人。他提出了一种设想,比如在一个小型会议中,参与者可以选择“加入”,就像在手机上共享联系方式一样,这样他们的姓名可以被其他人看到。如果选择不加入,Orion会保持你的匿名状态。
“如果我们能够以一种非常尊重隐私且经过深思熟虑的方式实现姓名标签,我认为这将是我们非常感兴趣的事情。”To说道。
以下是《Fast Company》采访原文:
https://www.fastcompany.com/91229358/inside-metas-long-term-vision-to-make-its-orion-glasses-the-airpods-of-augmented-reality
解读Meta的Orion智能眼镜:打造增强现实领域的AirPods
Meta非常清楚自己不想做什么。
2016年,在Mark Zuckerberg将Facebook更名为Meta的5年前,设计师Keiichi Matsuda发布了一部名为《超现实》的短片。剧情很简单:一名零工经济工人乘坐公交车去商店购物。但当故事通过未来增强现实眼镜的视角展现时,这个简单的任务变成了一场视觉噩梦。
世界的每个表面都被广告覆盖,每个广告都是一个争夺她注意力的智能应用。一只哥斯拉般大小的猫遮住天空,生活教练催促她为了效率而奔跑,购物车里的虚拟小狗不断呜咽让她买更多东西。最终,她的身份被盗,所有经验值都丢失了。当她站在教堂台阶上画十字加入天主教时,她的生活重生 - 伴随着一套新的渴望关注的应用程序。
"我们都被《超现实》视频所困扰,"Meta AR、AI和可穿戴设备产品设计副总裁Joshua To说道,产品设计总监Michelle Pujals也表示赞同。"我认为这对我们来说是一个巨大的责任。我们点亮的每一个像素都应该物有所值。"他说。
我们坐在Meta门洛帕克总部内的一个"人造现实"空间:一个盒子里打造的客厅。我们面前的咖啡桌上放着一块碳化硅,看起来像一块刚从太空降落的彩虹陨石(实际上是在实验室中培育的)。旁边就是Meta的存在理由:一副厚重的Wayfarer式眼镜,他们称之为Orion。To认为Orion不会是一个让你陷入现实2.0的地方,而是一台你可以轻松戴上和摘下的安静电脑。"有点像你对AirPods的理解,"他说。
在未来几年(Facebook收购Oculus后的11年多),Orion的某些版本将作为完整的消费产品推向市场。它可能会与Apple下一代Vision Pro竞争,也许会在Apple传闻中的AR眼镜(如果真能上市的话)之前推出。所有这些项目都在设想智能手机之后的下一个交互时代。通过利用先进的成像技术和新时代的AI,他们希望将计算从手中分散到环境中。但Meta能在这一领域与Apple并列提及的事实曾经是不可想象的 - 也许连Mark Zuckerberg本人都没想到。
在与Meta的Orion项目负责人进行了两个小时的演示和讨论后,我留下了这样的印象:Meta真的明白,他们可能真的能成功。只要他们能保持克制。
构建大眼镜
Meta的Orion眼镜看起来像一副服用了Ozempic(减肥药)的Rayban。Meta多年来一直在朝着这个外形因素努力,从Quest头显开始打造各种令人头晕的DIY装置,在没有微型化的情况下模拟AR体验。据说到Orion发布时,某些尺寸会比现在展示的缩小33%到50%。
Orion装载了令人生畏的技术,重量在头部均匀分布。它几乎拥有手机的所有功能,外加七个摄像头(四个用于定位,两个用于追踪眼睛,一个专门用于AI查询),在扬声器周围的镜腿中隐藏了四个电池,以及两个向镜片投射图像的微型LED投影仪。Meta之所以能将这些组件缩小到如此小巧,是因为几乎全部使用定制芯片,其中许多仍具有专有性,Meta尚未分享内部结构的照片。
当你在公共场合佩戴这副眼镜时,其内容是隐秘的。你实际上看不到别人戴Orion时看到的内容,这是因为投影仪不会在镜片上反射让他人看到。相反,它的镜片包含最薄的碳化硅薄膜。碳化硅的折射率是玻璃的两倍,光线不只是从硅表面反射,而是通过材料中微蚀刻的通道流动,最终只有佩戴者才能看到。这也意味着佩戴Orion会给外部世界带来最微弱的彩虹光泽。
这种光泽不足以改变某人的面貌(无论是在现实生活中还是通话中),但这是UX团队在整个界面中采用的美学风格。用Pujals的话说,"我们拥抱了这些界限。"应用图标本身使用宝石般的颜色渐变。其"Aero"用户界面的灵感来自气凝胶——世界上最轻、半透明的材料——面板闪烁着彩色光芒。把Orion想象成超现实世界中的清淡版本。
虽然没有任何线缆,但Orion始终配备两个配件。第一个是Meta称之为Puck的设备,负责处理大部分运算。第二个——也是更令人兴奋的——是Neural Band(神经带)。
这个带子本质上是一个拍打式手环(可惜不能拍打),可以测量和解释你身体的电信号。实践中,这意味着当Orion的摄像头经常能看到你的手时,即使在看不到的情况下,这个手环也能感知最细微的动作。在这种情况下,手指的轻点和弹动会得到最轻微的触觉反馈确认。
Orion的核心用户体验与Apple Vision Pro非常相似。你会看到一个悬浮在面前的应用面板,你的眼睛作为鼠标工作,当你看向图标时它们会稍微放大。要打开应用程序,你需要用食指轻点拇指。要返回,则用中指轻点。(从技术上讲,Meta建议你把手翻转过来以区分这个手势,但这是为了让你这个用户理清思路,而不是系统的需要。)用拇指轻弹可以滚动页面。双击竖起大拇指可以随时呼叫AI助手。每个窗口下方都有一个抓取条,你只需看着它并捏合就可以重新定位——UI会随着你的触摸产生最轻微的弹性弯曲。
Meta对未来Neural Band风格的设备还有许多未公开的计划——在完整版Orion发布前的一年左右时间里,团队正在开发更复杂的交互方式,比如打字(他们设想任何表面都可以在紧要关头变成键盘)。但Orion之所以能如此快速地让人感到舒适,与振动未来技术无关;这是因为轻点手指的核心手势会产生一个你在空中挥手点击图标时得不到的"点击感"。设备实际的振动只是强化了你已经在身体上感受到的东西。
"基本上当你的手指相互接触时会有触觉反馈,"To说。"特别是配合一些音效和视觉效果,感觉真的很令人满意。如果你把触觉做对了,这有助于...强化你对界面的理解。"
佩戴Orion的体验
尽管尺寸偏大,但佩戴Orion相当舒适。这不仅归功于设备的形态,还因为其相对较宽的视野(70度)——在现实世界中,这几乎和眼镜框架一样宽,与早期Hololens的小窗口效果相比,其截断点更自然。
这种视野意味着你可以在面前几英尺处打开社交媒体、视频通话和网页浏览器。你可以把窗口拖近,模拟电脑显示器,或者把它推远到房间里。
展示视野优势最令人印象深刻的时刻是玩Meta的3D乒乓球演示。像《创》中的水族箱一样摆在桌子上,我站在一端,To站在另一端。当我们的眼镜无形地同步,轻松地来回击打球时,我完全不再考虑产品的技术限制。突然间,我可以想象我的家人戴着这些眼镜玩一个古怪的桌游,或者与人合作共享模型。Hololens和Magic Leap都已经触及了这些想法,但让我说,当它只是一副眼镜时就不一样了,我可以隔着桌子真正看到To的眼睛。
"我认为看起来违反直觉的是,我们所有人都在努力实现的是人与人之间的联系,"Pujals说。"让你从[手机]或笔记本电脑屏幕中走出来,看着对方。"
实际上,共享全息图和游戏是AR相对容易实现的应用。更具挑战性的是其他所有功能。
例如,在一个演示中,我走到厨房,看着一堆食材,包括奇亚籽、抹茶和燕麦,然后询问可以用它们做什么。每种食材都标注着发光文字,一个由AI生成的菜谱漂浮在上方。这只是一个静态的概念验证,Meta承认这是一个理想化的演示,没有展示真实环境下杂乱的冰箱或储藏室。即便如此,整个体验还是有点奇怪 - 在家居环境中,那些发光标签显得不太自然。
"从理念上讲,我们希望AR能更加融入生活 - 成为你周围世界的自然延伸,而不是明显突兀的人工元素,"To承认道。"如果我们是要把这些食材变成游戏元素,UI元素可以更加突出。但在烹饪流程中,如果我们能采集包装的颜色样本和字体,让一切看起来浑然天成,那就太棒了。"
在AR中,微妙比直白更难实现。虽然Orion的彩虹世界令人陶醉,但一年前,它更像是戴着醉酒眼镜。Pujals的用户体验工作很大程度上是技术性的。为了让屏幕清晰可读,她与硬件和软件工程师合作,在碳化硅中正确渲染像素,平滑粗糙边缘,消除异常现象。(该公司还在开发其无衬线字体Optimistic的新版本,减少曲线并加深墨水池以提高产品中的可读性。)
Meta在发布产品前需要做出的最重要决定之一是关于屏幕技术的权衡:他们是优先考虑视野还是分辨率?
Meta已经有了一个分辨率是我测试版本两倍的Orion版本。但就像家用投影仪一样,图像越大就越模糊。Meta仍在权衡如何为消费者调校他们的技术,在图像扩展和清晰度之间取得平衡。这是一个有效的争论,因为Orion内部的世界确实有点模糊。没人想在65英寸屏幕上玩Game Boy。但同时,如果图像小而锐利,Orion又会退回到类似手机屏幕的局限。
向环境计算回归
如果渲染细节很难,那么通过用户体验来编排就更难了。To回忆起他第一次申请Meta职位时被问到AR最具杀手级应用场景是什么。
"我的答案至今不变。就是让通知不那么烦人,对吧?"他说。"就像总统从一个会议赶到另一个会议,幕僚长在你耳边低声提醒的那种方式。"
Meta的许多理念可以追溯到20世纪90年代,当时在施乐PARC(鼠标的诞生地)工作的研究员Mark Weiser设想了一个未来:人们不需要整天坐在电脑前,而是通过"环境计算",让计算机无处不在。他有时称之为"安静计算",并认为就像站在森林里,我们能吸收各种信息却不会感到负担。这就是他想通过将电子设备编织入我们的世界而为人类创造的计算机。
Meta的设计师们想通过个人电子设备回归这个理念。他们(有点自相矛盾地)认为,通过使用AR眼镜——一个戴在脸前的屏幕,他们可以创造出比手机更加微妙的计算机。Pujals谈到他们的目标是"突破矩形的束缚",这些矩形现在定义了我们的用户界面,尽管Orion仍然依赖这些面板来显示应用程序和其他信息。
"我有点遗憾我们的主屏幕仍是一个应用程序网格。我希望当我们最终推出产品时,能让它更有进步,"To说。"但这就像早期拟物化图标一样[早期iPhone为了让新颖的交互更容易理解而添加的仿木纹等模拟装饰]。它确实帮助人们理解可能性。"
最大的挑战将是Meta自身的克制
Meta对AR的乐观态度可能会让你翻白眼,特别是考虑到该公司的广告业务基础,以及其对隐私经常采取的宽松态度。Orion的长期愿景很大程度上在于看到你所看到的,通过一个了解你是谁的AI,引导你走向它认为你最想做的事。最终,Meta的设计选择将决定这项技术是成为一个超级广告干扰设备,还是能够促进人类追求幸福而不仅仅是榨取价值。
"我认为在大多数情况下,我们会采用'嘿,我们有些东西,如果你想看的话'的方式,而不是'给你看这个'的方式,"To谈到Orion的发现方式。"[想象]一种探索模式,我可以看到东西,比如我瞥见灯光,'你对这个感兴趣吗?'只有当你感兴趣时,我们才会给你更多信息。"
在隐私方面,Orion既加密又抽象化数据,并将大部分信息存储在本地。设计师们相信他们可以减轻联网视觉的最坏可能性,比如即时人肉搜索你视野中的任何人。(最近两名哈佛学生黑入了一副Meta的Ray-ban眼镜,使其能够使用面部识别软件。)但Orion团队仍然没有回避他们作为社交网络的基础。
Meta已经建立了内部原型,可以为你通过Orion看到的人添加姓名标签,正如To所描述的,"知道房间里每个人都是谁真是太棒了"。他提出了小型会议的想法,你到场后可以选择加入,就像分享手机联系方式一样,允许向其他人显示你的名字。如果你不选择,Orion会让你保持匿名。
"如果我们能以非常尊重隐私和周到的方式实现姓名标签,这是我们非常感兴趣的事情,"To说。
增强现实已经是几十年的梦想,我们现在才即将实现技术可行性。在试用Orion后,我更加确信AR眼镜可以在我们的生活中发挥作用,或者足够吸引人去佩戴。但要让它们真正造福人类,将比简单地将人们的目光从手机屏幕转向周围世界更具挑战性。我们需要不断追问,不仅是什么是可能的,而是什么是必要的?什么是快乐的?什么是真正值得的?在每个时刻,最少的UI触碰是什么,既能丰富某人的生活又不会影响生活体验?
参考:
https://www.fastcompany.com/91229358/inside-metas-long-term-vision-to-make-its-orion-glasses-the-airpods-of-augmented-reality
—— End ——
内容拓展:
从AI生成绘本入手,打造AI儿童媒体平台,8人团队,400万美元种子轮
企业部署生成式AI成本与SOP;图片生成3D动作,基于小程序下一个爆款?AI社交应用头脑风暴;出海做XR游戏的SOP......
寻找VR大空间技术商 - 有多地政府供应场地,寻找做LBVR的内容:
扫码加入社区,查看更多VIP内容:
社区会员
#社区拓展 -更多生成式AI+3D创业内容:【生成式AI+3D产品化】有没有朋友做基于NeRF相关的AI+3D编辑产品的,可用于建模、游戏、大空间方向,有一个类似的编辑器可以参考: