从Apple Vision Pro到AIGC， 漫谈未来苹果MR产品如何落地

写在开头

悲观者往往正确，乐观者往往成功。

Apple Vision Pro 是一个糟糕的半成品？

我想说说我作为一名VR从业者的观点， 我的观点立场鲜明 - Apple Vision Pro是一个技术上很牛逼的产品，它可能不是最终态，但是它在许多层面已经是Best！ 而Apple Vision Pro的未来其实现在没有任何人能下结论，它取决于苹果 - 开发者 - 用户三方是否能达成默契，促进MR生态不断繁荣。 用玄一点的话来说：信则灵，不信则不灵。

Apple Vision Pro 为什么是一个技术上非常牛逼的产品？

自研SoC + 自研操作系统

首先从软硬件基础设施上来说， 这是一套自研的计算芯片M2 + 传感器处理芯片R1 和自研Vision OS 操作系统，光这两个自研，就已经睥睨一众VR/AR/MR 产品了， 没有之一。

M2 芯片负责12个摄像头的图像处理， 苹果的处理器在图像处理能力上比较强，因此12路图像处理可以耗费更小的功率，发热更小， 从而需要更小的散热器尺寸和更低的风扇转速。 这是Apple Vision Pro能够轻薄安静的关键。

R1自研芯片则专门负责5个传感器和6路麦克风。 可以想象这是专门用来处理需要一直在线的信号 - 摄像头在不用的时候可以关闭， 从而可以更合理地控制功耗。

自研SoC最大的优势是可以自己把握开发进度， 不用受制于供应商，并且可以扩大自家芯片的产量从而降低单片成本。

自研M2 + R1芯片

自研Vision OS操作系统的原因是因为这是一个全新的计算平台，所有的UI，交互，甚至通信等底层技术需要重造和优化，以期获得最佳体验。

Vision OS 底层Core OS 和MAC OS， 和IOS兼容，这就意味着苹果海量2D APP可以直接通过2D转“3D”的方式为Apple Vision Pro所用，这样MR最重要的生态一环就不是从零开始。 注意这里的3D还是伪3D，真正的3D应用需要广大开发者进行开发。

Vision OS 底层和Mac OS，IOS兼容

双4K Micro-OLED

Apple Vision Pro从硬件层面上和其他一众VR产品拉开差距的还有两颗Sony定制的4K Micro-OLED 微型显示屏。 不要小看这颗微型显示屏，就2023年的当下，目前主流的VR产品大部分都在用LCD或者 MINI-LED背光，最高分辨率单眼2K。 主流的AR眼镜用的是Micro-OLED，但是最高分辨率依然是单眼2K。

甚至在Sony 官网上都看不到4K Micro-OLED的存在。 只能说明这颗微型显示屏是苹果和Sony独家合作开发的，目前还未在其他产品上量产。

Sony 官网Micro-OLED参数和量产日期

3D面部扫描，Eye sight

除此之外，还有许多在其他产品上没有看到的微创新，背后蕴含了巨大的技术难度。 还记得发布会上提到用户在和其他人聊天时，Apple Vision Pro可以自然地显示用户眼睛部分的面部表情吗？苹果称之为Eye sight。

虽然这个设计我们都设想过，但是实现起来并不容易。

首先从硬件配置上来说，12颗摄像头中包括一颗LiDAR 和一组TrueDepth 收发模块。

在用户使用前可以拿起Apple Vision Pro【正面】对着用户面容进行3D结构光扫描，从而构建用户真实3D面容数据。

在Apple Vision Pro内部，还有两圈IR LED及IR Camera，用于对用户的眼球进行追踪。 结合前面3D 面部数据，通过AI融合成逼真的用户实时面部表情。

并且通过Apple Vision Pro 外部曲面玻璃细下额外的OLED 显示屏显示出来。 注意这个是Apple Vision Pro 的第三块显示屏，其他VR产品都没有的。

Optic ID - XR 产品最优雅的解锁方式

Optic ID，通过 LED 光照分析用户的虹膜，然后将其与存储在设备 Secure Enclave 上的注册 Optic ID 进行比较。按照苹果官方的说法，即使是同卵双胞胎，Optic ID也能检测出其不同。

Optic ID是继苹果在iPhone， iPad， Mac 产品上推出Touch ID， Face ID之后的第三种生物解锁方式。

从技术角度，虹膜解锁不算特别新，很多旗舰智能手机也在用，但是用在XR产品上算是很新鲜的。 其实简单想一下，Optic ID的引入不仅仅是为了解锁，也是为了未来在XR产品上更便捷地支付铺平技术道路。

交互极简 - Eyes, Hands, Voice

其实Quest也有手势控制，为什么Apple Vision Pro值得说道呢？

因为它太彻底了！通过眼动追踪注视app进行选中，通过食指拇指轻合进行点击；再轻轻上抬进行滚动。 眼视追踪注视搜索框，说出的声音直接转化为文字 - 这近乎minds control的操作。

我注意到Apple Vision Pro没有官方手柄，而是通过蓝牙可以连接Sony PS5的游戏手柄或者TrackPad及Keyboard，算是弥补了对于精确输入和游戏体验方面的不足。

Apple Vision Pro 没有缺点吗？ 当然也不是

在承认Apple Vision Pro技术足够牛逼的基础上，我们必须客观地认识它的不足，而这些不足也正是为悲观者所津津乐道的，包括：

• 外挂电池不够优雅

• 续航两小时不够长

• 重量不够轻佩戴不够舒适

• 分辨率没有8K 没有达到视网膜水平

但是如果我们用发展的眼光去看待这款产品， 需注意这是苹果的第一代MR产品也非库克心中的理想形态，库克其实是希望做成轻薄AR形态。

其实不管是Eye sight, Optic ID 还是极简交互方式，你会发现苹果的目标很明确，用最简单的方式使用硬件最强悍的机器，营造一种举重若轻地轻盈感。

也是基于这一点，我相信Apple Vision Pro肯定不是最终形态， 它需要几代的迭代，甚至脱胎换骨才能达到我们期望地轻盈且强大， 强悍却自然。

Apple Vision Pro和AIGC 能够擦出怎样的火花？

chatGPT 带动AIGC行业大火。AIGC 即“AI generated content”，又称生成式AI，意为人工智能生成内容。

但我们熟悉chatGPT 并非真的拥有智能，它其实仍然是基于概率的预测模型 - 一种通过上文不断预测下文最可能出现的第一个字的填字游戏。 看似不靠谱，却最终形成了非常出色的“智能”效果。

理论上讲，即使Apple Vision 不发布， chatGPT的出现本身就有重新塑造现有手机形态智能设备的潜力，因为当人工智能如此强大，AI应用本身可能会决定它的硬件平台，以最合理的方式去适应它，而非应用适应硬件平台。比如说我们传统的与手机进行手写输入 - 搜索 - 视觉反馈的交互方式就有可能被颠覆，进化出更适合chatGPT 应用的交互方式。比如语音、手势、视网膜投屏.. 很巧的是，这种交互方式可能恰好与MR 十分匹配。

在Apple Vision Pro之前，AIGC 本身可能是对iPhone 形成巨大的挑战。 现在随着Apple Vision Pro发布之后，苹果可以顺势加大对AI的布局，并且充分结合Apple Vision Pro硬件平台的优势，重新打造空间计算+AI的软硬件一体的最佳用户体验。

贾维斯 - 超级智能助理？

如果智能手机演化为更高级形态的交互设备， 而AI 进化为初步具备“意识”的AI + ，我们就可能实现类似钢铁侠电影里超级智能助理 - 贾维斯的形态。

而Apple Vision Pro + chatGPT 现在是最接近这一愿景的可能。它能充分理解你的意图，并且背后链接海量数据，从而给出你条理化的最佳建议。 其实这个对苹果最大的挑战还是数据、隐私问题，因为苹果一直宣称对数据隐私非常重视，而AI想要变得智能就必须能访问海量数据，甚至包含一些用户数据，有点左右互搏的意思。

但是在发展的大势面前，相信苹果也会顺应时代的需求做出改变。

钢铁侠的贾维斯超级智能助理

如果说贾维斯对目前的技术来说还是有一丢丢的距离，我们可以畅想更实际一点的应用， 比如购物！

618 在虚拟世界里让AI和闺蜜陪着你一起购物

首先线上和线下购物体验完全可以融合成一种虚拟空间的形态。

网店和线下知名的商场需要完成虚拟化上线，以一种虚拟现实的形式呈现货品。 3D结构光扫描出你和闺蜜逼真的虚拟形象，让你和闺蜜乃至其他顾客都出现在这一空间，其实有点元宇宙商店的意思，但是更真实！

进入店铺之后，假如说我们准备买一只手提包， 你可以呼唤一下Siri，这时候Siri是一个真实管家的形象（忘掉手里那个傻傻的Siri吧），出现在你的视野里。Siri管家会根据你今天的打扮，结合时下热门款，选择最适合你的几款包，并给你们讲解不同SKU之间的细微差别。

一番选择之后，确认这款包包和你虚拟出来的日常形象很搭，你通过Optic ID进行了付款。 大约第二天，这款包装崭新的包包就会通过现实世界送到你的手里。

小结 - 对Apple Vision Pro未来的期望

Apple Vision Pro的发布对整个VR、AR产业的影响无疑是巨大的，它的硬件性能，交互方式，Eyesight 对XR设备与人的关系的开放理念都会影响业界对于下一代VR产品的思考。

但是我并不认为这是苹果的又一个iPhone时刻，它更感觉是一个iPad时刻 - 新的物理形态已经出现，生态亟须完善。

我也不期待苹果能在一年内打造好 Vision OS 内容生态，可能需要几年或更长的时间慢慢完善。 特别是MR与AIGC究竟能擦出多大的火花，其实背后要看能有多大的魄力去开发投入。 对于MR类产品能够给我们提供怎样的体验，我一直相信是量变引起质变。 请给它多一点的时间去发育， 让子弹多飞一会儿，也许它能给你带来惊喜。

既然它叫Apple Vision Pro，那么未来一定有价格更低的非Pro版，因此普通消费者可以保持观望，第一代留给开发者进行开发完善。 到时候生态更成熟，价格更低，购入不迟。

我是@CaiCaiWood，一名现役VR研发工程师，欢迎关注、点赞、评论探讨，谢谢阅读！

作者声明本文无利益相关，欢迎值友理性交流，和谐讨论～