2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

2023-04-27 18:50:37 1点赞 5收藏 1评论

前言小阅:

当前的ETFT技术,受制于硬件和算法的限制在实际体验中表现确实很复杂。但让我意外的是,三款设备都是用XR2平台,但是性能表现差距却很大,却让我有点大跌眼镜。

下面细说。

背景

时隔半年多,去年发布的高阶版PICO 4 终于发售了。PICO 4 Pro 在PICO 4 带来的产品体验基础上,升级了眼动追踪(ET)、面部追踪(FT)、智能无级瞳距调节等。借此产品的发布,作为一个PICO老用户,集齐了PICO Neo3、PICO 4、PICO 4 Pro三款最热销的PICO产品做一个体验对比,来看看PICO 4 Pro这个国内VR一体机代表实际表现是什么情况。

2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

外观体验

三款产品均为白色主体,搭配白灰黑等色调;其中PICO Neo3主体是稍显粗糙的塑料材质,合模线也比较大。相比之下,PICO 4代得益于更小的体积、更好的做工,加上一体化的镜面设计,整体品质感更加高级。

2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

再来看看眼罩内部,三者均有两块巨大的光学镜片和不同的传感器模组,同时这里能明显看出PICO 4和PICO 4 Pro的区别(多了一些传感器),就意味着Pro版可以支持更多特性,这个后面细说。

2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

佩戴体验

相较PICO Neo 3,PICO 4和PICO 4 Pro的佩戴体验优势非常明显 首先Pancake光学方案让产品更轻薄小巧,戴上头部负担明显变轻;其次,4代采用前后平衡式设计,并且是旋钮松紧,多人佩戴更方便,再也不用松紧带反复调节了。

2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

此外,还有一些小细节的提升,例如鼻翼遮挡片,进一步提升遮光性,增加沉浸感。而PICO Neo 3的手动固定瞳距升级成了4代的电动无极调节,体验感更佳。

2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

而PICO 4 Pro在PICO 4的基础上,因为眼动追踪摄像头的加入,因此可以额外实现全自动精细化瞳距调节,自动调节范围:62~72mm。

2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

我试了下,基本上我配眼镜的验光师测量结果一致,非常省心。此外,还增加了多人瞳距信息记忆的支持,以往家庭用户多个人使用同一个设备就需要频繁调节瞳距而,PICO 4 Pro就可以省去很多麻烦。

ET FT体验

眼动追踪(ET)

所谓的眼动追踪(ET)就是通过头戴式内侧2颗红外摄像头,对眼部肌肉变化实时追踪,从而获取眼球/瞳孔位置。也就是靠眼神就可以进行操作,更加自然的交互。

2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

这里首先要表扬下字节的隐私合规方面一直做的很好,在功能开关下方显著位置标注了“眼动信息的原始数据仅本地实时处理,不上传...”,并有详细的隐私政策条文。

2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

基于职业习惯我仔细阅读了全文,大体的意思就是不会将传感器采集的原始数据上传(例如眼球、面部图像),提供给第三方的都是不具备识别能力的特征数据,另外基于实际场景需求会储存三方应用要求的追踪数据。 针对这个隐私PhD交互,个人建议这个提示交互可以做强制点,毕竟下面的小字我是后知后觉才发现的。 目前,PICO提供了自带的眼动演示和校准功能,在使用过程中我发现,如果你是使用框架眼镜,那就要注意下自己眼镜的镜框大小材质是否会影响到追踪精度。

2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

我使用的是这种大框眼镜,出现了偏移的情况且无法通过校准解决(校准会失败)。

2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

裸眼是没有问题的,定位很精准,可用性很高。另外,如果是配方眼镜的话,暂时还没有支持,以上的问题也已经反馈给PICO官方,后续会持续优化。 在支持度方面,目前支持眼动追踪的应用主要是一个三方应用“梦之境”,这是一个很轻松唯美的闯关游戏,相比于没有眼追的4代,引导精灵会根据眼球转动的位置移动,整体形象更加灵动,眼球也不需要频繁关注,带来的体验提升还是很明显的。

2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

除了带来交互体验的提升之外,还有一个特性就是ETFR(视线追踪渲染)。

2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

也就是注视区域始终清晰:重点渲染视线焦点,适当降低外围画面分辨率,保证人眼注视区域是清晰的,即使是画面边缘位置,也能实现“看哪儿,哪儿清晰”。这样的好处就是可以降低GPU负载、进一步提升性能。但目前还没有上线的游戏,期待后续适配的表现。

面部追踪(FT)

这个功能也是由头戴式内侧3颗红外摄像头(含2颗ET摄像头),实时捕捉五官的形态变化及周围肌肉变化实现的。

2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

在支持度方面,支持自家的Avatar 编辑器和一个三方应用轻世界。 官方宣称面部模拟可以模拟近400个维度面部及表情特征。从Avatar 编辑器的体验来看,常见的六种基本表情:愤怒、恐惧、快乐、伤心、厌恶、惊讶都可以表现的比较好。受制于虚拟形象的卡通性,很多夸张的表情没有表现的有真实情况下的张力,建议后期可以加一些偏真实向的表情模拟进来。

2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

在三方应用轻世界中,可以在多人社交的场景下使用不同的表情增加交流的信息度,使得人物可以更加生动,沉浸感提升明显;如果后面铺开的话,大家在元宇宙里玩狼人杀可能真的可以根据微表情去做推理了哈哈哈。

关于ETFT的展望

ET、FT两个特性,在未来可以有很大的挖掘潜力,我们以眼动追踪为例,这个技术依赖于眼球交互的几个特点

  • 高速指向。 眼部肌肉在人体中是反应速度最快的肌肉。

  • 不费力。 几乎没有任何身体动作。

  • 隐含性。 此功能通常被用户描述为“读心术”。有关用户眼部动作的信息可让系统知道用户想要与哪个目标互动。

  • 备选的输入通道。 眼睛凝视可为多年以来根据用户手眼协调性实现的手写和语音输入体验提供强有力的支持。

  • 视觉注意力。 另一个重要优势是能够推断出用户正在关注的对象。

简而言之,使用眼动追踪作为输入可提供快速且简单的上下文输入信号。 与其他输入(如语音和手动输入)结合在一起时,此功能非常强大,可以高可信度地确认用户的意图。那么,在当下和未来,我们可以实现什么呢?

可以大幅降低头控带来的眩晕感 可以提升视觉效果,目前注视点渲染的基础上还可以做例如像差校正等更佳的视觉调优 可以做更精细化的目标识别,开发者和广告商可以更好的了解你的关注点 可以增加可变的操作维度,比如模拟激光眼? 可以帮助开发出更智能的用户界面(例如弹窗智能不遮挡) 还可以提升作弊成本,不是真人使用直接给你判定为作弊 还可以提供残障人士或者其他交互方式不可用时的补充 。。。 非常多,这在未来一定是脑机时代之前一个非常重要的人机交互技术。

性能体验

PICO 的PICO Neo3、PICO 4和PICO 4 Pro 发布时间跨度长达2年,但是搭载的SoC平台都是高通XR2,那么他们性能就一样吗?

2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

其实不然,首先4代的显示屏分辨率进一步提升,这会一定程度上增加功耗。

而PICO 4 Pro相比PICO 4,也有很多提升。首先内存由8GB LPDDR4x,4266Mbps提升到8GB LPDDR5,6400Mbps。而储存方面,增加到512G,这对重度使用者尤其是游戏党来说是非常好的消息。续航也有提升,从5300mah增加到6000mah。 那么实际表现究竟如何?我分别测试了三款设备的游戏加载性能和运行性能的表现(均为8G版)

游戏加载性能

首先看下三款大型游戏加载时间对比,可以看到三款机器加载时间上差距非常小,4代机器相比于3代略有优势。

2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

游戏运行性能

2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

可以看到,因为应用商店的审核机制,实际上用户能下载的游戏都是有体验保障的,基本不会出现卡顿的情况,三款设备表现差距都没有很大。

2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

那么为了进一步分析性能差异,我们手动提高渲染配置,来做下压力测试。 选用的是乒乓致胜11分,因为场景比较固定,且可以调节渲染配置,可以更好的控制变量对比。这次我在25度室温下,三者机器均长时间待机冷却后直接启动游戏测试,分别测试推荐配置和最高配置下、一分钟AI对战渲染的FPS表现。

2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

从结果可以看出,在最高渲染配置下,三款性能表现差距远远超出我的预期。

2023年了,VR眼动/面部追踪是否可用?PICO 4 Pro对比Neo3、4最全评测

PICO Neo3的FPS基本就是在35-40之间,体感非常卡顿,几乎无法游玩;而PICO 4的表现好一些,基本在50帧左右;而PICO 4 Pro的表现居然更佳,达到60+。 粗略来算,PICO 4 Pro这款游戏的性能表现是PICO 4的1.25倍、是PICO Neo3的1.7倍! 大概可能是因为内存性能的差异吧,如果对此有研究的小伙伴可以告诉我。 要知道,不仅如此,PICO 4 Pro还支持ETFR注视点渲染技术,可以进一步降低GPU负载、提升性能,未来支持更多应用后,3者的性能差距会进一步提高,这对于一些追求极致画质的玩家来说绝对是一个福音.

总结

PICO 4 Pro的发售,使得国产VR一体机也迎来了更多维度的交互体验提升,目前硬件已经完备,但是算法和应用适配还需要更多打磨。除此之外,Pro版本的在运存、储存、续航上的提升也给不同用户群体提供了更 “Pro” 的选择,我觉得这个才是当下软件生态尚未完善、高通SoC摆烂的当下,重中之重的体验升级,建议有预算的用户还是直接上Pro版体验更佳。

参考资料

1 基于眼睛凝视的交互 - Mixed Reality

2 https://www.ncbi.nlm.nih.gov/pmc/articles/PMC7219342/

关注我,关注新世代科技&健康之路

作者声明本文无利益相关,欢迎值友理性交流,和谐讨论~

展开 收起

PICO 4 Pro VR眼镜一体机(4320x2160、90Hz 、8GB+512GB)

PICO 4 Pro VR眼镜一体机(4320x2160、90Hz 、8GB+512GB)

2449元起

PICO 4 VR眼镜 一体机(4320*2160、90Hz)

PICO 4 VR眼镜 一体机(4320*2160、90Hz)

2069元起

PICO 4 Pro VR 一体机vr眼镜智能眼镜虚拟现实体感无线串流运动3d类vision pro空间视频

PICO 4 Pro VR 一体机vr眼镜智能眼镜虚拟现实体感无线串流运动3d类vision pro空间视频

3799元起

PICO 4 Pro 礼遇版 VR眼镜一体机(4320x2160、90Hz 、8GB+512GB)

PICO 4 Pro 礼遇版 VR眼镜一体机(4320x2160、90Hz 、8GB+512GB)

4099元起

PICO 4 VR一体机 近视镜片 磁吸 依视路非球面防蓝光近视镜片 一副2支装 联系客服提供配镜信息

PICO 4 VR一体机 近视镜片 磁吸 依视路非球面防蓝光近视镜片 一副2支装 联系客服提供配镜信息

349元起

PICO 4 Pro Plus版 VR眼镜一体机(4320x2160、90Hz 、8GB+512GB)

PICO 4 Pro Plus版 VR眼镜一体机(4320x2160、90Hz 、8GB+512GB)

3929元起

PICO Neo 3 VR眼镜 一体机(3664*1920、90Hz)

PICO Neo 3 VR眼镜 一体机(3664*1920、90Hz)

1119元起

PICO 4 Pro VR 眼镜一体机3D智能体感游戏机 游戏设备虚拟现实Neo 4非visionproAR

PICO 4 Pro VR 眼镜一体机3D智能体感游戏机 游戏设备虚拟现实Neo 4非visionproAR

2449元起

PICO Neo 3 尊享版 VR眼镜 一体机(4K、256GB)

PICO Neo 3 尊享版 VR眼镜 一体机(4K、256GB)

1120元起

PICO G2 4KS VR眼镜 一体机 黑色 (3840*2160、75Hz)

PICO G2 4KS VR眼镜 一体机 黑色 (3840*2160、75Hz)

暂无报价

小鸟看看(Pico)G2 Pro 小怪兽2增强版 VR一体机

小鸟看看(Pico)G2 Pro 小怪兽2增强版 VR一体机

暂无报价

PICO Neo3 一人之下联名礼盒款 VR眼镜 一体机 (3664*1920、90Hz)

PICO Neo3 一人之下联名礼盒款 VR眼镜 一体机 (3664*1920、90Hz)

暂无报价

Pico 小鸟看看 G2 4K VR眼镜 一体机(3840*2160)

Pico 小鸟看看 G2 4K VR眼镜 一体机(3840*2160)

暂无报价

Pico 小鸟看看 Goblin小怪兽 VR一体机 标准版

Pico 小鸟看看 Goblin小怪兽 VR一体机 标准版

暂无报价

Pico Neo DK版 VR一体机 标准版 橙色

Pico Neo DK版 VR一体机 标准版 橙色

暂无报价

4 VR一体机 8+256G Neo3智能眼镜 VR眼镜 体感游戏机 Pico 4 8+256G标准版

4 VR一体机 8+256G Neo3智能眼镜 VR眼镜 体感游戏机 Pico 4 8+256G标准版

2799元起
1评论

  • 精彩
  • 最新
提示信息

取消
确认
评论举报

相关好价推荐
查看更多好价

相关文章推荐

更多精彩文章
更多精彩文章
最新文章 热门文章
5
扫一下,分享更方便,购买更轻松