PICO 4 Pro评测眼动追踪面部追踪加持的VR大脑到底有怎样的魔力

author
0 minutes, 54 seconds Read

你可能不知道,在现在的VR里,表达自我个性不是什么难事儿,甚至是一种如当年QQ秀一样的年轻潮流。

像扳动摇杆就可以随时调取发送的各种黄豆人表情,聚集时尚、可爱、千禧辣妹、潮流甚至福瑞等等各种元素的虚拟套装,以及囊括飞行、梦幻、搞怪等功能的虚拟道具,早就被10后的年轻一代熟练掌握。

但这些,仍旧属于目前认知中互联网的表达形态,无论是表情还是服装又或者是道具,都是某个用户个人的“审美取向”的表达。这也是人们之所以更期待下一代互联网的原因。在未来,我们也许可以真正表达自己的“情绪”而不是“审美”。

而此时此刻,我们手里,似乎就握着那个能带我们一探未来究竟的入口——PICO 4Pro。

士别三日,PICO 4 Pro的新升级

开箱PICO 4 Pro最直观的变化就是外观,正面的黑色面板变成了浅金色曲面镜,相比于手机常见“土豪金”,PICO 4 Pro的浅金色只有在某些角度看起来“很金”,大多数情况下都是若隐若现的呈现出金色,给人一种低调又奢华的感觉。除此之外,单纯从外观来说,PICO 4 Pro和PICO 4没有太大区别。

PICO 4 Pro的升级主要体现在硬件上,整机重量从586g增加至597g,带来这一变化的原因是电池容量从5300mAh增至6000mAh,以及3颗新增摄像头,包括2颗眼动追踪摄像头和1颗面部追踪摄像头。

内存方面,PICO 4 Pro仍然采用8GB运存,但从LPDDR4x升级至LPDDR5,它能够有效降低功耗、提高数据传输速度。这一升级比较直观的感受是,在打开某些应用时“转圈”的时间变短了、APP能实现秒开了。同时,在存储空间上,PICO4 Pro也从128GB/256GB直接升级到了512GB,对于难以游戏“断舍离”、喜欢拍照截图的玩家来说,无疑是重大提升。

同时,PICO 4 Pro仍旧保留着PICO 4如轻薄好用的Pancake光学方案,105°超大FOV、3D空间音效、彩色透视等等诸多优点。

整体来说,从参数上PICO 4 Pro的定位非常清晰,是面向更“极”的VR玩家,或者说有更重度需求的玩家。特别是新增加的2颗眼动追踪摄像头和1颗面部追踪摄像头,直接为PICO 4 Pro带来了此前从未有过的2个能力:眼动追踪(ET)和面部追踪(FT)。

这也是我们接下来内容会重点关注的2项能力,毕竟我们更想知道,当拥有了ET和FT后,我们的VR生活会变成什么样?拥有ET和FT的PICO 4 Pro,又会带来哪些惊喜?

PICO 4 Pro实机体验:稳中向好,ET/FT升级“VR大脑”

我们可能对参数的提升没有那么明显的感知,那么这些严格的工业设计、复杂的参数,是如何影响PICO 4 Pro使用体验的呢?

首先,最直观的就是佩戴体验。前文提到,PICO 4 Pro提高了电池容量、增加了3颗摄像头,整机重量也相应地增加到了597g。值得注意的是,整机重量的增加并没有带来想象中佩戴时重量增加等不舒适感,原因是PICO 4 Pro后置电池仓的平衡配重。

我们发现,应用了前后平衡配重设计的PICO 4,不含绑带的重量是295g、总重量为586g,也就是说绑带约为291g,前后配比约为1.01。用同样的思路计算发现,PICO 4 Pro的前后配比约为1.03,这就说明无论是在体感还是数据上,PICO 4 Pro的佩戴体验都没有因为重量产生非常明显的变化,依旧保持比较舒适、前后平衡、长时间佩戴也足够舒适的状态。

在这种工业设计下,PICO 4 Pro也没有忘记外形,浅金色高亮曲面镜的运用,一方面如前文所说符合目前的审美追求,运用了比较低调的设计。同时,“Pro版”对应“金色”也比较符合当今世代对“升级版电子产品”的共同想象,这一点也可以体现出PICO 4 Pro的浅金色高亮曲面镜是深思熟虑的选择。

此外,PICO 4 Pro的新手上手导航更加友好,划定安全区、调节瞳距等初上手步骤特别是增加了智能无级瞳距调节,只需要按着图片指示、动动眼珠就能把瞳距调节到比较合适的位置。软件的升级同样也带来了多人瞳距记忆、支持自动识别,也就是说,它可以记忆你和家人的瞳距,不管任何时间都可以随时取用,不需要换人时再次测量瞳距,离实现“即戴即用”更进一步。

说完整体性的升级,就来聊聊大家最关心的PICO 4 Pro加入的2颗眼部追踪摄像头和1颗面部追踪摄像头,对应眼动追踪(以下简称“ET”)和面部追踪(以下简称“FT”)。

一般来讲,眼动追踪有两个比较重要的指标,即准确度和精确度。在专业的解释中,准确度是刺激物的实际位置与眼动仪采集到的视线位置之间的平均误差。精确度是眼动仪在持续记录同一个注视点时的离散程度,下面这张图片能很直观的解释精确度和准确度在眼动追踪中的好坏表现:

在这方面,我们利用类似的靶子对PICO 4 Pro的ET表现进行了测试:

左为向上看,右为左右看(测试结果,仅供参考,闪光为动图压缩所致)

看得出来,上下左右以及45°等多个方向、多次快速移动的结果是比较接近的,也就是说PICO 4 Pro的ET在准确度和精确度上表现都相当优异,特别是用户还可以自行校准,校准后的精确度则更高。但值得注意的是,在实际体验中,佩戴眼镜由于可能会遮挡传感器,会导致误差比较大或者反应不灵敏的情况。

另外,PICO还提供了ET的官方示例,你的目光相当于“手电筒”,能够看出来,在灵敏度方面,体验还是不错的。有时候能感受到一些延迟。但并不是特别明显,几乎不影响体验。

ET在游戏中也带来了更好的体验。PICO最近新上的游戏《梦之境》就支持ET,游戏中承担“向导”的小精灵,会随着玩家的眼动变换位置。这一点小小的交互,不仅是对ET的应用,同时也是把玩家的除了语音和文字之外的“眼神”这一感官维度带入游戏里,加深跟游戏的互动,给玩家带来新奇又更具有生命力的游戏体验。

除了最直接的互动性提升之外,ET还有一个重要的作用——优化。根据PICO分享的数据,人眼注视高清区域只有2°,通过ET,PICO 4 Pro可以实现对注视区域进行重点渲染。据了解,这一做法可以降低5%的GPU占用,同时提升20-25的帧数,这对于游戏体验来说是非常明显地提升,比如降低的GPU占用就可以分配出来给更精细的建模和图像质量,而且提高的帧数可以直观地带来更流畅的游戏体验。

相比于ET,FT的效果更加直观,在设置虚拟形象时,通过右下角的表情入口就可以体验。

据了解,PICO 4 Pro的面部追踪是基于自研三重表情融合算法(blendshape),也就是可以精细化到基础脸、捏脸和表情,共计3大类别的近400个维度面部及表情特征。这样不同面部特征的人,在做不同表情时,他们的Avatar都能有贴近现实的、自然的面部表情变化。

实际体验下来,一些常见的表情,如wink、堵嘴、抿嘴、微笑、大笑、吐舌头等表情还是比较还原的,甚至左右嘴角上扬这样比较微小的变化都可以识别出来。同时,由于表情模拟也利用了眼部追踪,可以看到瞳孔位置会跟随使用者的变化而变化。

当然,一个新事物的出现,不可能完全没有问题。PICO 4 Pro的FT虽然精细捕捉了面部肌肉的运动和变化,但是由于动画建模和真实人类的细腻程度不同,导致有时候有些违和感。不过相信这一点在未来更强算力的芯片、更精细的建模出现后会有极大改善。

整体来说,PICO 4 Pro的体验感还是有很大提升的,其中最明显的是ET和FT。这两个能力的加入,对于硬件来说是基础功能的提升,但是通过《梦之境》和虚拟形象面部追踪,能看出两个基础功能的加入,实际上是给PICO 的软件生态提供了更多可能性。就像最初iPhone使用了电容屏,研发出了多点触控,到后面有了《水果忍者》这款利用多点触控的游戏再到现在无处不在、润物细无声的多点触控操作一样,关键功能点的提升,往往意味着打开了“可能性的大门”。

ET or FT,现在的VR到底能做什么?

那么问题来了,这些所谓的“可能性”到底是什么?

从ET上来说,首先就是增加了游戏创新的维度。我们可以提出很简单的畅想,未来VR游戏可以加入视线交互。比如在RPG游戏中,可以设定与NPC视线交互次数,用来培养好感度、获取游戏道具,这样不仅更真实,还避免枯燥无味的频繁对话,让游戏更加生动。又或者设计“手眼分离”的关卡以提高游戏难度、增加趣味性等等。

同时,ET的能力能够给游戏开发提供有效指导,优化VR世界中的关注焦点和盲区问题。比如利用ET能够提供的热图数据,判断出大多数用户都会优先关注的区域,在这个区域里放上重点内容。

而且基于ET提供的关注点数据,能够为游戏带来极大地优化提升。像PICO最近新上的《红色物质》系列,一直以超精美的画质闻名。而这个精美画质实际花费了大量的时间,利用“经过大量修改”的定制版Unreal引擎和图形API Vulkan。但相信后续在适配PICO 4 Pro时,能够借助它ET的能力,从渲染上下功夫,解放更多生产力。

此外,ET还可以为VR加入一些诸如眼动翻页、实现躺着看漫画,眼动画画、帮助残障人士实现艺术梦想等等。

对于面部追踪功能未来的想象,PICO方面有一句话令87君印象深刻:“面部追踪与社交其实是强相关的。”

事实上,面部追踪的加入,成功缩短了VR世界的情绪表达延时,生动化虚拟世界。即便在虚拟世界,表情也是沟通的重要“道具”。我们通过表情解读大部分人的情绪,比如两端向上的弧度往往表示善意友好的情绪,比如呵呵被认为是“嘲讽”,但带着可爱的萌娃表情的呵呵表情包则是朋友间“阴阳怪气的调侃”。

但通过表情包的沟通,往往带有一些滞后性,对方需要解读完你的表情包后才可以“确认”你的情绪。即便在PICO的《轻世界》里,发送表情后人物立即做出可爱的表情,这个路径相对于用户真人做出表情-虚拟人物立刻有表情这个路径来说还是更长,而且一些不带言语表达的单纯情绪就无法顺畅地被表达,比如看一幅画时认真思考微微皱眉的专注、画眼线时必须莫名其妙张着嘴巴、看到某个惊奇事物时突然放大的眼睛等等。

当然了,此时此刻看这篇文章的你,可能会想,单独一两个功能的加入,的确可能是产品的亮点,但VR最大的问题还是在生态。

事实上,自PICO 4发售以来,PICO应用商店已经有超过350款应用,其中包括如《红色物质》系列、《淤能碁吕物语》、《MOSS》、《迷室VR》、《SUPERHOT VR》等大体量的3A级大作,也有像《实况钓鱼》、《乒乓:致胜11分》、《超燃一刻》、《多合一运动VR》等运动类作品,还有深受大家喜爱的《光之乐团》、《乐动未来:音计划》等音游,以及像《梦之境》、《方寸幻境》这种来自国内精品团队的小而美作品供用户选择。

在去年年底,PICO更是上线了《轻世界》,这一款VR创作应用,同时也开放了世界编辑能力,在《轻世界》中,87君非常直观感受到了什么叫“下一代数字生活”,它已经来了,并且超出我们的想象。

除了娱乐应用之外,视频内容在PICO生态中也占据大头,以87君的视角看,过去一年PICO在视频上面可谓“极其活跃”。不仅有诸如世界杯、第五人格电竞赛事《深渊的呼唤VI》等赛事的直播,还有像李玟“千禧之境”全虚拟VR演唱会,郑钧、汪峰等知名歌手的8K、3D、360度视角实时互动直播演唱会,还有像《苍穹》等诸多VR、3D影视作品提供给用户观看。

“千禧之境”全虚拟VR演唱会互动特效

同时,PICO的视频内容还接入了抖音,不仅能够在PICO的VR设备中观看巨幕版抖音,还有专门的VR才艺直播。

洋洋洒洒写下来,一方面是回顾了自从PICO 4发布以来,PICO在内容生态上都做了哪些事,而另一方面也是看看,现在的VR到底能干什么。

平心而论,就目前VR,能做的事情已经非常丰富,现在在你面前的,是“钮祜禄VR”。你可以在这个充满幻想和快乐的空间里画画、交友、放烟花、玩游戏、看视频、看漫画,做你平时想做却没有勇气去做的事,在《轻世界》里建一个私密的房间,大声吐槽工作太多或者作业太多;在《Multibrush》里画下你年少时想要又还没有做到的梦想;又或者只是单纯地在射击游戏里开两枪发泄发泄……

如果说,PICO 4 Pro加入的ET和FT是在PICO整个产品系列发展史上具有划时代意义的一次升级,是PICO大脑的升级。那么这些丰富的应用,则是PICO的双腿,也是VR的双腿,带着我们一步步走向从未去过、但充满向往的未来世界。

Similar Posts