Crispin 表明,“我在苹果公司的技能开发组担任神经技能原型研讨员期间,用了我生射中的 10%时刻来为 VisionPro 的开发做出奉献。这是我做过的单一项目中历时最长的一次。我为它的终究揭晓感到骄傲和宽慰。我现已从事 AR 和 VR 的研讨十年之久,从许多方面来说,这是整个职业的一个结晶。”
因为保密协议的约束,Crispin 不能泄漏太多细节,但有些内容现已经过专利揭露。他介绍说,他在苹果的作业首要涉及到依据用户身体和大脑的数据,判别他们在沉溺式形式下的心思状况。“也就是说,当用户处于混合实际或虚拟实际的体会中,人工智能模型会测验猜测你是感到猎奇、分心、惧怕、专心、回想曩昔的阅历,仍是其他一些认知状况。而这些状况或许经过眼动追寻、大脑电活动、心跳和节律、肌肉活动、大脑血液密度、血压、皮肤电导等丈量得到。”他解说说。
为了完成这些具体的猜测,他们运用了许多技巧,这些技巧都在几项说到他的专利中有所描绘。例如他说,最酷的效果之一就是在用户点击某个东西之前就能猜测出来,“你的瞳孔在你点击之前就会有反响,部分原因是你预期点击后会产生什么事情。所以你可以经过监测用户的眼睛行为,和实时调整用户界面,来发明更多这种预期性的瞳孔反响,然后经过眼睛创立一个大略的脑机接口。这很帅,我甘愿挑选这种方法,而不是进行侵入性的脑部手术。”他还将这个技能比作“读心术”。
此外,为了确认用户认知状况,体系还会向用户快速展现一些他们无法感知的视觉或声响信号。“另一项专利具体介绍了怎么运用机器学习和身体和大脑的信号来猜测你有多专心、放松或学习效果怎么。然后依据这些状况更新虚拟环境。所以,幻想一下一个可以依据你看到和听到的布景改变来协助你学习、作业或放松的自适应沉溺式环境。”Sterling Crispin 说。
IT之家注意到,苹果称在开发这款头戴设备的过程中,发明了 5000 项新专利。苹果 Vision Pro 的首要方针不是让用户彻底沉溺在虚拟实际中,而是经过将实在国际和数字国际结合起来扩展用户的或许性。