【极果播报】5月15日消息，根据索尼软件工程师的一份报告显示，他们正在开发一种高度沉浸式虚拟现实运动系统，该系统很可能会在其下一代PlayStation控制器中使用。这款VR控制器将采用手指跟踪技术，精确地复制玩家手和手指的动作。

手指跟踪应用程序通常依赖于捕获手指运动的相机，例如Oculus Quest。最近，提供更精确运动识别的电容式接近传感器进入市场。但是，正如索尼研究人员所指出的那样，由于物理控制器的存在阻碍了摄像机的检测，而仍处于起步阶段的接近传感器技术需要改进和完善。准确捕捉手的动作仍然难以捉摸。

索尼的研究人员承担了填补这些空白的挑战。他们构建了具有62个嵌入式电极的原型手控制器，并使用光学监控系统记录了训练数据集。他们捕获了12位对象的手的动作，每个对象的手的大小各不相同。

为了使VR运动控制器具有更多的手感，SIE研究人员着手构建一个原型控制器，该控制器集成了许多电容式接近传感器，就像您在Valve的索引中可以找到的一样。控制器（又名“指节”）和Oculus Touch。

根据索尼那边的回应，他们的目标是扩大手指跟踪功能的界限，以便在虚拟空间中使用手进行更直观的交互。” “不仅可以检测手指在特定电极上的触摸，还可以利用所有传感器的值预测3D空间中手指的全面运动。为实现这一目标，他们评估了在计算机视觉领域研究的两种卷积神经网络架构，用于姿势估计，并说明了控制器上传感器的合适架构。”

为了获得逼真的和身临其境的3D体验，他们应用了多维表示法，“根据卷积神经网络的最新成就，将卷积神经网络方法应用于曲面的电容图像和两种类型的网络体系结构上我们使用数据集评估了计算机视觉领域。我们还使用该原型实现了实时交互应用程序，并演示了在VR应用程序中使用手指进行直观交互的可能性。”

原型视频显示了用户的手及其数字表示，这些手势做出了各种手势，例如打开和关闭，计数，拇指旋转，展开手指，和平标志以及伸出的拇指和小指（表示电话）。它可以识别一个手握住控制器设备和起吊或投掷的物体。

不过索尼方面也承认，现有的这套设计存在一些缺陷，即缺乏对所有手号的支持。当前的算法无法估计用户的手的形状（例如手指的粗细），这会在执行诸如捏捏动作之类的操作时导致实际手部姿势与虚拟手部姿势之间出现间隙。为了更好地适应各种手型，需要研究一种用于增强或合成电容图像的方法。

去年，索尼为VR控制器许可了高级触觉器。他们将能够模拟推动、拉动、抓握和搏动的感觉。下一个索尼控制器很可能会允许游戏玩家不仅看到他们的手，而且感觉与他们互动的各种物体。