索尼设计手指跟踪VR控制器

索尼软件工程师的一份报告显示，该公司正在开发一种高度沉浸式的虚拟现实运动系统，可能用于下一代播放站控制器。

虚拟现实控制器将采用手指跟踪技术。

在一篇题为“机器学习技术评估手持设备的接近传感器”的论文中，一个来自索尼互动部门的团队开发了一个控制器，它精确地复制了玩家的手和手指的动作。

手指跟踪应用通常依赖于捕捉手指运动的相机，如OculusQuest。 最近，提供更精确运动识别的电容式接近传感器正在进入市场。 但是，正如索尼研究人员KazuyukiArimatsu和HidekiMori指出的那样，相机检测由于物理控制器的存在而受到阻碍，而接近传感器技术还处于起步阶段，需要改进和完善。 准确捕捉手的运动仍然难以捉摸。

Arimatsu和More已经承担了填补这些空白的挑战。 他们用62个嵌入式电极构建了一个原型手控制器，并使用光学监测系统记录了训练数据集。 他们捕捉了12名受试者的手的动作，每个受试者的手大小不同。

Arimatsu和More说：“我们的目标是推动手指跟踪能力的边界，以便在虚拟空间中使用手进行更直观的交互。” “我们的方法不仅检测手指在特定电极上的触摸，而且利用所有传感器的值预测三维空间中手指的综合运动。 为此，我们评估了计算机视觉领域研究的两种用于姿态估计的卷积神经网络体系结构，并说明了控制器上传感器的合适体系结构。

为了实现现实和沉浸式的3D体验，研究人员在上个月发布的一份报告中说，他们应用多维表示“在曲面的电容图像上应用卷积神经网络方法，并根据最近在计算机视觉领域的成就，用我们的数据集对两种类型的网络体系结构进行了评估。 我们还使用原型实现了实时交互应用，并演示了在虚拟现实应用中使用手指进行直观交互的可能性。

原型视频显示用户的手和它的数字表示，作出各种手势，如打开和关闭，计数，拇指旋转，摊开手指，和平标志和伸出的拇指和小指(象征电话)。 它可以识别手握控制器装置和提升或投掷物体。

去年，索尼为VR控制器授权了先进的触觉。 他们将能够模拟推，拉，抓和拉的感觉。 下一个索尼控制器可能会让游戏玩家不仅看到他们的手，而且感觉到他们与之互动的各种物体。

该团队表示，这项技术可以应用于游戏以外的领域，如非语言交流应用。

　　免责声明：本文由用户上传，与本网站立场无关。财经信息仅供读者参考，并不构成投资建议。投资者据此操作，风险自担。 如有侵权请联系删除！