科技|VR新技术用手掌作触控接口 准确率逾九成半

[星岛综合报道] 卡内基梅隆大学的研究人员开发了一种名为EgoTouch的技术，使虚拟实境（VR）用户能将自己的手掌作为触控接口。该系统由博士生Vimal Mollyn及其团队在该校的人机互动研究所（Human-Computer Interaction Institute）研发，旨在取代传统的“空中”接口，提供更快速、准确且符合人体工学的操作方式。

传统的身体接口通常需要特殊的深度传感摄影机来追踪真实世界中手部的位置，而EgoTouch仅利用VR头戴装置中已有的RGB光学摄影机即可运作。当用户的手指按压在手掌上时，摄影机会捕捉到由此产生的阴影和皮肤变形。透过将这些视觉指标映射到虚拟手掌上的接口，系统能够确定用户在VR世界中选择的选项。

为了训练该系统的算法，研究团队邀请志愿者在佩戴头戴式RGB摄影机的情况下，用食指按压手掌的不同位置。手指下方安装了不可见的触控传感器，将摄影机数据与传感器数据匹配，使算法学习不同视觉特征与触控位置、力度和持续时间之间的关联。该训练过程涵盖了不同肤色、毛发密度和光照条件的情境。

测试结果显示，EgoTouch在检测手掌触控位置的准确率达96%，误报率约为5%。在判断触控力度（轻触或重压）方面，准确率达98%，并能识别按压、抬起和拖曳等触控动作。

Mollyn表示：“这是首次仅使用所有头戴装置中已有的摄影机的系统。我们的模型无需校准，开箱即用。现在，我们可以基于先前的皮肤接口研究，将其实现。”

EgoTouch的开发有望提升VR用户的互动体验，提供更自然且直观的操作方式，减少对手持控制器的依赖，并避免在视野中出现干扰性的选单。

图片：卡内基梅隆大学

T10