在过去的几十年中，技术进步推动了日益复杂，沉浸式和逼真的视频游戏的发展。这些进步中最值得一提的是虚拟现实(VR)，它使用户可以通过使用电子可穿戴设备来体验游戏或其他模拟环境，就像他们实际上在浏览游戏一样。
现有的大多数虚拟现实系统主要关注视觉感，使用头戴式耳机让用户可以在眼前而不是在他们面前的屏幕上看到游戏或其他模拟环境中发生的事情。尽管这可以带来高度吸引人的视觉体验，但其他类型的感官输入并不总是能够匹配这些体验。
日本名古屋大学信息学院的研究人员最近创建了一款新的VR游戏，该游戏将沉浸式视听体验与触觉感知相结合。这款游戏发表在《机器人技术，网络与人造生活》杂志上，该论文利用玩家的生物特征数据在VR空间中创建一个球形物体，使其与心脏跳动一致。玩家因此可以在视觉，听觉和触觉上经由该对象感知他/她的心脏的跳动。
研究人员在论文中写道：“触觉对感觉的影响远大于视听[感知]。”“因此，如果将触觉和视听感觉结合在一起，我们可以在VR空间中创建'虚拟存在'。”
研究人员开发的VR游戏的目标是通过将球形物体扔到目标上来打破一系列目标。在模拟环境中，此球形物体连接到一根似乎来自玩家站立位置的电线。
本质上，研究人员的想法是通过视觉，听觉和触觉刺激的结合来传达这种感觉，即球体与玩家的心脏相连，因此以相同的节奏跳动。在游戏结束时，玩家销毁所有目标后，要求他使用出现在模拟环境中的剪刀剪掉将他/她连接到球形物体的线，并可以通过剪刀进行操作。控制器。如果游戏产生了预期的效果(即，引起了球体已连接到用户心脏的感觉)，那么玩家在剪线时应该有一种奇怪的感觉，甚至可能会犹豫不决。
研究人员在论文中解释说：“在我们的系统中，用户的生物信息与显示的视听数据相关联。”“玩家通过身体的移动来玩虚拟物体，系统反馈生物特征信息，并通过感官呈现将生物特征数据的变化传递给用户。”
新的多感官VR游戏是使用Unity开发的，Unity是UnityTechnologyInc.设计的著名视频游戏设计平台。用于实现该游戏的设备包括HTCViveVR头戴式显示器，控制器和跟踪系统，以及集成在控制器内部的触觉提示设备。使用带有内置麦克风的听诊器收集播放器的生物特征信息，该听诊器通过立体声迷你插头电缆连接到PC。为了减少麦克风噪音并改善对演奏者心跳的检测，该团队还使用了500Hz低通滤波器。
将来，研究人员计划进行进一步的研究，以评估游戏产生预期效果的有效性。到目前为止，他们收集到的反馈似乎很有希望，因为大多数玩游戏的用户都在模拟环境中感到了他们的心跳和球形物体之间的联系。
研究人员在论文中写道：“尝试对该游戏进行初步调查的用户说，'球体(与心脏相对)是活的，因为身体运动引起的变化会通过触觉反馈来反馈。”“一些评论预见到它会影响情感，例如'我有一种感觉'和'我犹豫要在最后切断电线。”作为未来的任务，除了用户评估之外，提高系统中生物信息分析的执行速度对于其更广泛的实施也将具有重要意义。”
