美国弗吉尼亚理工大学视觉艺术学院的副教授托马斯·塔克（Thomas Tucker）通过多感官的融合来拓展虚拟现实（VR）的边界，以前所未有的方式将虚拟世界和物理世界连接起来，试图给用户带来完全真实的虚拟体验，并藉此来探索现实。他的项目“视觉感官融合”（Visual Sensory Convergence）已经形成成果，但这只是开始，他计划用 5 年时间来创作系列迭代的引人入胜的艺术体验。
VR 通过 3D 图像、360 度视角和沉浸式音频来模拟物理世界，但它也有其局限性。塔克在 “视觉感官融合”项目中，采用了一种创造性的方法，以便在虚拟环境中激活更多的感觉。他的做法是将一个与世隔绝的虚拟体验转变为一个参与者可以与周围环境互动的世界，这个世界包括用户可以伸手触摸和操作的物理对象。
该项目一次仅供一个人体验，旨在促进不受阻碍的好奇心、互动性和想象力。在模拟中，用户可以在虚拟世界中看到一个物体，在物理世界中伸手触摸它，然后体验虚拟现实和物理现实的结合效果。例如，用户可能会踩到他或她在地板上看到的形状，这将触发一个结果，如一个物体的出现。然后，用户可以移动物体，产生音调变化的声音，并出现更多的物体。当用户移动或与这些对象交互时，可能会产生一种声音的交响乐，用户可能会发现每个对象都有自己的气味，或感觉到空气在他或她的皮肤上的脉动。
“我希望这部分作品能让参与者完全沉浸在我对自己独特的抽象世界的再创造中，在那里他们与虚拟现实场景中的对象形成了准情感纽带。”塔克说，“作为五年目标的一部分，这个项目将经历几个技术迭代和主题周期，每一个都将建立在另一个基础上，并在几年里增长。我的总体目标是开发一种新的引人入胜的艺术体验，将 VR 与所有五种感官结合起来，形成一种独特的表演。”
作为一名视觉艺术家，塔克的工作包括创造动态表现内心视觉和 3D 形式的空间环境。多年来，他操纵空间、声音和视觉图像的方式受到了他所使用的许多技术的影响。他从几年前简单的手绘开始，现在已经发展到复杂的动画、投影映射装置和 VR。
“视觉感官融合”展示了艺术、技术和实验的碰撞如何推动全方位的创新。这与创意、艺术和技术研究所（ICAT）的重点领域“放大艺术”相一致，“放大艺术”一直致力于展示艺术和技术不断重新定义世界的多种方式，并展示艺术如何以意想不到的方式跨越各个领域。
作为 ICAT 的研究员，塔克获得了该所休假延长项目的资金，用于休假时间专注于“虚拟感官融合”。ICAT 还帮助他在新西兰与惠灵顿的维多利亚大学、奥克兰大学和新西兰美丽华创意中心建立了机构间的合作和伙伴关系。“视觉感官融合”也在新西兰奥特罗瓦的 Ars Electronica 花园展出，该展览展示了来自艺术家、媒体公司、以及新西兰高等院校的科学家和研究人员的项目。
“这个项目是来自世界各地的许多有才华的人的重大合作，他们为这一努力付出了时间和热情。”塔克介绍说，“我非常感谢本·纳普（Ben Knapp）和 ICAT 的支持成员，他们在我的研究休假期间给了我足够的空间来实现这个愿景。如果没有大卫·弗朗西奇（David Franusich）的专业知识，这个项目是不可能实现的，他解决了所有的技术挑战，帮助编码。他甚至是其中一个声乐天才。”【数字叙事 葡萄浆果编译】
