VirtualNexus: Enhancing 360-Degree Video AR/VR Collaboration with Environment Cutouts and Virtual Replicas

不对称的AR/VR协作系统将远程VR用户带到本地AR用户的物理环境中，使他们能够在共享的虚拟/物理空间内进行沟通和工作。这种系统通常通过3D重建或360度视频显示远程环境。虽然360度摄像机以更高的质量流式传输环境，但它们缺乏空间信息，使它们的交互性更差。我们提出了VirtualNexus，这是一种AR/VR协作系统，它通过环境剪影和虚拟复制增强了360度视频AR/VR协作。VR用户可以定义远程环境的剪影，以世界缩影的形式进行交互，他们的交互将与本地AR视角同步。此外，AR用户可以使用神经渲染快速扫描和共享物理物体的3D虚拟副本。我们通过三个示例应用程序展示了我们系统的实用性，并在二元可用性测试中对我们的系统进行了评估。VirtualNexus扩展了360度远程存在系统的交互空间，提供了改进的物理存在感、多功能性和交互清晰度。

VirtualNexus试图解决360度虚拟/现实协作系统中缺少空间信息的问题，通过引入环境切割和虚拟复制来增强用户交互性和物理存在感。

VirtualNexus通过引入环境切割和虚拟复制，扩展了360度虚拟/现实协作系统的交互空间，提供了更好的物理存在感、多功能性和交互清晰度。

VirtualNexus的亮点包括使用环境切割和虚拟复制来增强用户交互性和物理存在感，通过神经渲染快速扫描和分享物理对象的3D虚拟副本，以及通过3个示例应用程序展示系统的实用性。

最近在这个领域的相关研究包括《Asymmetric AR/VR Collaboration with Spatial Environment Cutouts and Replicas》。