Video2Game 是一个将单个视频转换为实时互动、逼真的游戏和模拟环境的技术。它通过神经网络技术(NeRF)捕捉场景的详细视觉和几何信息,并将这些信息转化为游戏中的网格模型和物理行为。玩家可以在这些环境中行走、驾车、甚至与场景中的对象互动,如射击和碰撞,所有这些都遵循现实世界的物理法则。此外,这项技术还可以用于机器人模拟,例如使用机器人在虚拟环境中操控物体。