3D高斯场景如何顺滑迁移到机器人仿真训练并实现互动？

3D高斯技术近两年发展的愈发火热，英伟达也推出自己的机器人训练框架。
我想知道由视频生成的3D静态场景能否转化成机器人仿真训练的场景，机器人仿真训需要与场景互动，3D 高斯场景如果要实现机器人与环境互动，这个场景如何实现顺滑的迁移？