如何使用虚幻引擎 VR 与 360 度移动视频进行交互？

Question

我们需要使用 VR 头戴设备，使用 Unreal Engine 与 360 度视频进行交互（但 Unity 3D 未关闭）。视频是以直线运动的方式录制的。

佩戴 VR 耳机的用户可以：

• 仅向一个方向移动，即在视频中向后或向前移动
• 指向视频的关键部分。在视频中指向桌子上的瓶子的示例会增加值

为此，我们正在考虑：

• 将视频投影到 UV 球体内部。当用户前进或后退时，视频会以正确的方向逐帧移动。
• 使用我们想要与之交互的对象创建场景模型。当用户点击瓶子的方向时，她实际上点击了一个“不可见”的 3D 瓶子对象，即使它对她来说看起来像是一个视频。

简而言之，用户将仅看到一帧到一帧的 360° 视频。但可以与周围巧妙定位的对象互动，与用户在视频中看到的内容完美同步。

有没有更简单的方法可以用 Unreal/Unity 解决这个问题？

编辑：

• Related Unity 于 2017 年 5 月进行的演示

Answer 1

您的解决方案将被认为是解决问题的最简单方法。也许构建一个不错的动画系统，您可以在其中添加在某个时间戳出现的对象，在某个位置，并且可能随着相机视图移动并在另一个时间戳消失。

当它是坐姿 VR 体验时，可以及时向前/向后移动用户。站立肯定会让一些人摔倒。

另一种方法是对动画点击地图进行视频编辑并与视频同步播放。当用户点击时，您将一条射线投射到动画点击图并查看要执行的操作，查看颜色。