【问题标题】:ARCore – How to place a Real World object in front of a 3d model?ARCore – 如何将真实世界对象放置在 3d 模型前面?
【发布时间】:2020-10-12 06:10:54
【问题描述】:

我使用ARCore Sceneform 插件创建了一个Android AR 应用。我可以在突出显示的平面上放置 3D 模型。但即使我将一个真实物体放在相机前(或者只是在相机前挥手),它也只能在 3d 物体后面可见。

如何在 Android 中将真实世界的对象放置在 3D 对象的前面?

我们可以使用任何其他插件来实现这一点吗?

【问题讨论】:

  • 请移除标签“Java 3D”,因为您不使用 Java 3D API

标签: java android augmented-reality arkit arcore


【解决方案1】:

ARCore 1.18

ARCore 1.18 现在通过全新的深度 API 支持 Occlusion 功能。检查a list of Depth API supported devices,了解您的 Android 智能手机是否支持 Occlusion 功能。

Google 文档对 Depth API 的描述如下:

Depth API 使用depth-from-motion 算法来创建深度图,您可以使用acquireDepthImage() 方法获得该深度图。该算法从不同角度拍摄多张设备图像,并将它们进行比较,以估计用户移动手机时到每个像素的距离。如果设备具有活动深度传感器,例如飞行时间传感器(或 ToF 传感器),则该数据会自动包含在处理后的深度中。这增强了现有的深度图,即使在相机不移动时也能实现深度。它还可以在特征很少或没有特征的表面上提供更好的深度,例如白墙,或者在具有移动的人或物体的动态场景中。


ARCore 1.17

但你不能在之前的 ARCore 1.17 中执行任何 Object Occlusion 操作。它不支持深度通道合成和深度通道操作,除了相机散焦功能。因此,您在 AR 应用中使用的所有虚拟模型都只是使用 Over 合成操作放置在真实世界的视频上,公式如下:

Argb * Aa + Brgb * (1.0 – Aa)

//  where Argb is RGB of a foreground image
//  Aa is Alpha channel of a foreground image
//  Brgb is RGB of a background video
//  and 1.0 is a normalised value (in range 0.0...1.0)

//  (Argb * Aa) is a premultiplied RGBA image
//  (1.0 – Aa) is an inversion of a foreground alpha

但是,如果您在 Android 设备的 Unity 中使用 PTC Vuforia 9.0,则可以获得 Occlusion Management 功能(虚拟按钮示例)。或者,如果您在 iOS 设备上使用 ARKit 3.5 或 ARKit 4.0。 ARKit 4.0 为您提供了最广泛的深度通道工具包,包括新的 Depth API。有People Occlusion、Face Occlusion 和Object Occlusion 功能。

this post,您可以阅读ARKit 中Occlusion 的主要原则。

【讨论】:

  • 谢谢。我已经创建了 Vuforia 开发者帐户。但我无法登录下载 SDK。它提示错误说输入的凭据与存储的数据不匹配。但我只输入了正确的凭据。
  • 如何获得 ARCore 1.18?
  • 目前实际版本为 ARCore 1.20。但是您可以通过 GitHub 下载任何当前和以前的版本:github.com/google-ar/arcore-android-sdk/releases
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2018-11-03
  • 2017-12-24
  • 1970-01-01
  • 2019-03-03
  • 1970-01-01
  • 2020-04-26
相关资源
最近更新 更多