ARKit – 如何检测场景视图中特定特征点的颜色？

Question

我想在场景视图中的特定特征点获取检测到的世界对象的颜色。例如，我在(x:10, y:10, z:10) 检测到一个特征点。

如何获取object/surface在这个位置的颜色？

Answer 1

目前，使用 ARKit 方法无法在特征点下获取真实世界对象的颜色（与您在许多合成应用中看到的方法相同）。没有 ARKit 方法允许您将特征点的 Alpha 乘以视频流中相应像素的 RGB 值。

.showFeaturePoints 是 ARSCNView 的扩展调试选项 ARSCNDebugOptions。此选项仅允许您显示世界中检测到的 3D 特征点。

@available(iOS 11.0, *)
public static let showFeaturePoints: SCNDebugOptions

但我相信你可以尝试apply a CIFilter to ARKit camera feed包含特征点。

场景中的特征点是黄色的，因此您可以使用 Chroma Key Effect 提取 Alpha 通道。然后你需要将这个 Alpha 乘以来自相机的 RGB。所以你会得到color-coded 特征点。

您也可以使用来自Core Image Compositing Operations 的CIDifferenceBlendMode 操作。你需要两个来源——一个有特征点，另一个没有特征点。然后你必须修改这个Difference op的结果，并在乘法之前将它分配给Alpha通道。