使用 WebRTC 和 Kurento 进行对象检测

Question

我一直在关注一个关于“Kurento”的非常有趣的教程，它是 WebRTC 的媒体服务器，它允许直接通过浏览器进行多媒体通信。我在这里http://www.kurento.org/docs/current/tutorials.html 运行了教程，发现它很有趣。

我现在的计划是实现一个非常基本的基于 WebRTC（或 Kurento）的对象检测/识别算法，给定一个简单的对象，它可以检测到它。为此，我考虑了以下步骤。

假设我们希望找到水果，例如苹果和橙子：

• 第一步：我想在屏幕上放一个固定边界框，限制检测区域，比如美国绿卡拍照工具：http://travel.state.gov/content/visas/en/general/photos.html

（用户脸部周围的绿色形状）

• 第 2 步：实现一个按钮，一旦按下它就可以告诉您边界框内的对象是苹果还是橙色（例如，根据其颜色或形状）

如果有想法，如果我能了解它们，我将不胜感激。谢谢

Answer 1

您需要为此创建自己的模块。有一段documentation 与此有关。您可以使用任何现有模块作为示例，但我认为 face detector filter 与您提出的非常相似。

为 Kurento 创建可插拔模块非常简单。最难的部分是在这些模块中添加计算机视觉算法；-)