零镜头学习

Question

我了解在零镜头学习中，课程分为可见/不可见类别。然后，我们在 50 个类上训练网络，并在网络未见过的其他 50 个类上进行测试。我也知道网络使用了看不见的类中的属性（不确定它是如何使用的）。但是，我的问题是网络如何对看不见的类进行分类？它实际上是否按其名称标记每个类。例如，如果我在做零镜头动作识别，而看不见的课程是骑自行车、游泳、足球等。网络是否真的命名了这些类？它怎么知道他们的标签？

Answer 1

网络使用所见类来学习图像和属性之间的关系或其他信息，例如人类注视、词嵌入或任何可能在类和图像之间相关的信息。根据网络学习到的内容，它可以进一步映射到对象和属性。

假设您的分类器在训练期间有 pig 、 dogs 、 horses 和 cats 图像及其属性，并且必须在测试期间对斑马进行分类。在训练期间，它会学习图像像素和属性“条纹、尾巴、黑色、白色...”之间的关系

因此，在给定斑马的图像和属性的测试期间，您需要使用分类器来确定它们是否相关。哦，你也可以得到一个看起来像斑马的马的图像。所以你的分类器必须学会很好地概括。