参考论文: SCA-CNN: Spatial and Channel-wise Attention in Convolutional Networks for Image Captioning

image caption是一个image to text的问题,例如图一中需要生成的下一个词我们通过观察可以知道是cake,大概来讲我们人类是如何知道的呢?首先根据文本上下文确定我们要观察的区域,然后只需要观察cake的那块区域即可,识别出来这个区域的东西对应的英文单词是什么。讲这段话的主要意思就是:生成某个词的时候也许不需要观察所有图像,某块图像才是关键点,所以需要把注意力放在这个地方。

image caption问题为什么需要spatial attention

图一  image caption问题的例子以及整体框架 

相关文章:

  • 2021-03-31
  • 2021-04-07
  • 2022-02-08
  • 2022-02-11
  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
猜你喜欢
  • 2021-09-03
  • 2021-05-17
  • 2022-01-08
  • 2021-06-03
  • 2021-09-03
  • 2021-09-26
  • 2021-07-28
相关资源
相似解决方案