1、COPY 机制:
源自论文 :Incorporating Copying Mechanism in Sequence-to-Sequence Learning 论文
首次提出copynet的思路,同时结合了generative和copy两种方式,对OOV词采用直接copy的方式。
2、Pointing Unknown Word
Caglar Gulcehre, Yoshua Bengio, ACL 2016
本篇提出了pointer softmax的机制,为了解决copy or generate 和 where to copy两个问题。也称为pointer-generator network。
3、point net
添加链接描述
arkiv上的pointer network,思路比较简单,就是decoder不预测输出是什么,而是预测输出应该对应输入哪个词。pointer softmax的位置参数lt就是借鉴了这个思想。
4、相关论文
NQG传统算法(非预训练算法)-- copy机制TRADE把过去模型运行copy机制的方式分为三类:index-based copy、hard-gated copy 以及soft-gated copy
5、SpanPtr
标题:《An end-to-end approach for handling unknown slot values in dialogue state tracking.》

参考博客(https://blog.csdn.net/weixin_44385551/article/details/104345966)

相关文章:

  • 2021-12-14
  • 2021-06-01
  • 2021-10-31
  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
猜你喜欢
  • 2021-06-09
  • 2021-05-03
  • 2022-12-23
  • 2021-08-26
相关资源
相似解决方案