您现在所在的位置:首页 >> 科学研究 >> 共享资源 >> 学术报告 >>
发布日期:2018年10月08日
学术报告-注意力机制

      注意力机制应用在encoder-decoder模型中,可以使Decoder根据时刻的不同,让每一时刻的输入都有所不同,使处理长输入句子时效果更好,会对目前大多数方法进行抽象,可以将其归纳为三个阶段:1.相似度计算;2.归一化;3.加权求和。注意力机制在机器翻译、阅读理解、语义角色标注、关系抽取等自然语言处理领域有广泛的应用。

附件-注意力机制.pdf