中文题名:基于联合学习对齐和翻译的神经机器翻译
目录
-
摘要
- 神经机器翻译的任务定义
- 传统神经机器翻译所用的编码器-解码器模型的缺陷
- 本文提出一种能够自动搜索原句中与预测目标词相关的神经机器翻译模型
- 所提出的模型的效果
-
背景:神经机器翻译
任务定义
该模型采用1到K编码的字向量的源语言句子作为输入:
并输出由1到K编码的字向量的目标语言句子:
任务目标:评估函数
编码器-解码器框架(基线)
模型名称:RNNenc
编码器(基线)
:表示一个输入句子的序列
:表示编码器的隐层状态
:表示由句子序列的隐层状态生成的上下文向量
编码器读取输入句子序列x,生成一个上下文向量c
解码器(基线)
:表示一个生成句子的序列
:表示解码器的隐层状态
解码器是用来在给定上下文向量c和所有之前的预测词时预测下一个词