机器翻译和编码器-解码器结构

一、机器翻译

首先,语言模型是使用循环神经网络来设计的,而语言模型正是自然语言处理的关键。其次,机器翻译 是最成功的基准测试,而机器翻译正是将输入序列转换成输出序列的 序列转换模型(sequence transduction)的核心问题。

机器翻译(machine translation)指的是将序列从一种语言自动翻译成另一种语言。

总结:

机器翻译指的是将文本序列从一种语言自动翻译成另一种语言。

使用单词级词元化时的词汇量,将明显大于使用字符级词元化时的词汇量。为了缓解这一问题,我们可以将低频词元视为相同的未知词元。

通过截断和填充文本序列,可以保证所有的文本序列都具有相同的长度,以便以小批量的方式加载。

二、编码器-解码器

重新解读CNN:编码器将输入编程成中间表达形式(特征),解码器将中间表示解码成输出。

 重新解读RNN:

 架构

 总结:

 

  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值