Model-Agnostic Meta-Learning for Relation Classification with Limited Supervision论文解读(将元学习应用于自然语言处理)

本文探讨了将元学习方法应用于自然语言处理中的关系分类任务,旨在解决标注数据有限的问题。通过对关系分类任务进行元学习,模型在少量标记数据下仍能实现较好的预测性能。实验在SemEval-2010 Task 8和TACRED数据集上进行,结果显示,元学习可以有效提升模型在低监督条件下的表现。
摘要由CSDN通过智能技术生成

元学习在图像分类任务上取得了长足的进展,但是在自然语言处理领域却鲜有研究。本文对MAML进行了改编,并将改编后的方法应用于自然语言处理领域的关系分类任务。

贡献点

  1. 提出了应用于自然语言领域中关系分类任务的元学习方法。

1 引言

关系分类是指判别出两个实体之间存在的关系,它的下游有许多人工智能应用,包括问答,知识库和网络搜索。长期以来进行关系分类任务上的方法都依赖于大量的标记数据,但是很多时候标记数据都是很昂贵的。但是本文提出的元学习关系分类方法仅需要少量的标记数据就能达到不错的预测性能。

2 方法

如果我们考虑将每个关系 R i R_i Ri视作一个任务,将 p ( R ) p(R) p(R)看成任务的分布。一种关分类方法是以多任务的形式训练一个多分类的分类器。这种方法的优化目标如下:
θ ∗ = min ⁡ θ ∑ R i ∼ p

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值