论文笔记| The Emergence, Advancement and Future of Textual Answer Triggering

最新推荐文章于 2024-02-11 21:58:41 发布
最新推荐文章于 2024-02-11 21:58:41 发布
阅读量170 收藏
点赞数
分类专栏： 笔记 文章标签： 深度学习
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u011150266/article/details/117902424
版权

作者：李瑾
单位：燕山大学

论文地址

目录

这篇论文发表于2020年，详细且全面介绍了答案触发这一任务当前的发展以及面临的挑战。

一、 Dataset

  第一个公开的答案触发数据集WiKiQA 于2015年与答案触发这一任务同时提出，紧接着2016年提出了另一个数据集SELQA。

两个数据集不同点

  • 构建方式与数据比例不同：WiKiQA数据集中的问题都是真实的Bing搜索，未经编辑，是真实场景下的数据。该数据集分为两部分，一部分用于答案触发任务，另一部分用于答案选择任务。用于答案触发任务的数据集中有大约60%的问题没有正确答案；SELQA数据集是人工创建的，数据量相比WiKiQA数据集要大得多，正确回答的数据量也相对较多，同时主题也更丰富。这样看来，WiKiQA数据集挑战更大。

两个数据集的数据分布如下：

WiKiQA数据集
最低0.47元/天 解锁文章
期待成功
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
wikiqa 数据集
04-03
We describe the WikiQA dataset, a new publicly available set of question and sentence pairs, collected and annotated for research on open-domain question answering. Most previous work on answer sentence selection focuses on a dataset created using the TREC-QA data, which includes editor-generated questions and candidate answer sentences selected by matching content words in the question. WikiQA is constructed using a more natural process and is more than an order of magnitude larger than the previous dataset. In addition, the WikiQA dataset also includes questions for which there are no correct sentences, enabling researchers to work on answer triggering, a critical component in any QA system. We compare several systems on the task of answer sentence selection on both datasets and also describe the performance of a system on the problem of answer triggering using the WikiQA dataset.
微软WikiQA corpus 简介
zdcs的专栏
02-18 3947
太简单了，没什么好翻译的The WikiQA corpus is a new publicly available set of question and sentence pairs, collected and annotated for research on open-domain question answering. Last published: August 28, 2015....
基于潜在聚类的比较聚合模型在答案选择中的应用
jnwujingchao的博客
08-01 305
摘要 作者利用预训练模型计算输入文本的向量表示并应用了迁移学习的方法。作者提出了基于潜在聚类的比较聚合模型，来计算目标语料库中的附加信息，并将目标函数从列表式变为点式，从而增强了比较聚合模型。 方法 1 Comp-Clip 模型 该模型是作者使用的基线模型，有四个部分组成： （1）文本表示：问题Q和答案A都用向量表示。 Q = σ (Wi Q) ⊙ tanh(Wu Q), A = σ (Wi A) ⊙ tanh(Wu A), （2）注意力机制：每个元素的软对齐都是通...
大语言模型数据集（二）
babyzbb636的博客
10-19 1119
该数据集用于训练和评估用于检测机器释义文本的模型。训练集包含从 8,024 篇维基百科（英文）文章（4,012 篇原文，4,012 篇使用 SpinBot API 释义）中提取的 200,767 段（98,282 篇原文，102,485 篇释义）。测试集分为 3 个子集：一个来自 arXiv 研究论文的预印本，一个来自毕业论文，另一个来自 Wikipedia 文章。此外，还使用了不同的 Marchine-paraphrasing 方法。
问答系统案例----基于Bert实现知识库问答
一如年少模样丶的博客
04-10 4601
问答系统案例----基于Bert实现知识库问答 基于Transformers.Trainer实现 任务描述: 知识库问答也叫做知识图谱问答，模型结合知识图谱，对输入的问题进行推理和查询从而得到正确答案的一项综合性任务。知识图谱问答方法可分为两大类，一种是基于信息检索的方式，一种是基于语义解析的方式。信息检索的方式不需要生成中间结果，直接得到问题答案，十分简洁，但是对复杂问题的处理能力有限。语义解析的方式需要对输入的自然语言问题进行语义解析，再进行推理，具备解决复杂问题的能力。本教程选用信息检索的方式进行讨论
The emergence of molecular gynecology: homeobox and Wnt genes in the female reproductive tract
06-29
The emergence of molecular gynecology: homeobox and Wnt genes in the female reproductive tract The emergence of molecular gynecology: homeobox and Wnt genes in the female reproductive tract Jan ...
Perspectives on the future of photonics: the best is yet to come
02-22
The increasing scope and influence of photonics is surveyed, within the context of the recent emergence of photonics-based technologies.
A Novel Emergence Model of Public Opinion Based on Small-World Network
02-20
From the view of complex networks and emergent computation, a new emergence model of pubic opinion is built. It is based on small-world model, and takes Internet users as agents. Then the system ...
Scaling, emergence, and reasoning (Jason Wei, NYU)
09-21
大语言模型中的 Scaling、Emergence 和 Reasoning 在大语言模型中，Scaling、Emergence 和 Reasoning 是三个紧密相关的概念。Scaling 指的是模型的规模化，即模型参数数量、训练数据规模和计算资源的增加。...
Contrasting procedures for empirical support of traditional and Population-Based mental health services
06-29
Contrasting procedures for empirical support of...The emergence of population-based services is occurring simultaneous with a growing expectation that psychological services be justified by empirical evi
WikiQACorpus数据集
03-05
WikiQACorpus数据集，NLP项目测试集，可用于训练与测试。
SeqMatchSeq:WikiQA的比较汇总方法（通过PyTorch）
05-02
SeqMatchSeq（PyTorch） 与序列匹配有关的论文中描述的模型的Pytorch实现： 的王硕航，姜静 笔记： 最初是从分叉的，这是作者在Torch中的代码实现 清理一点，然后在PyTorch中重新实现 仅重新实现的WikiQA任务，尚不支持其他任务。 作者的原始回购在Wikiqa Dev中达到0.734（MAP） ，而此代码达到0.727（MAP） 由于割炬和pytorch之间的API不同，您可能会注意到一些差异： 原始回购协议会显式计算渐变，而此版本使用进行自动渐变。 orig仓库使用TemporalConvolution，而这个在pytorch中使用nn.Conv1d 我不知道为什么orig repo使用Parallel，所以我刚删除了它 去做： 保存/加载模块功能需要修复 每次评估后都必须保留Best_params 集成到ParlAI中，并同时对Ins
深度学习关键要素：数据集汇总与分享
十年以上架构设计经验，专注于软件架构和人工智能领域，对机器视觉、NLP、音视频等领域都有涉猎
08-09 7390
在深度学习的应用中，数据被认为是最重要的因素之一。因此，选择一个好的数据集对于深度学习的成功至关重要。在选择数据集时，不仅需要关注数据量的大小、多样性以及质量，还要考虑数据集是否代表了所研究问题的真实情况。本文整理了当前深度学习领域公开的数据集，供大家训练模型时选择和使用。
QA问答系统，QA匹配论文学习笔记
weixin_30732487的博客
12-21 569
论文题目： WIKIQA: A Challenge Dataset for Open-Domain Question Answering 论文代码运行： 首先按照readme中的提示安装需要的部分 遇到的问题： theano的一些问题，主要是API改动 下面是解决方法 首先安装 https://stackoverflow.com/questions/395011...
【开源训练数据集1】神经语言程式(NLP)项目的15 个开源训练数据集
最新发布
u010542847的博客
02-11 1254
我们整理了训练聊天机器人所需的对话数据集，包括问答数据、客户支持数据、对话数据和多语言数据以及特殊功能任务的训练数据集。
wikiqa数据预处理结果与论文不一致的问题
Knimet的博客
04-26 862
大多answer selection论文中wikiqa的873/126/243清洗结果，是按txt格式的数据集清洗的，tsv格式的数据比txt少。 txt格式训练集：20360条 tsv格式训练集：20348条 如果按tsv，清洗结果应该是872/126/241 ============================ README里对txt格式数据的说明是slightly pro...
SQuAD，斯坦福在自然语言处理的野心
技术博客
09-12 8439
本文将详细叙述今年目前为止自然语言处理界最重量级的数据集 SQuad 。 SQuAD 是斯坦福大学于2016年推出的数据集，一个阅读理解数据集，给定一篇文章，准备相应问题，需要算法给出问题的答案。此数据集所有文章选自维基百科，数据集的量为当今其他数据集(例如，WikiQA)的几十倍之多。一共有107,785问题，以及配套的 536 篇文章。数据集的贡献者为斯坦福Percy Liang等人，Percy Liang是自然语言处理界的一位全才，在Semantic Parsing, QA, Optimization
【NLP】文本分类综述 | 迈向NLP大师的第一步（下）
fengdu78的博客
12-13 1262
作者 | lucy北航博士在读·文本挖掘/事件抽取方向整理 |NewBeeNLP大家好，这里是NewBeeNLP。本系列文章总结自然语言处理（NLP）中最基础最常用的「文本分类」任务，主要包括以下几大部分：综述（Surveys）深度网络方法（Deep Learning Models）浅层网络模型（Shallow Learning Models）数据集（Datasets）评估方式（Evalu...
用java编写，选择一个文本文件in.txt，用户输入一个单词，计算该文件中这个单词出现的次数，并显示到界面上。 比如，in.txt文件中内容为“The emergence of semantic sensor Web provides a way for realizing data interoperability, information sharing, and knowledge fusion among the different sensor systems in the Internet of Things.”用户输入“of”，这时界面显示2。
06-02
以下是一个 Java 代码示例，可以实现你的需求： ```java import java.io.BufferedReader; import java.io.FileReader; import java.io.IOException; import java.util.Scanner;...public class WordCounter { ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值