ACL-IJCAI-SIGIR顶级会议论文报告会（AIS 2022）笔记3：对话和生成

最新推荐文章于 2024-03-22 15:00:33 发布
最新推荐文章于 2024-03-22 15:00:33 发布
阅读量754 收藏 6
点赞数
分类专栏： 人工智能学习笔记 文章标签： 人工智能 深度学习 对话系统 文本生成 自然语言处理
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/PolarisRisingWar/article/details/125909842
版权

诸神缄默不语-个人CSDN博文目录

录播视频地址：AIS 2022丨ACL-IJCAI-SIGIR顶级会议论文报告会回放视频公开啦
智源官网活动主页，有详细议程的介绍：ACL-IJCAI-SIGIR顶级会议论文报告会（AIS 2022）

本文关注5月14日的对话和生成部分。主要内容是截图slides，并附注一些讲解内容。比我之前写cs224w和李宏毅的笔记会简略很多，在图中不言自明的内容我就不另附介绍了。

文章目录

1. 前沿趋势报告2：AIS2022对话与生成研究概述

哈尔滨工业大学张伟男
在这里插入图片描述
选择了一些代表性文章

AIS 2022

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述在这里插入图片描述

ACL 2022

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述在这里插入图片描述
state tracking（domain的slot）
在这里插入图片描述
在这里插入图片描述
串联为pipeline
在这里插入图片描述
在这里插入图片描述

IJCAI 2022

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

SIGIR 2022

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
当前会话、用户历史信息、相似用户
在这里插入图片描述
在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述

2. Session 3：Dialog and Generation（对话和生成）

1. AdaLoGN

南京大学厉肖
在这里插入图片描述
在这里插入图片描述在这里插入图片描述
蕴涵关系
在这里插入图片描述
由已知关系推到出其他关系的过程→对图上结构的扩展
在这里插入图片描述
四选一
在这里插入图片描述
初始构建图
句法规则（否定，如动词互为反义词）
在这里插入图片描述
神经+符号推理
roberta→token平均值
图扩充
在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述

2. 结合任务对话和开放域对话的语料集

百度徐俊
在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述
在这里插入图片描述
黄色部分：知识型对话
问答对话
在这里插入图片描述

语料集

在这里插入图片描述
在这里插入图片描述在这里插入图片描述

The PLATO-MT Model with Prompt-based Mechanism

在这里插入图片描述

DuClarifyDial as a New Benchmark

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

3. 问题生成

复旦大学
在这里插入图片描述在这里插入图片描述
彩色是要求的答案，模型需要学会提问

本文针对multi-hop问题生成：
在这里插入图片描述

关系图
实体能够保证问题深度（美国总统妻子是什么职业）
在这里插入图片描述
当前实体是否必须出现在问题中（flag）
在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述

4. 预训练模型里的隐变量

复旦大学陈伟
在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述
未来预测策略：可以让解码器有更好的规划能力
在这里插入图片描述
在这里插入图片描述
KL loss：假设原来是正态分布，最小化分布差值
free bits：KL loss达到一定阈值后才开始优化
BOW loss：隐变量直接非自回归地预测词汇，希望隐变量能够包含response信息
在这里插入图片描述
在这里插入图片描述
先在reddit-short上用比较大的batch size做预训练，再在reddit-long上用比较小的batch size做预训练
在这里插入图片描述
同时增加相关性BLEU和多样性distinct（一般不能同时）
在这里插入图片描述
在这里插入图片描述

5. 检索式对话

复旦大学陈伟
在这里插入图片描述在这里插入图片描述本文聚焦在第一阶段，有大量response，抽取
在这里插入图片描述
检索效率
在这里插入图片描述在这里插入图片描述在这里插入图片描述
正例：有相同response
对比损失
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述
在这里插入图片描述

6. 线上陪伴型机器人、情感对话

小米李嫣然

6.1 MISC

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
应该指的是2021年清华的这篇：Towards Emotional Support Dialog Systems
询问情况，推理背景信息，做疏导
在这里插入图片描述
常识知识库
comet模型：常识生成模型，输入situation，推理出情绪状态、需求
在这里插入图片描述
knowledge-enhanced context representation
选择策略的分布，和矩阵相乘，得到mixed stragy representation
在这里插入图片描述
上述论文是这篇
在这里插入图片描述
在这里插入图片描述在这里插入图片描述在这里插入图片描述
长句子的混合策略
只需要原有的监督信号

6.2 C 3 K G C^3KG C3KG

常识+对话

在这里插入图片描述在这里插入图片描述
应该选择什么知识来辅助理解对话
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
单轮对话，标注情感和意图
在这里插入图片描述
event的转折
在这里插入图片描述

在这里插入图片描述

6.3 HICR

纯文本安抚→富媒体/多模态
在这里插入图片描述
在这里插入图片描述
玩游戏、听歌
在这里插入图片描述在这里插入图片描述
基于用户信息进行推荐
在这里插入图片描述在这里插入图片描述在这里插入图片描述
在这里插入图片描述

7. COSPLAY

北京工业大学徐晨
在这里插入图片描述

7.1 背景

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

7.2 动机

保持一致性的同时给对方表达更多persona的机会
在这里插入图片描述

7.3 模型

强化学习
鼓励提问
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
迫使模型围绕共同话题聊天在这里插入图片描述

7.4 实验与分析

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
紫色表示模型对自身的关注，暗色表示对对方的
在这里插入图片描述

8. 中立语句演示原因

信工所李江楠
在这里插入图片描述在这里插入图片描述在这里插入图片描述缺点是缺乏对情绪信息的使用
在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述
在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述聚类预测
在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述

诸神缄默不语
关注
  • 0
    点赞
  • 踩
  • 6
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
论文笔记 ACL 2022|Unified Structure Generation for Universal Information Extraction
o11oo11o的博客
06-17 1778
论文题目：Unified Structure Generation for Universal Information Extraction 论文来源：ACL 2022 组织机构：软件所 百度 论文链接：https://arxiv.org/pdf/2203.12277.pdf 代码链接：https://github.com/universal-ie/UIE模型的整体框架如下图，主要包括structural schema instructor和structural extraction language两部分
ACL-IJCAI-SIGIR顶级会议论文报告会（AIS 2022）笔记2：分析与可解释性
诸神缄默不语的博客
07-20 740
ACL-IJCAI-SIGIR顶级会议论文报告会笔记 - 分析与可解释性部分
2024年人工智能顶级会议投稿信息汇总（数据挖掘领域）
最新发布
audyxiao001的博客
03-22 3500
本文对数据挖掘领域内的顶级会议进行了介绍，以便读者了解会议的截稿日期、举办时间和地点以及相关关键信息。最后，还将这些信息以表格的形式呈现，为读者提供了便利。
AIS 2022 | ACL-IJCAI-SIGIR顶级会议论文预讲会，现开启论文征集
Paper weekly
04-07 796
‍SIGIR、ACL和IJCAI是信息检索、自然语言处理和人工智能领域最高级别的学术会议，三大会议囊括了全球人工智能领域，尤其是自然语言处理领域和信息检索领域的最新先进成果。今年5月至7月，SIGIR、ACL和IJCAI三大国际顶级会议将陆续举行。AIS 2022论文预讲会是由中国中文信息学会青年工作委员会和智源社区联合举办的学术活动，旨在为国内学者提供更快速和更便捷的了...
ACL 2022 | PLATO-LTM：具有长期记忆机制的对话生成框架
Paper weekly
05-19 1371
©作者 |张轶博学校 |北京邮电大学AI院研究方向 |对话系统大多数开放域对话模型在长期人机对话中往往表现不佳。可能的原因是这些模型缺乏理解和记忆长期对话历史信息的能力。为了解决这个问题，本文提出了一个新的长期记忆对话（LeMon）任务，然后构建了一个新的对话数据集 DuLeMon 和一个具有长期记忆（LTM）机制的对话生成框架 PLATO-LTM，这种 LTM 机...
ACL-IJCAI-SIGIR顶级会议论文报告会（AIS 2022）笔记1：推荐系统
诸神缄默不语的博客
07-19 1128
ACL-IJCAI-SIGIR顶级会议论文报告会笔记 - 推荐系统部分
2018-IJCAI-top3:此2018 IJCAI alimama Top3代码
05-15
2018-IJCAI-前三名 这是2018年IJCAI alimama Top3代码。 3/5204 我们开放了代码的源代码部分，并解释了所有功能工程。 介绍 点击率估算问题是广告算法领域中一个经典且有价值的问题。目前，业界对于稳定流量的点击率...
SwMC-IJCAI17-master_MultipleGraphs；_Multiview；_Self-Weighted；_Cl
09-30
该代码是多视图聚类算法代码，对于多视图聚类的学习研究有一定的帮助
ai4spacecraft.github.io:首届国际AI航天器寿命研讨会-IJCAI 2021研讨会
04-08
版权和许可 从Jekyll-Uno改编而成-基于Ghost的主题，Jekyll的最小响应主题。 它已。
IJCAI-2021 会议报告PPT：推荐系统的进展
03-29
第1部分：自动机器学习（AutoML）简介 第2部分：为什么在RecSys中需要AutoML以及最新进展 第3部分：RecSys的自动图神经网络 第4部分：自动知识图嵌入
Cross-Domain-CWS:IJCAI 2018论文代码“结合无标签和部分标签数据的神经网络用于跨域中文分词”
05-12
IJCAI 2018论文``的TensorFlow实现''。 型号概述 图片：我们提出的模型的体系结构。 它主要包括三个组件：正向语言模型（粉红色），向后语言模型（黄色）和BiLSTM分段模型（蓝色）。 我们使用门控机制来控制语言...
论文阅读笔记 | ACL-2022 | 分治文本语义匹配：关键词和意图
Megrez_9的博客
07-31 1322
原文标题：Divide and Conquer: Text Semantic Matching with Disentangled Keywords and Intents 本文利用分治的思想，在训练模型中将文本分为关键词和意图，在不增加计算量的前提下有效提升了匹配效果。这种方法简单直接，且能与各种PLM有效结合。...
多视角对话摘要生成(论文阅读笔记)
sdauguanweihong的博客
07-28 780
Multi-View Sequence-to-Sequence Models with Conversational Structure for Abstractive Dialogue Summarization 阅读笔记 Motivation 与传统的文本不同，对话中往往隐含着丰富的特定结构信息，也就是说对话其实是按一定结构组织的。一段对话可以从多个不同视角去看待，会产生不同的语篇结构。从一般视角(generic view)上看，可以把对话总体上看成一块（global view)，也可以把每条语句可以看
ACL 2019 | ReCoSa：多轮对话生成中利用自注意力检测相关上下文
a609640147的博客
07-26 1282
在多轮对话生成中，大多数情况下答复仅仅与一部分上下文相关。一个完美的模型应该具有能力检测到这些相关的上下文，并根据它生成恰当的答复。常用的层次循环端到端模型(HRED)对上下文并不做区分，这会损害答复生成过程。本文提出了一种新颖的模型(ReCoSa)，其能通过自注意力检测到相关上下文。基于自注意力机制(self-attention mechanism)在处理长程依赖的优势，本文提出一种新模型结构(...
【论文速递】 ACL2022 - 三思而后言：为对话模型显式地生成知识
qq_41974375的博客
02-04 291
【论文速递】 ACL2022 - 三思而后言：为对话模型显式地生成知识
开启注册丨ACL-IJCAI-SIGIR顶级会议论文报告会（AIS 2020）
数据派THU
05-21 2944
ACL、IJCAI和SIGIR是自然语言处理、人工智能和信息检索领域的顶级国际学术会议。AIS顶级会议论文报告会是由中国中文信息学会青年工作委员会主办的系列学术活动，自2017年起已连续...
ACL | 自然语言处理（NLP）之多轮对话建模优化（Utterance ReWriter）
yinizhilianlove的博客
08-04 3247
引言     最近2019年新鲜的ACL论文出来了，发现了一篇关于多轮对话模型的文章还不错，其题目为：Improving Multi-turn Dialogue Modelling with Utterance ReWriter。文章单位：微信人工智能模式识别中心（腾讯）。文章的背景为：当前我们在日常多轮交流的时候，经常会出现前后相互参照和信息遗漏的问题，这对于人来说能够正确的理解出说话人的意图，...
计算机会议排名等级
热门推荐
CSDN
10-27 35万+
CORE Computer Science Conference Rankings Acronym Standard Name Rank AAAI National Conference of the American Association for Artificial Intelligence A+ AAMAS International
python ijcai-18 阿里妈妈搜索广告转化预测 逻辑回归模型
09-28
Python ijcai-18阿里妈妈搜索广告转化预测中，逻辑回归模型是一种常用的机器学习算法。 逻辑回归是一种分类算法，它可以用于预测目标变量的概率。在广告转化预测中，我们通常希望根据用户点击广告的特征，预测用户...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

诸神缄默不语

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值