【明天15:00】EMNLP 2023杰出论文奖分享

点击蓝字

关注我们

AI TIME欢迎每一位AI爱好者的加入！

Outstanding paper

扫描二维码预约直播

（或点击阅读全文预约）

✦+

+

直播时间

2023年12月22日 15:00-16:00

+

邀请嘉宾

讲者简介

齐济：

清华大学计算机科学与技术系，知识工程实验室（KEG）博士四年级研究生，导师为许斌研究员、李涓子教授。主要研究方向为信息抽取和视觉语言理解，曾在CIKM、EMNLP等学术会议上发表论文。目前的研究兴趣为多模态视觉语言模型训练。

报告题目

保持知识不变性：反思开放信息抽取的鲁棒性验证

论文介绍

论文聚焦开放信息抽取模型在现实世界场景下的准确性和鲁棒性，首次提出了一个模拟现实世界场景鲁棒性验证的开放信息抽取评测基准，在该基准中具有相同知识含义的句子可能在句法和表述上发生迁移。

论文提出了一种新的样本数据结构——知识不变团 (Knowledge-Invariant Clique)，由知识含义相同但句法和表述形式均出现迁移的多个句子组成；设计并标注了一个大规模的试验平台以及一个鲁棒性指标的计算方法，只有当一个模型在知识不变团内全部样本上均准确时才能被判定为鲁棒。通过对过去十年开放信息抽取的典型模型以及一个具有代表性的大语言模型进行实验，结果表明论文所提出的基准能够有效验证开放信息抽取模型在现实世界场景下的准确性和鲁棒性。

该论文相关的数据、算法、标注指南和分析工具均已开源。‍‍

提

醒

论文链接：

https://arxiv.org/abs/2305.13981

https://aclanthology.org/2023.emnlp-main.360/

代码链接：

https://github.com/qijimrc/ROBUST

请添加“AI TIME小助手（微信号：AITIME_HY）”，回复“大模型”，将拉您进群！

AI TIME微信小助手

往期精彩文章推荐

 关于AI TIME 

AI TIME源起于2019年，旨在发扬科学思辨精神，邀请各界人士对人工智能理论、算法和场景应用的本质问题进行探索，加强思想碰撞，链接全球AI学者、行业专家和爱好者，希望以辩论的形式，探讨人工智能和人类未来之间的矛盾，探索人工智能领域的未来。

迄今为止，AI TIME已经邀请了900多位海内外讲者，举办了逾450场活动，超500万人次观看。

我知道你

在看

哦

~

点击 阅读原文 预约直播！