Improving Natural Language Processing Tasks with Human Gaze-Guided Neural Attention Neurips 2020
文章链接
slide链接
代码链接
MOTIVATION:人类视线对于模型注意力预测是一个很有力的监督信号,然而在NLP领域带视线标注的文本数据很少。因此作者采用认知模型EZ-Reader对单词显著性模型(TSM)进行预训练,该模型通过心理及认知方面的大量实验得到,可以预测人人类在阅读时的眼动控制过程。该模型由手动设计规则得到,参数量有限,因此作者在其预训练的基础上, 采用真实的带视线标注的NLP数据对TSM进行微调。此外,为了得到任务特定的注意力。
Goal-Oriented Gaze Estimation for Zero-Shot Learning CVPR 2021
视线引导的注意力机制学习
于 2023-05-10 14:04:19 首次发布