深入理解推荐系统：推荐系统中的attention机制

 什么是attention机制、在推荐模型中的应用（会介绍相关模型，AFM/DIN/DIEN/DST）和参考文献

 什么是attention机制

 Attention函数的本质可以被描述为一个查询（query）到一系列（键key-值value）对的映射，在计算attention时主要分为三步

• 第一步是将query和每个key进行相似度计算得到权重，常用的相似度函数有点积，拼接，感知机等；

• 第二步一般是使用一个softmax函数对这些权重进行归一化；

• 第三步将权重和相应的键值value进行加权求和得到最后的attention。