多模态视频商品检索记录再刷新！第二届淘宝直播算法大赛完美落幕

基于淘宝直播数据构建的多模态视频商品检索数据集Watch and Buy (WAB)，淘系技术于4月27日正式发起第二届淘宝直播商品识别大赛，相较与第一届大赛，在赛题设计上引导选手注重全类别的识别效果，特别是长尾的商品类别、视觉纹理简单商品的识别等，另一方面更加强调多模态信息(主播讲解语音、商品标题)等信息在精确识别视觉相似讲解商品中的重要性。

本届赛事共吸引来自北京大学、清华大学、中科院、卡耐基梅隆大学、伦敦大学、南京大学、浙江大学等全球知名高校学者组成的587支队伍参加，历经3个月的激烈追逐，最终来自中科院计算所、北京大学、中南大学组成的队伍分别获得本赛事的冠军、亚军和季军。

其中来自中科院计算所的冠军队伍的F1分数高达0.69，超过baseline0.22，Top3队伍的F1分数均超过0.6。在论文征集部分，workshop共接收了5篇论文，包括两篇long paper，三篇short paper。

Watch and Buy Challenge & workshop 成果总结

直播中多模态商品识别Workshop于10月20日下午在成都举行，聚集了来自海内外的计算机视觉领域专家们带来了精彩分享。

其中包括新加坡国立大学计算机学院的KITHCT讲座教授Tat-Seng Chua分享的“Deep Visual Analytics: Tow