淘宝直播商品识别大赛开幕，助力视频多模态商品检索技术再升级(1)

最后

针对最近很多人都在面试，我这边也整理了相当多的面试专题资料，也有其他大厂的面经。希望可以帮助到大家。

最新整理面试题

上述的面试题答案都整理成文档笔记。也还整理了一些面试资料&最新2021收集的一些大厂的面试真题

最新整理电子书

最新整理大厂面试文档

以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持。

本文已被CODING开源项目：【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录

需要这份系统化的资料的朋友，可以点击这里获取

为了推动行业直播的多模态商品识别技术发展，我们依托淘宝直播海量数据，开源了业界首个大规模的多模态视频商品检索数据集Watch and Buy (WAB)。该数据集包含70,000个由直播视频片段和对应讲解商品构成的匹配对，具有规模大、标注全、模态多、功能广的特点。我们抽取视频片段若干关键帧和商品的全部商品图进行了实例框级标注，商品id数达82,173个，标注图像数达1,042,178张，检测框实例1,654,780个。框级标注信息丰富多样，包括商品的检测框、类别、视角、展示方式、同款编号等。

除了视觉标注，我们还对主播讲解语音进行了人工文本转录，同时提供了商品的标题文本信息。该数据集可用于物体检测的算法、商品重识别算法、主播意图识别、跨模态检索和多模态检索等多种算法的研究。为了方便国际选手参赛，对数据集中的中文部分，我们提供了文本分词和预训练的词向量表示，大大降低了比赛选手的参赛限制。

首届淘宝直播商品识别大赛于2020年3月启动，共吸引到海内外近2000支队伍参加，涌现的优秀方案有效提升Baseline方案指标达20%，赛后优秀方案经过与作者团队的通力合作，优化后在淘宝直播场景上线。

淘宝直播商品识别大赛2021较与第一届，在赛题设计上特别优化并引导选手注重全类别的识别效果，特别是长尾的商品类别、视觉纹理简单商品的识别等，另一方面更加强调多模态信息(主播讲解语音、商品标题)等信息在精确识别视觉相似讲解商品中的重要性。相信本次大赛，能够促进选手在多模态商品识别大赛中提出新的方法和技术，持续激发视频多模态检索领域的技术创新研究。

• Workshop主页：https://sites.google.com/view/wab2021

✿  拓展阅读

作者|淘系技术

**编辑|**橙子君

最后

Java架构学习技术内容包含有：Spring，Dubbo，MyBatis, RPC, 源码分析，高并发、高性能、分布式,性能优化，微服务 高级架构开发等等。

还有Java核心知识点+全套架构师学习资料和视频+一线大厂面试宝典+面试简历模板可以领取+阿里美团网易腾讯小米爱奇艺快手哔哩哔哩面试题+Spring源码合集+Java架构实战电子书+2021年最新大厂面试题。

本文已被CODING开源项目：【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录

需要这份系统化的资料的朋友，可以点击这里获取

需要这份系统化的资料的朋友，可以点击这里获取**