ICCV 2025 视觉质量评估挑战赛(VQualA)启动

关注公众号,发现CV技术之美

国际计算机视觉大会(ICCV 2025)联合首届VQualA视觉质量评估研讨会,现正式推出四大核心竞赛赛道。本次挑战赛聚焦视觉质量评估领域的前沿问题,为全球研究者提供创新展示与学术交流的高端平台。

  • VQualA Workshop主页:https://vquala.github.io/


赛道一:ISRGC-Q: Image Super-Resolution Generated Content Quality Assessment Track

竞赛概述

ISRGC-Q赛道专注于评估超分辨率算法生成的高分辨率内容的感知质量。 旨在:

  1. 分析最新超分辨率技术引入的伪影类型;

  2. 有效评估这些特定失真水平;

  3. 为学术界与工业界提供交流合作平台。

  • 报名链接:https://codalab.lisn.upsaclay.fr/competitions/22924

数据集:ISRGen-QA

本挑战赛采用专为超分辨率算法感知评估设计的ISRGen-QA数据集,包含以下内容:

  • 720张超分辨率图像(分辨率约2K:2040×1152~1440)

  • ×2、×3、×4、×8四种放大倍率

  • 14种算法生成结果(5种GAN模型、3种扩散模型、4种Transformer模型、2种回归模型)

  • 21名参与者的主观评分(经异常值过滤,原始23名) 数据集同时提供平均意见分数(MOS)和个体评分分布。

重要日期

  • 2025年5月25日:竞赛开始

  • 2025年6月25日:参赛提交截止

  • 2025年6月28日:初步结果公布

  • 2025年7月7日:挑战赛论文提交截止

  • 2025年6月25日:研讨会论文提交截止

  • 2025年7月11日:论文录用通知

  • 2025年7月30日:最终结果公布及优胜者名单发布

(注:原文中6月25日同时标注为“Submission deadline”和“Workshop paper deadline”,可能存在重复或不同类别提交,建议核实具体分类。)

奖项设置

优胜团队将获得奖项,并受邀向VQualA 2025研讨会提交挑战赛论文,录用论文将收录至ICCV 2025 Workshops会议文集。


赛道二:FIQA: Face Image Quality Assessment Track

竞赛概述

FIQA赛道专注于真实场景中人脸图像的感知质量评估。 亮点:

  1. 3万张真实场景人脸图像(训练集)+ 1千张验证集 + 1千张测试集

  2. 图像尺寸未标准化(宽度200~1000像素)

  • 报名链接:https://codalab.lisn.upsaclay.fr/competitions/23017

重要日期

  • 2025年5月25日:竞赛启动,发布训练数据(含输入图像与评分)及验证数据(仅输入图像)

  • 2025年6月28日:发布最终测试数据(仅输入图像)

  • 2025年7月5日:测试结果提交截止

  • 2025年7月6日:技术文档与代码提交截止

  • 2025年7月8日:初步结果公布

  • 2025年7月9日:挑战赛论文提交截止(各团队可选提交,收录至研讨会论文集)

  • 2025年7月11日:挑战赛论文录用通知

  • 2025年7月11日:技术报告提交截止(全体团队合作撰写,收录至研讨会论文集)

  • 2025年7月11日:竞赛最终结果及优胜者公布

  • 其他日期:2025年6月25日:VQualA研讨会论文提交截止

奖项设置

优胜团队将获现金奖励并受邀提交论文至研讨会,录用论文收录于ICCV 2025 Workshops论文集:

  • 第一名:800美元

  • 第二名:400美元

  • 第三名:300美元


赛道三:EVQA: Engagement Prediction for Short Videos Track

竞赛概述

EVQA-SnapUGC赛道专注于短视频参与度预测,通过分析短视频的参与度水平来理解和建模社交媒体平台上用户生成内容(UGC)短视频的受欢迎程度。

  • 报名链接:https://codalab.lisn.upsaclay.fr/competitions/23005

数据集:SnapUGC

本次挑战赛采用SnapUGC数据集,包含以下内容:

  • 训练数据:106,192条短视频(时长5-60秒),每条视频均附带创作者提供的标题和描述

  • 验证数据:6,000条短视频(时长5-60秒),包含完整元数据

  • 测试数据:8,459条短视频(时长5-60秒),包含完整元数据

数据集特点:

  • 所有视频均为Snap Spotlight平台公开内容

  • 包含视频间的相对参与度排名

  • 核心评估指标:参与持续率(ECR)

重要日期

  • 2025年5月25日:竞赛正式启动

  • 2025年6月28日:最终测试数据发布

  • 2025年7月5日:竞赛作品提交截止

  • 2025年7月6日:技术文档和代码提交截止

  • 2025年7月8日:初步结果公布

  • 2025年7月9日:挑战赛论文提交截止(团队可选提交,收录至研讨会论文集)

  • 2025年7月11日:挑战赛论文录用通知

  • 2025年7月11日:技术报告提交截止(全体团队共同撰写,收录至研讨会论文集)

  • 2025年7月11日:竞赛最终结果及优胜者公布

  • 其他日期:2025年6月25日:研讨会论文提交截止

奖项设置

优胜团队将获得:

  • 冠军:800美元(或等值奖品)

  • 亚军:400美元(或等值奖品)

  • 季军:300美元(或等值奖品)

并受邀向VQualA 2025研讨会提交挑战论文,录用论文将收录至ICCV 2025 Workshops会议论文集。


赛道四:Visual Quality Comparison for Large Multimodal Model Track

竞赛概述

本次"视觉质量对比"赛道旨在通过利用大型多模态模型(LMMs)的推理能力,在开放式比较场景中突破图像质量评估(IQA)的现有边界。

  • 报名链接:https://codalab.lisn.upsaclay.fr/competitions/23016

核心创新

本赛道聚焦图像对和多图像组的开放式质量对比,要求参赛模型能够:

  1. 识别细粒度质量差异

  2. 针对自然语言问题生成详细推理回答(如"哪张图像存在过曝问题"或"四张图中哪张最清晰")

数据集竞赛采用首个开放式质量对比指令微调数据集: Co-Instruct-562K数据集包含:

  • 20.2万条单图像描述(来自Q-Instruct-200K)

  • 22.2万组带对比标注的图像对

  • 7.7万组三图像集合

  • 6.1万组四图像集合

数据来源:

  • Merge2Compare:基于人工标注质量描述的LLM对比合成

  • Teach2Compare:GPT-4V对未标注多图像对比生成的伪标签

同时采用新提出的MICBench基准,包含:

  • 覆盖多种失真类型的多选题(MCQ)

  • 三图像和四图像对比任务

(注:专业术语如LMMs、MCQ等首次出现时标注中文解释,保持技术文档的准确性与可读性;数据集名称保留英文缩写形式以方便学术引用。)

重要日期

  • 2025年5月25日:竞赛启动

  • 2025年6月25日:作品提交截止

  • 2025年6月28日:初步结果公布

  • 2025年7月7日:挑战赛论文提交截止

  • 2025年6月25日:研讨会论文提交截止

  • 2025年7月11日:论文录用通知

  • 2025年7月30日:最终结果及优胜者公布

奖项设置

优胜团队将获得奖项,并受邀向VQualA 2025研讨会提交挑战赛论文,录用论文将收录至ICCV 2025 Workshops会议文集。


赛道五:DIQA: Document Image Quality Assessment Track

竞赛概述

本赛道专注于评估文档图像增强算法处理后的感知质量。

  • 报名链接:https://codalab.lisn.upsaclay.fr/competitions/23020

数据集:DIQA-5000

比赛数据集包括5000张增强的文档图像,并附有人工标注的平均意见得分(MOS)。

源文档图像

500张原始文档图像,通过手机拍摄,涵盖多种类别。

  • 内容类型:文本密集页面、表格、图表、手写笔记、混合布局等。

  • 语言:包括英语、中文和数学符号。

  • 降质类型:每张图像均人为添加了以下一种失真效果:散焦模糊、摩尔纹、折痕或弯曲、阴影等。

文档图像增强

每张原始图像通过随机组合的文档增强算法处理,生成10种不同的增强图像。

主观质量标注

  • 标注人员:15名具有文档处理专业背景的标注者。

  • 评估流程:

    • 两两对比:标注者并排查看原始图像与增强图像。

    • 评分维度:从整体质量、清晰度和色彩保真度三个维度打分(0-5分)。

  • 质量控制:根据ITU-R BT.500标准剔除异常评分。

  • MOS计算:每张图像在各维度的最终MOS = 有效标注者评分的平均值。

数据集划分

  • 训练集:350张原始文档图像和3,500张增强图像(占总量的70%),包含3个评分维度的MOS。已向注册参赛者开放。

  • 验证集:50张原始文档图像和500张增强图像(占总量的10%)。

  • 测试集:100张原始文档图像和1,000张增强图像(占总量的20%)。

重要日期

  • 2025年5月25日:竞赛启动

  • 2025年6月25日:作品提交截止

  • 2025年6月28日:初步结果公布

  • 2025年7月7日:挑战赛论文提交截止

  • 2025年6月25日:研讨会论文提交截止

  • 2025年7月11日:论文录用通知

  • 2025年7月30日:最终结果及优胜者公布

奖项设置

  • 冠军:1200美元或等值奖品+获奖证书

  • 亚军:1000美元或等值奖品+获奖证书

  • 季军:800美元或等值奖品+获奖证书

以及获奖论文将收录至ICCV 2025 Workshops论文集。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值