一、圣诞老人 2024 - 困惑排列拼图
组队截止时间:25年1月24日
公布成绩时间:25年1月31日
赛题背景:在这个充满节日气氛的时刻,Rudolph和他的朋友们为大家准备了一场别开生面的挑战——“Santa 2024 - The Perplexity Permutation Puzzle”。这个比赛的灵感来源于经典的圣诞故事,但故事中的文字却被调乱了,等待着聪明的参赛者们来重新排列。 参赛者的任务是将这些混乱的文字重新整理,使其恢复成流畅的故事。通过最小化“困惑度”(perplexity),你将帮助读者更轻松地理解这些故事。困惑度是衡量文本可读性的重要指标,越低的困惑度意味着故事越清晰易懂。
二、CZII - CryoET 物体识别
组队截止时间:25年1月29日
公布成绩时间:25年2月5日
赛题背景:在本次竞赛中,您将开发机器学习 (ML) 算法来注释 3D 细胞图像中的各种蛋白质复合物(具有明确结构的生物粒子),从而加速生物医学科学的发现并推进疾病治疗。
三、LLMs大语言模型评委系统漏洞筛查
组队截止时间:25年2月25日
公布成绩时间:25年3月4日
赛题背景:本次 Kaggle 比赛“LLMs- You Can't Please Them Al”探讨了在主观评估中,使用大型语言模型(LLMs)作为评委系统的脆弱性。参赛者需要设计能最大化多个 LLM 评分分歧的英语短文,帮助研究 LLM 在主观任务中的能力和局限性。
比赛主要是基于 LLMs 的评分一致性、对抗输入的鲁棒性及漏洞利用的研究。比赛的结果将促进理解如何改进此类系统的健壮性。
四、CIBMTR - 同种异体造血干细胞移植生存预测公平性竞赛
组队截止时间:25年2月26日
公布成绩时间:25年3月5日
赛题背景:在本次竞赛中,你将开发模型来改善异基因造血干细胞移植(HCT)患者的存活率预测。这是确保每位患者都有公平机会获得成功治疗的重要一步,无论其背景如何。
五、Konwinski Prize - 解决 GitHub 问题的 AI 挑战
组队截止时间:25年3月5日
公布成绩时间:25年6月11日
赛题背景:Konwinski Prize 是一场由 Andy Konwinski 主办的代码竞赛,目标是开发一个能够解决 90% 新 GitHub 问题的 AI 模型。竞赛依托 SWE-bench 基准测试,要求参赛者在 GitHub 提供的实际问题上设计高效的解决方案,最终获胜者将有机会赢取高达 100 万美元 的奖金。 该比赛旨在探索 AI 在软件开发领域中的应用,尤其是在优化代码修复、减少开发者调试时间等方面的潜力,助力开发者专注于更高价值的任务。