本文由获得2023大数据挑战赛全国第一名的团队分享他们的夺冠经验。团队通过理解赛题数据背景，结合业务逻辑，构建精细化特征工程，利用K8s系统结构设计多层次特征。他们搭建的高效特征提取和模型训练框架，以及特征重要性反馈方法，助力模型优化。团队成员间的协作与对数据挖掘的深入理解，使他们在比赛中脱颖而出。决赛答辩中，他们对赛题和智能运维系统有了更深入的认知。
团队名称
差分进化优化AC自动机
团队成员
陈子皓（华南师范大学）
李浩荣（华南师范大学）
白来敏（西安交通大学）
团队名次
全国第一名
赛题描述说明介绍
2023大数据挑战赛赛题说明+决赛评分标准回顾
参赛分享与收获
本次比赛是一个半结构化数据的比赛，赛题背景是基于多源数据的 IT 系统故障发现，赛题任务可以理解为是一个多源数据多粒度的多标签机器学习分类问题。
我们的方案优势在于，我们完全理解了赛题数据的来源背景以及其现实的业务逻辑意义，在对数据观察与分析的过程中，我们发现赛题的数据很有可能来自一个类似k8s容器管理的系统，因此我们借鉴了k8s的系统结构，并利用其结构关系来帮助我们构造特征。我们都知道k8s是一个多层次的系统，其业务逻辑是从顶层到底层，从Pod到容器再到接口，每一个层次都拥有多种信息，因此，我们根据每一类指标所具备的信息沿着上述层次构造交叉特征，形成多层次的、跨层次的交叉特征，保证每一个层次的信息都被充分地挖掘。对于每一种层次&#x
最低0.47元/天 解锁文章
487
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
