AIOps挑战赛 | 2020 AIOps挑战赛流程介绍
发布时间：2020-03-30 18:36:00
非常感谢裴老师邀请我参与到第三届国际AIOps挑战赛的组织活动中。在过去三个月挑战赛筹备的过程中，收获巨大，也深刻体会到运维工作的重要性和复杂性。更加深刻地体会到，以裴老师的NetMan实验室、中山大学陈老师为代表的学术界，以及以浙江移动蒋总团队代表的工业界，有着非常强大的驱动力和责任感，携手共同推动智能运维的发展，通过我们的努力去改变这个世界运转和运维的方式。
我博士期间的研究方向是机器学习（异质信息网络、迁移学习、数据融合）。加入NetMan之后发现，博士期间的研究课题，能真正地有一些工业界场景化的应用，能够有希望起到实质性的影响力。在NetMan实验室，我的研究方向是智能运维大课题下基于数据融合的故障检测和根因定位。应用之间的拓扑，硬件之间的拓扑，以及硬件、应用之间的部署关系之下，有海量的异构数据源，这其中有平台指标、调用链数据，同时还会有日志、有告警。我们如何把多种数据融合起来，实现故障检测和根因定位？这是一件非常有挑战性的工作。本次挑战赛即为综合利用调用链、主机、数据库、中间件等各类指标数据，进行故障定位的一种实践。
2020国际AIOps挑战赛报名情况
截至目前，已有422位选手组成的98支队伍正式报名参赛；大赛官网累计注册2200多人；竞赛交流微信群也吸引了1300多位同行。大家针对AIOps挑战赛（或智能运维）进行非常深入的讨论。
2020国际AIOps挑战赛流程
挑战赛分三个阶段：预赛阶段、复赛阶段和决赛阶段。
01.预赛阶段
预赛阶段中我们也是分为两个阶段。第一个阶段是从今年2月下旬开始，我们发布第一批数据的同时预赛开始报名。第一批数据里面是没有包含故障的。
接下来即将进入预赛第二阶段，预计3月下旬（预计）将发布第二批数据，同时开放测评。第二批数据将包含我们注入的故障。
02.复赛阶段
一个月之后，即2020年4月下旬预赛结束。（比赛报名将于此前截止）通过测评，我们将依次邀请在预赛中排名靠前的不超过20支队伍进入复赛。
复赛阶段，每支队伍会分配到公有云资源。4月下旬到5月下旬这一个月的时间里面，是选手的准备阶段。选手进行代码调试和程序部署，准备实时测评。
5月下旬，复赛准备阶段结束，正式进入复赛的实时测评阶段复赛的实时测评阶段。实时测评阶段，选手需要订阅Kafka消息。竞赛筹备组会实时推送监控数据，选手程序进行实时的故障发现和定位。参赛队伍须在发生异常后的规定时间内产生结果。我们的系统将从各个指标上评判参赛队伍的算法效果，同时记录故障注入后的评测分数，实时更新榜单和排名。
为了保证比赛公正性，主办方会检查每个复赛队伍中的代码中，是否是有作弊行为。
6月中旬，复赛阶段结束，排名靠前的队伍会受邀进入决赛。
03.决赛阶段
决赛将以现场答辩形式，在6月中下旬举行。决赛前，主办方将对复赛成绩靠前的队伍进行代码审核。审核完成后，选手准备答辩PPT进行现场答辩。大赛组委会针对测试结果和答辩效果加权计算总成绩，决出最终大奖。
本次大赛设置三个级别的奖项
- 冠军队伍一支，奖金8万元人民币；
- 亚军队伍一支，奖金3万元人民币；
- 季军队伍若干，奖金1万元人民币。
在这里再次提醒，大家现在还可以继续报名。大赛的报名时间截止是4月下旬，即预赛阶段结束前报名通道都是开放的。
同时也代表组委会再次声明：国际AIOps是面向全社会开放的。即，任何年满13周岁的个人、高等院校、科研单位、企业，或创业团队等人员均可以报名参加。
每支参赛队伍需自行确定一位领队，由这位领队在大赛平台上注册一个账号，并上传个人身份信息进行认证。通过审核之后，即完成了参赛队伍的正式注册。大赛官网（网址）上对于完整的注册流程，有非常明确的介绍。
最后，对代码提交和审核做一个简单说明。预赛和复赛排名靠前的队伍需要代码提交到邮箱 netman_iops@126.com 进行审核，审核之后才会确认成绩是有效的。
关于知识产权：比赛中涉及到的知识产权是归选手所有。关于比赛中机器联网：为避免潜在作弊嫌疑，比赛机器理论上不可联网，只可于测试的脚本进行通讯；实时测评结束的次日可以查看数据及结果。
