编辑: 南门路口 | 2016-08-16 |
在线评测系统将 对参赛队伍提交的算法运行结果进行性能评测,并按性能高低分 任务进行排名. 技术擂台赛开始前,组织方将通过比赛网站发布训练数据集、 算法平台(包括参考算法代码、API 接口、结果文件生成等) ,以 确保参赛队伍的算法运行结果能正确提交到在线评测系统上进行 性能评测.参赛队伍须根据 API 接口集成本队研发的算法到算法 平台.技术擂台赛开始后,组织方将通过比赛网站发布验证数据 集.验证数据集与训练数据集不重叠,用于在线评测系统中客观 评测参赛队伍的算法性能. 评测结果的排名将以周为单位公布在比赛的官方网站.在技 术擂台赛期间,每个参赛队伍每周最多可以提交
2 次结果进行在 线评测. 3. 第三方验证 组织方将根据参赛队伍数量及排名情况选择一定数量的队伍 进入全国决赛,但每个任务参加决赛的队伍不超过
10 支. 为保证比赛公平性和选手提供结果的有效性,本次大赛采用 第三方验证的方式.即所有技术擂台赛优胜者将提供可执行程序 和相关模型,由第三方采用测试数据集予以校验.最后,大会组 织方综合组织方评测结果和第三方验证结果在网站上公布经过第 三方验证的最终排名情况和进入全国决赛队伍.
4 4. 全国决赛 技术擂台赛的优胜队伍将进入决赛.决赛采用现场评测方式, 由组织方提供场地和硬件设施并组织专家评审团.参赛队伍在限 定时间内(24 小时)将本队的算法程序在组织方提供的硬件平台 上调试,并生成最终算法程序.最终算法程序将在决赛测试数据 集上运行并得到评测结果,并以可视化方式实时显示.为保证比 赛的公平性,任何参赛团队不能自带设备参加决赛.在决赛期间, 比赛开始后严禁任何选手以任何形式接触参赛计算机终端,包括 插U盘、移动硬盘或调整程序参数等;
选手违规将直接取消其所 在团队决赛资格. 演示答辩采用现场演示与技术答辩的方式.由组织方提供场 地并组织专家评审团.参赛队伍在现场进行系统演示,并准备 ppt 进行技术讲解和答辩.专家评委将根据技术擂台赛排名、系 统演示和技术答辩得分综合评定出最终获奖队伍.
(四)比赛时间(具体时间安排请主动关注大赛官网) 时间 安排
2018 年5月初 验证数据集发布,技术擂台赛启动
2018 年7月上旬 技术擂台赛结束;
参赛队伍提交可执行程序,准备 第三方验证
2018 年7月上旬 第三方验证,确认进入全国决赛的队伍
2018 年7月或
8 月 决赛及学术论坛 (参赛者现场评测、答辩、论坛、研讨、参观企业 等)
(五)知识产权和作品所有权 为保证比赛的公正性,所有的参赛队伍须将算法 SDK 提交
5 给组织方存档,并保证基于此算法 SDK 能重复得到本队提交的 结果. 比赛期间参赛队伍所有的方案、算法和 SDK 及相关的知识 产权均属于参赛队伍所有,组织方承诺履行保密义务,并不用于 除本比赛外的任何其他用途. 参赛队伍应保证所提供的方案、算法和 SDK 属于自有知识 产权.组织方对参赛队伍因使用本队提供/完成的算法和源代码而 产生的任何实际侵权或者被任何第三方指控侵权概不负责.一旦 上述情况和事件发生参赛队伍必须承担一切相关法律责任和经济 赔偿责任并保护组织方免于承担责任.