1. 竞赛目的与意义
X 光安检在机场、地铁等重要场所广泛应用,及时高效地检测和识别X光安检图像中的可疑目标,对维护社会治安和预防恐怖主义活动具有重要作用。X 光安检图像智能检测技术,不仅能够提高安检速度,降低人力成本,还能够不断提高对可疑物品的识别准确率,这不仅有助于及时发现和处理安全隐患,还能够为相关部门提供更为科学、精准的决策支持,从而更好地维护社会稳定和人民生命财产安全。
本次大赛旨在探索和推动计算机视觉等人工智能技术在公共安全领域的深度融合与创新应用,通过竞赛形式,激发参赛者的创新潜能,促进技术交流与合作,加快人工智能技术在X 光安检领域的应用进程,提高 X 光安检图像分析的准确性和智能化水平,为构建更加安全、和谐的社会环境贡献力量。
2. 竞赛组织方
组织者:高红霞、黄耀斌、关振明、李栗滔
组织单位:广州深视未来智能科技有限公司、人工智能与数字经济广东省实验室(广州) (简称:琶洲实验室)
联系邮箱:prcv2024xray@163.com、huangyb83@foxmail.com、lilitao0517@foxmail.com
竞赛网站:https://insightfuture.cn/PRCV2024Xray.html
3. 竞赛者要求
按自愿报名原则,大赛面向全社会开放,个人、高等院校、科研单位、企业等人员均可报名参赛。
4. 参赛方式
个人或团队方式均可通过邮件方式报名参赛,每支队伍需指定一名队长,队伍成员不超过5人。每名选手只能参加1支参赛队伍,一旦发现某选手以注册多个账号的方式参加多支队伍,将取消所有相关队伍的参赛资格。参赛队伍发送报名信息至prcv2024xray@163.com。
格式要求:
邮件标题“PRCV大规模X光安检图像检测挑战赛2024_{参赛队伍名称}”
邮件内容包括参赛队伍基本信息、队伍负责人信息、参赛人数、联系方式(邮箱、联系电话)、参赛单位名称等;
邮件附件:“PRCV大规模X光安检图像检测挑战赛2024_{参赛队伍名称}.xlsx”,表格具体要求见下方表格;
注:竞赛组织方收到邮件并与报名者确认、签署竞赛保密协议书后,视为报名成功。
报名截止时间为:北京时间2024年6月15日 23:59:59。
队伍名称 | |||||
参赛单位 | |||||
姓名 | 单位 | 学历/职称 | 手机号 | 邮箱 | |
队长 | |||||
队员1 | |||||
队员2 | |||||
队员3 | |||||
队员4 | |||||
指导老师(可选) |
5. 主要时间节点
时间 | 内容 |
5月1日 | 组委会通过官方网站发布竞赛公告,详细介绍参赛主题、方法和评比方式。 |
5月1~6月15日 | 参赛队伍报名及参赛资格确认。 |
6月15日~7月31日 | 初赛开始,组委会发布比赛数据集。各参赛队伍在规定时间内完成比赛任务, 将比赛结果按规定格式提交至竞赛网址,每个参赛队伍可提交5次结果参与评测。 排名前16的队伍将进入复赛。 |
8月7日~8月21日 | 复赛开始。进入复赛的队伍根据初赛评测的反馈进行方法改进和完善, 将改进后的比赛结果提交至竞赛网址,每个参赛队伍可提交3次结果参与评测, 取最优结果作为队伍最终成绩。 |
8月21日~9月15日 | 组委会按照规定评测方法,验证审核各队伍代码及模型结果,对结果进行评比和公布, 并选出进入线下决赛的团队。 |
10月18日 | 进入决赛的队伍参加第七届中国模式识别与计算机视觉大会PRCV2024竞赛研讨会, 进行现场演示和答辩,组委会对决赛表现进行评分,并确定最终获奖名单。 公布获奖名单并颁奖。 |
6. 竞赛数据、硬件资源的准备与使用方式
本次比赛提供带标注的训练数据,即含待检测对象的X光图像及其标注文件,提供的X光安检图像及其含标注框信息的标注文件存放在不同的文件夹中,图像文件采用jpg格式,标注文件采用xml格式,标注信息各字段参照Pascal VOC数据集标准定义。
l数据集特点:
1、类别为12类,包括:充电宝(powerbank)、手机(mobilephone)、 电池(battery)、剪刀(scissors)、水果刀(fruitknife)、厨房刀具(cleaver)、洗护用品 (suspiciousliquid1)、化妆用品(susoiciousliquid2)、打火机(lighter)、手铐(handcuffs)、 甩棍(expandablebatons)以及压缩气体(pressure),待检测对象的X光图像示例如下所示。
|
|
|
|
| |
充电宝 | 手机 | 电池 | 剪刀 | 水果刀 | 厨用刀具 |
|
|
|
|
|
|
洗护用品 | 化妆用品 | 打火机 | 手铐 | 甩棍 | 压缩气体 |
2、训练集:组织方会提供5000张带标注的训练图片。原则上不禁止使用公开数据集,但不建议使用公开数据集。不允许使用外源非公开数据集(包括往期比赛的数据集),因其有损比赛公平公正且无法保证结果的可复现性。
3、测试集:初赛提供5000张测试图片,复赛提供30000张测试图片。
4、所有X光图像包含1个及以上违禁品对象,分辨率:28×41~1193×645,数据来源于多台不同厂家的X光机。
l获取方式:
参赛队伍自行注册百度网盘ID,每个队伍共用一个百度网盘账号,由此百度网盘ID联系组委会,由组织方通过百度网盘发送训练、测试数据集给参赛队伍。除组织方提供的数据外,参赛队伍仅能使用ImageNet、SIXray、OPIXray、HiXray、PIDray公开数据集作训练数据使用,严禁使用其他公开或非公开数据集。
注:竞赛数据集仅供本竞赛使用和学术研究,不得用于商业产品开发使用,未经许可不得转发他人使用。
7. 任务设置
基于组织方提供的大规模X光安检图像集设计检测模型,对X光安检图像中的指定类别的物品进行检测,识别出物品的位置、类别和置信度。
8. 结果评价方式
l初赛、复赛评测方式:
采用通用目标检测评价指标,即mAP(IoU = 0.5:0.95)方式评测性能。具体如下:
① 首先计算各类的AP:
(1)根据预测框和标注框的IoU是否达到阈值判断该预测框是真阳性还是假阳性;
(2)根据每个预测框的置信度进行从高到低排序;
(3)在不同置信度阈值下计算精确率和召回率,得到若干组PR值;
(4)绘制PR曲线并计算相应阈值的AP值。
(5)计算阈值0.5到0.95的AP值,间隔0.05取平均,得到IoU = 0.5:0.95的 AP 值
② 计算算mAP:把所有类的AP值求平均得到mAP。
l比赛成绩评定方法:
初、复赛采用竞赛网址对结果评分,但初赛不计入最终成绩,仅作为模型调整参考和复赛队伍选拔。初赛成绩前16名队伍进入复赛环节。经验证审核代码和模型结果通过的前8名复赛队伍进入线下决赛答辩环节,参赛队伍需准备PPT展示并进行10分钟答辩(8分钟展示+2分钟提问),组委会根据参赛队伍方法思路、创新程度等各方面综合评价,对参赛队伍进行打分。总成绩按照复赛成绩60%+决赛成绩40%的形式计算,最终决出前6名优胜队伍获奖。
9. 结果提交方式
l初、复赛阶段各参赛队伍需要提交xml文件至竞赛网址,文件采用VOC格式记录结果,示例如下所示。其中,边界框坐标值必须为大于等于0的正数且不能超过图像的宽/高。
<annotation>
<filename>文件名.jpg</filename>
<size>
<width>500</width>
<height>1000</height>
<depth>3</depth>
</size>
<object>
<name>类别1</name>
<confidence>0.883</confidence>
<bndbox>
<xmin>123.4</xmin>
<ymin>342.4</ymin>
<xmax>382.0</xmax>
<ymax>374.5</ymax>
</bndbox>
</object>
<object>
<name>类别2</name>
<confidence>0.905</confidence>
<bndbox>
<xmin>12.4</xmin>
<ymin>461.7</ymin>
<xmax>236.3</xmax>
<ymax>501.3</ymax>
</bndbox>
</object>
</annotation>
l复赛队伍需要提交算法完整代码、权重和说明文件,包括但不限于数据预处理、训练、测试等相关代码,同时需要说明模型使用步骤、训练测试环境等信息,确保组委会能够复现模型与结果。如果出现缺失相关信息、不可复现等情况,将取消参赛队伍成绩。
10. 奖项设置和奖励方法
本次竞赛设一等奖1名(奖金10000元人民币),二等奖2名(奖金各5000元人民币),三等奖3名(奖金各3000元人民币)。
各获奖队伍根据比赛成绩可获得由竞赛组织方颁发的获奖证书和奖金。
11. 挑战赛论坛
组委会将举办挑战赛技术论坛,邀请进入决赛的参赛队伍参加作技术报告答辩。
12. 知识产权归属
参赛团队提交算法及可执行模型的知识产权归参赛团队所有,图像数据归组织方所有。
各参赛队在赛前需签订数据使用协议,承诺本竞赛提供的数据集仅能用于本竞赛,不用于除本竞赛外的任何其他用途。各参赛队需要承诺本队提交的结果可重复,组织方承诺履行保密义务,并不用于除本比赛外的任何其他用途。
参赛队伍应保证所提供的方案、算法属于自有知识产权。组织方对参赛队伍因使用本队提供完成的算法和结果而产生的任何实际侵权或者被任何第三方指控侵权概不负责。一旦上述情况和事件发生参赛队伍必须承担一切相关法律责任和经济赔偿责任并保护组织方免于承担该等责任。