商标图像检索挑战赛
2022商标专利图像检索公开挑战赛,是由广东省知识产权大数据重点实验室举办。大赛致力于响应“全面开启知识产权强国建设新征程”号召,鼓励年轻大学生们秉承尊重知识、崇尚创新、诚信守法、公平竞争精神,激发自身无限的潜在力与创造力,让更多的学生参加到知识产权与人工智能理论与应用的研究中。
1 赛题背景
商标,是能够将一家企业的商品或服务与其他企业的商品或服务区别开的标志,是国家、企业无形资产的一种有形体现。商标受知识产权法保护,具有专有权,应避免受恶意使用和剽窃。为保护商标资质、提升智能审核管理、降低知识产权风险,我们提出商标图像检索挑战赛。挑战赛要求参赛者利用少量样本,做近似商标图像的检索区分。
2 任务简介
本次竞赛主要任务是商标专利图像进行检索,参赛队伍根据商标专利图像特点自行设计相关的算法,利用主办方所给的商标专利图像数据集进行模型训练,最终以F1-score分数作为评价指标衡量参赛队伍算法模型性能。
3 数据集介绍
| 数据源:50类饮料商标专利,共6150张图像,所有图像均带实验室定义标签。
| 数据集:
| 训练集 - 每类专利包含20~400个专利图像实例,共6000张(参赛队伍仅可用于算法模型训练);
| 验证集 - 每类专利包含3个专利图像实例,共150张(参赛队伍可用于算法模型训练与参数调整);
| 测试集 - 每类专利包含10个类别专利图像实例,共1255张(不对外公布,仅供主办方测试参赛队伍的算法模型性能)
| 图像描述:均提供224*224像素的 .numpy格式图像。
4 数据集获取方式
参赛队伍自行注册百度网盘ID,每个队伍共用一个百度网盘账号,由此百度网盘ID联系工作人员,填写竞赛协议书并发送到工作人员,由工作人员通过百度网盘发送数据集给参赛人员。
5 竞赛评价方式
本次竞赛的算法评价指标为macro-F1 score,该指标的具体定义如下:
i代表第i的类别,Pi代表类别i的准确率,Ri代表类别i的召回率。
Nitp代表类别i正类被判断为正类的个数,Nifp代表类别i负类被判断为正类的个数,Nifn代表代表类别i的正类被判断为负类的个数。(类别i正类表示类别i,类别i负类表示除了类别i的其他类别)。
F1i代表类别i的F1分数。
Macro-F1为算法性能的最终评价结果。
6 硬件与系统资源
主办方所将提供约5台GPU工作站负责对参赛团队提交的算法模型进行验证与系统测试。
· 服务器配置:
· CPU: Intel(R) Xeon(R) W-2123 CPU @ 3.60GHz
· GPU: NVIDIA GeForce RTX 2080 Ti 11GB
· 内存: 32GB
· 操作系统: ubuntu
7 结果提交方式:
(1)参赛队伍须提供验证集测试结果以及算法模型代码。验证集测试结果的macro-F1分数存储为txt文件,存储内容格式为: macro-F1:score(填写相应的结果)。算法模型代码用于主办方在测试集上对算法模型性能进行测试。提交方式同样是在百度网盘上将相应文件发送给主办方。
(2)每个队伍可提交两次结果。(提交第一次之前,最好发送一份算法代码文件给主办方,用于测试是否能在对应环境下正常运行代码,若不能正常运行,则提交内容视为无效提交)
(3)为了避免参赛队伍滥用其他数据集或测试集标签信息用于算法训练,参赛队伍需提供算法训练时的相关参数,要求该算法结果可复现。如果发现参赛队伍使用其他数据信息用于训练或算法结果无法复现,视为作弊处理,取消参赛资格。
其他注意事项:
(1) 每只参赛团队最多提交1份识别结果和1种算法模型。
(2) 系统只支持python代码,且运行环境仅为Linux (ubuntu)。
(3) 请提供可以正常运行的模型调用样例。
(4) 支持pytorch/MindSpore深度学习框架。
(5) 如果包含自定义Layer,请务必提供源代码或封装好的动态链接库,说明依赖库等信息。
8 报名方式
仅接受我校学生以团队形式通过邮件报名参赛,建议参赛队伍人员4-5人,每名参赛选手只能参加1个参赛队。报名表发邮件至竞赛联系人邮箱gdiplab@126.com;qq交流群:456665252。
邮件标题格式:“2022“云图搜”商标检索挑战赛+参赛队名称”
邮件内容包括:团队基本信息;负责人信息;参赛人数;联系方式(手机及邮箱);学生证;
报名截止日期:2022年5月20日。
作品提交截止日期:2022年5月30日。
公布成绩日期:2022年6月3日。
参赛内容填写本次竞赛名称,组织方收到邮件并与报名者确认后,报名成功。
9 奖项设置
本次竞赛设置一、二、三等奖,其中一等奖(5000元)1项,二等奖(2000元)2项,三等奖(1000元)3项,如报名参赛队伍少于10组,则不设三等奖。
10 知识产权归属
参赛团队提交算法及可执行模型的知识产权归参赛团队所有,图像数据由主办方所有。
各参赛队在赛前需签订数据使用协议,承诺本竞赛提供的数据集仅能用于本竞赛,不用于除本竞赛外的任何其他用途。
各参赛队需要承诺本队提交的结果可重复,组织方承诺履行保密义务,并不用于除本比赛外的任何其他用途。
参赛队伍应保证所提供的方案、算法属于自有知识产权。组织方对参赛队伍因使用本队提供完成的算法和结果而产生的任何实际侵权或者被任何第三方指控侵权概不负责。一旦上述情况和事件发生参赛队伍必须承担一切相关法律责任和经济赔偿责任并保护组织方免于承担该等责任。
注:竞赛数据集仅供本竞赛使用,不得用于商业产品开发使用,未经许可不得转发他人使用。
11 比赛成绩
比赛成绩请下载附件,有问题请在qq群向工作人员咨询。
比赛成绩详细信息公示如下:
公示期间,如对以上比赛成绩存在任何疑问或异议,请以电话或书面形式向实验室反映。反映情况必须使用真实姓名和联系方式,匿名信函将不予受理。
公示时间:2022年6月20日至2022年6月24日,共5个工作日。
地址:广州市天河区中山大道西293号工业中心101室
联系人:蒋老师
联系方式:19854818817(手机);gdiplab@126.com(邮箱);456665252(参赛QQ群).
广东省知识产权大数据重点实验室
2022年4月25日