行业要闻 > 正文
FAT-AI应用测试开启亿级视频实战测评新时代
2020/12/29 10:14   NELIVA      关键字:FAT-AI 应用测试 视频实战      浏览量:
视频国家工程实验室团队自“十一五”起,依托多个国家级、部级重点研发项目,经过十余年努力,初步构建了智能视频分析测评方法体系,形成了专业的测试方法及评价指标、亿级规模实际应用场景数据集和自动化测试系统,并在多地实际应用。为了逐步建立行业视频AI应用关键技术指标参考基线,为视频AI算法及系统优化提供科学指导,视频国家工程实验室推出了FAT-AI应用测试。
  2020年12月23日,由中国安全防范产品行业协会主办,《中国安防》杂志、视频图像信息智能分析与共享应用技术国家工程实验室承办,商汤科技协办的“2020中国安防人工智能峰会暨IVAA论坛”上,视频图像信息智能分析与共享应用技术国家工程实验室(以下简称:视频国家工程实验室)副主任赵炫博士发表了题为“FAT-AI应用测试开启亿级视频实战测评新时代”的主题演讲。

  视频国家工程实验室团队自“十一五”起,依托多个国家级、部级重点研发项目,经过十余年努力,初步构建了智能视频分析测评方法体系,形成了专业的测试方法及评价指标、亿级规模实际应用场景数据集和自动化测试系统,并在多地实际应用。为了逐步建立行业视频AI应用关键技术指标参考基线,为视频AI算法及系统优化提供科学指导,视频国家工程实验室推出了FAT-AI应用测试。
  2019年,视频国家工程实验室组织了首个亿级规模的实际无约束场景FAT-AI应用测试(FAT2019)。在数据规模上,FAT2019的测试集包含1亿张图像,是此前国际最大数据集FRVT的3倍;在指标体系上,经国内顶级技术专家和业务专家反复论证,能够为视频AI算法和系统的实际应用能力提供科学客观的量化指导依据;在测试内容上,包含了4大类28项测试,覆盖16类典型行业应用场景。参测单位有依图、云从、海康、奇虎360等十余家知名企业,采用了统一的专网测试环境、专业的测评方法和自动化测试系统,并经过15名学术及行业应用知名专家评审,形成了2019年FAT-AI的关键技术指标行业基线。
  2020年,基于疫情防控形势和应用需求,视频国家工程实验室拓展了线上的FAT-AI应用竞赛,增加了疫情防控专题,并陆续开展实际无约束场景下的Re-ID行人再识别、1:1验证、1:N+1开集识别、口罩佩戴条件下的识别、聚类、视频结构化等竞赛项目。竞赛将长期举办,未来将开展更多赛道。与2019年应用测试不同的是,应用竞赛每期公布排行榜,因此更具有挑战性。

  FAT-AI应用竞赛旨在打造科学、公正、开放的国家级AI赛道。一方面,促进成果转化,帮助竞赛优胜者与应用单位对接,同时也为应用单位设立定制竞赛,帮助其找到最优解决方案及关键人才;另一方面,促进技能提升,帮助参赛者提升技术实力。
  视频国家工程实验室将积极开展竞赛合作,一方面,FAT-AI可定制应用竞赛,即通过与政府部门、科研单位、测评机构等联合,采取线上或线下的方式,根据实际需要定制不同形式、不同应用场景的竞赛项目;另一方面,FAT-AI还可举办区域特色竞赛,即通过与省级、市级政府、公安等主管单位联合举办具有当地特色的AI应用竞赛,建立视频国家工程实验室FAT-AI应用竞赛常设机构,以竞赛促进产业升级、以比赛带动创新应用。

微信扫描二维码,关注公众号。