企业新闻 > 正文
依图夺得“大规模复杂场景人体视频解析”挑战赛
行为识别冠军
2020/8/4 09:30   依图科技      关键字:依图 复杂场景 挑战赛 行为识别      浏览量:
行为识别是指以人为基础单位,只分析人的行为,关注单人的动作以及多人的动作。这项技术正在智能城市、安全生产、智能商业、智慧娱乐等社会生产生活的方方面面起到作用,比如实时检测工人是否遵循操作流程生产作业以防暴力分拣、针对短视频中人的行为进行摘要理解从而自动为用户推荐视频。
  近日,在由全球多媒体领域顶级学会ACM MM主办的“大规模复杂场景人体视频解析”挑战赛中,依图算法夺得第一,评价指标wf-mAP@avg达0.26,将以往学术界中的基准算法提升了近3倍,以绝对优势夺得“行为识别”赛道冠军。
  行为识别是指以人为基础单位,只分析人的行为,关注单人的动作以及多人的动作。这项技术正在智能城市、安全生产、智能商业、智慧娱乐等社会生产生活的方方面面起到作用,比如实时检测工人是否遵循操作流程生产作业以防暴力分拣、针对短视频中人的行为进行摘要理解从而自动为用户推荐视频。
  学术界以往常用f-mAP@avg来作为行为识别的评价指标,此次竞赛采用的评价指标wf-mAP@avg更注重对难度较大的拥挤场景的考察和少见动作的识别,同时对于人体框的定位精确性要求也更高。
  由于挑战赛是首次举办,参赛团队在赛前无法获取识别的类别、数据集的大小和识别的具体需求。在不到两个月里,依图将算法与场景进行深度结合,从视频中自动提取到了准确丰富的场景信息,并借助多年来的算法积淀和对行业场景的理解等“先验知识”,对特定的14类任务进行了深度算法优化。
  在此基础上,依图团队在仅使用单模型的情况下,取得了优于其他团队使用复杂多模型融合策略取得的成绩。同时,这也意味着依图仍可以进一步通过融合多个模型提升算法性能。
  目前,依图行为识别算法的性能仍在持续迭代,实际运用该技术落地实战的项目难度已远超比赛的数据集。未来,依托于高性能自研AI芯片,依图将加速AI技术落地、解锁更多城市生产生活场景。
  关于 ACM MM Grand Challenge
  ACM是全球最大的计算机领域专业性学术组织,其评选的图灵奖(A.M.Turing Award)被公认为世界计算机领域的诺贝尔奖。而ACM MM是全球多媒体领域的顶级会议,属中国计算机学会(CCF)指定的A类国际会议。
  在此次比赛中,包括亚马逊、腾讯、大华科技、中山大学等上百支队伍参与了超过56000个复杂事件下的人体行为解析。该比赛也是行为识别方向最接近真实场景的大规模挑战赛。

微信扫描二维码,关注公众号。