第一届暴恐音视频分析系统评测资格大赛

来源:中国网络空间安全协会

第一届暴恐音视频分析系统评测资格大赛(以下称“音视频大赛”)于2014年10月30日正赛顺利落下帷幕。比赛由杜跃进同志总体负责,田志宏同志具体实施,自5月5日起筹备至10月30日比赛结束,历时178天。比赛共吸引了来自高校、研究所和企业的33个团队参赛,其中27个团队参加视频检索识别竞赛、10个团队参加音频检索识别竞赛。具体情况如下:

(一)成立赛事组织机构,建立工作机制和监督机制,明确比赛章法,做到有据可依。赛事成立音视频大赛专项工作组,同时设立技术委员会和监督委员会以及用户观察团。制定了相应的工作章程和赛事规则确保赛事各个环节有据可依,从而做到比赛的公平公正。

(二)组建第三方技术团队,做好赛事数据集整理工作,以及技术平台建设、运行维护等技术支撑工作。竞赛共收集到正样本数据近22688个,负样本数据24万段,通过特征分析筛选,最终整理出正式比赛测试数据2997个,近300G。音频部分,收集到正样本约1万个,结合各家单位提供的负样本数据,最终整理出正式比赛的音频测试数据约100万条,近1000G。

(三)音视频大赛发布会召开。10月22日下午1:30,工作组举行了大赛发布会,工作组组长杜跃进同志作为大会主持。中国工程院方滨兴院士以及中国网络空间安全协会、科技部高新司、国家自然科学基金委的多位领导出席,来自全国30多所知名高校、科研院所和企业的多位专家,以及新华社、中央电视台等媒体的记者,共60多人出席,共同研讨相关技术和应用发展思路。

(四)召开比赛数据发布会。为了比赛的公开公正性,2014年11月2日,音视频大赛主办方组织30多家参与单位在中科院计算所召开了比赛数据发布会。主要向参赛单位公布了主办方统计的各比赛项目接收到的提交数据,确保各家单位对统计数据无异议,并宣布后续尽快推进比赛结果计算流程。

(五)邀请第三方单位,对比赛结果计算方法进行讨论。由于本次音视频大赛最终共收到9个音视频项目结果提交266份,需要合理的统计方法来计算每个项目中各家的成绩。为此,竞演办邀请了北京邮电大学等相关单位的专业团队,对结果数据的统计方法进行了讨论分析,确保最终的结果能客观全面体现各家的水平。

(六)充分发挥赛事组织机构作用,用公开流程确定比赛结果。11月22日,主办方向各家单位公布了最终比赛结果。最终,视频比赛中, “视频拷贝检测”项目9支队伍入围;“蒙面人检测”项目9支队伍入围;“特定标识检测”项目13支队伍入围;“暴恐视频检测”项目8支队伍入围。音频比赛中,其中“关键词检出”项目两小项共5支队伍入围; “音频检索”项目两小项共10支队伍入围;“语种识别”项目共4支队伍入围;“说话人识别”项目共3支队伍入围; “相近音频发现”项目共4支队伍入围。

本次音视频大赛充分借鉴了7月31日XP靶场挑战赛的经验和积累,在规范性、开放性等方面作了改进,精心设计比赛的流程环节,使得比赛的公正公平具有充分的说服力,没有单位对此表示质疑;参加比赛的人员规模、挑战者水平、参与单位数量等方面,都创造了国内同类赛事的记录,既扩大了影响力,又获得了宝贵的可用于实际工程中的优秀音视频算法。

Copyrights reserved 中国网络空间安全协会 © 版权所有

地址:北京市东城区朝阳门内大街288号1502室

技术协办:中云技术股份有限公司

津ICP备19007168号

津公网安备 12011102000196号