卡内基梅隆大学的研究人员开发了一种系统,该系统能够根据来自三部或更少智能手机的视频记录准确地定位射击者。在2017年拉斯维加斯大规模枪击事件中,该系统使用三段视频记录进行了演示,正确估计了射击者的实际位置——曼德勒湾酒店的北翼。该估计基于在枪击事件开始的一分钟内发射的三枪。
Alexander Hauptmann,CMU语言技术研究所的研究教授表示,该系统称为视频事件重建和分析(VERA),不一定能替代公共安全官员已经使用的定位射击者的商业麦克风阵列,尽管在商业阵列不可用时,它可能对公共安全是一个有用的补充。
Hauptmann表示,组装VERA的一个关键动机是创建一个可以被调查战争罪行、恐怖行为和人权侵犯的人权工作者和记者使用的工具。军事和情报机构已经在开发这些类型的技术,我们认为人权社区拥有相同类型的工具至关重要。它为国家的权力提供了必要的检查。
研究人员上个月在法国尼斯举行的ACM国际多媒体会议上介绍了VERA,并将其作为开源代码发布。Hauptmann表示,他利用自己在视频分析方面的专业知识,帮助调查人员分析了2014年乌克兰的Maidan大屠杀等事件,这场事件导致至少50名反政府抗议者死亡。受该工作的启发,Hauptmann、Aronson和Junwei Liang将几种处理视频的技术结合在一起,同时尽可能地自动化它们的使用。
VERA使用机器学习技术来同步视频源并根据摄像机所看到的内容计算每个摄像机的位置。但Hauptmann表示,视频源中的音频在定位枪击源方面是关键的。具体来说,系统查看超音速子弹的冲击波引起的裂纹与枪口爆炸之间的时间延迟,枪口爆炸以声速传播。它还使用音频来识别使用的枪支类型,这决定了子弹速度。VERA然后可以计算出射击者距离智能手机的距离。
通过使用来自三部或更多智能手机的视频,可以根据枪口爆炸到达每个摄像机所需的时间差异来计算射击的方向和射击者的位置。随着香港、埃及和伊拉克等地大规模抗议活动的增加,确定射击的来源对于确定在发生射击时抗议者、警察或其他团体是否可能负责至关重要。
但VERA不仅限于检测枪击。它是一个事件分析系统,可以用于定位与调查人权和战争罪行相关的各种其他声音。他希望其他团体能够为开源软件添加功能。