Новой системе VERA достаточно всего трех видеозаписей, сделанных случайными свидетелями теракта на мобильные телефоны, чтобы точно определить местоположение террориста.
Для определения местонахождения вражеских снайперов или скрывающихся стрелков-террористов, ведущих огонь, часто используют сложные системы, состоящие из множества микрофонов, которые позволяют определить источник звука методом триангуляции. Однако применение нейросетей позволяет достичь аналогичного результата, используя гораздо меньший объем информации — записи, полученные с помощью всего трех обычных смартфонов. О новой системе VERA (Video Event Reconstruction and Analysis, «Видеореконструкция и анализ события») сообщает пресс-релиз, распространенный Университетом Карнеги — Меллона.
VERA точно синхронизирует записи, сделанные несколькими смартфонами поблизости от места стрельбы. Ориентируясь на архитектурные детали, система реконструирует сцену вокруг места атаки и устанавливает положение на ней каждого снимающего. Затем она переходит к анализу аудиодорожек из каждого ролика. VERA ориентируется на шум пули, рассекающий воздух на сверхзвуковой скорости, и на звук самого выстрела. Задержка между ними и позволяет рассчитать положение стрелка. В качестве «опции» VERA способна по звуку выяснить и тип использованного им оружия.
Безусловно, чем больше данных предоставляет система, тем выше точность получаемых результатов. Тем не менее, практические тесты продемонстрировали, что для получения удовлетворительного результата достаточно трех видеозаписей, сделанных с различных ракурсов. Используя записи теракта, в ходе демонстрации, проведенной в Лас-Вегасе в 2017 году, было показано, что VERA с высокой точностью определяет местоположение стрелка, даже используя имеющиеся данные — в северной части отеля «Мандалай-Бэй».
VERA — это программное обеспечение с открытым исходным кодом, которое было продемонстрировано экспертам на недавней международной конференции по мультимедиа, проходившей во Франции. Система была создана в сотрудничестве со специалистами из SITU Research, включая акустиков, архитекторов и баллистиков.