Видеонаблюдение как средство прослушивания

Группа исследователей, базирующаяся в Массачусетском технологическом институте (США), совместно с представителями компаний Microsoft и Adobe открыла способ извлечения звуковых данных из вибрации объектов на видеоизображениях.

Специальная цифровая обработка изображений позволяет выделить аудиосигналы из видеозаписей вибрации поверхности жидкости, листьев растений либо пластиковых пакетов под действием звуковых волн. Невооружённым глазом эти колебания разглядеть невозможно.

Обычно для записи вибрационных колебаний требуется высокоскоростная телекамера с частотой кадров, превосходящей частоту самих колебаний, однако в данном исследовании учёным удалось выделить звуковую информацию из видеопотока, снятого со вполне обычной скоростью — 60 изображений в секунду. Новый метод позволяет с высокой точностью определить, к примеру, количество людей, участвующих в разговоре, их пол и, возможно, даже установить, какой из голосов кому принадлежит.

В одном из экспериментов в помещении, где производилась видеосъёмка листьев растения, играла запись детской песенки «Был у Мэри маленький барашек». Математическая обработка видеозаписи позволила исследователям воссоздать оригинальный звук — качество полученной дорожки оставляет желать лучшего, но песню оказалось возможным узнать.

В пресс-релизе, опубликованном институтом, сообщается, что открытие «очевидно, найдёт применение в практике правоохранительных органов и работы с доказательным материалом», однако при этом исследователи считают, что найденная ими методика может иметь и научную ценность: реакция различных материалов и объектов на звуковые волны может многое рассказать об этих веществах и предметах.