Москва, 26 июня. Нейросеть научили искать целующихся людей в кино: алгоритм разработал работник Netflix.
Сотрудник Стэнфордского университета и стримингового сервиса Netflix Амир Зиай представил систему, позволяющую автоматически определять на видео людей, которые целуются.
Алгоритм работает на базе нейросетей, состоящих из двух платформ — сегментатора и бинарного классификатора. Первый модуль высчитывает возможность объятий в определенном промежутке ролика, а затем начинает готовить информацию для анализа.
В свою очередь, второй модуль делает проверку секундных моментов, на которые делится входной видеопоток. Затем видео и аудио исследуются с помощью сверточных нейронных сетей ResNet и VGG.
Сейчас алгоритм функционирует с точностью 95%. Разработчик использовал 263 сцены с поцелуями и 363 сцены без поцелуев длительностью от 10 секунд до двух минут из более, чем сотни фильмов Голливуда, сообщает портал N+1 со ссылкой на портал IEEE Spectrum.
По мнению экспертов, новый сервис можно применять при озвучивании кинокартин, которые предназначены для слабовидящих.
Отметим, что сегодня одна из самых популярных и важных задач в области компьютерного зрения — это распознавание объектов.
Ранее МедиаПоток сообщал, что кинокритики назвали лучшие сериалы первого полугодия этого года.
