Netflix научила нейросеть определять поцелуи в кино

kinopoisk.ru

Москва, 26 июня. Нейросеть научили искать целующихся людей в кино: алгоритм разработал работник Netflix.

Сотрудник Стэнфордского университета и стримингового сервиса Netflix Амир Зиай представил систему, позволяющую автоматически определять на видео людей, которые целуются.

Алгоритм работает на базе нейросетей, состоящих из двух платформ — сегментатора и бинарного классификатора. Первый модуль высчитывает возможность объятий в определенном промежутке ролика, а затем начинает готовить информацию для анализа.

psy-practice.com

В свою очередь, второй модуль делает проверку секундных моментов, на которые делится входной видеопоток. Затем видео и аудио исследуются с помощью сверточных нейронных сетей ResNet и VGG.

Сейчас алгоритм функционирует с точностью 95%. Разработчик использовал 263 сцены с поцелуями и 363 сцены без поцелуев длительностью от 10 секунд до двух минут из более, чем сотни фильмов Голливуда, сообщает портал N+1 со ссылкой на портал IEEE Spectrum.

РИАМО

По мнению экспертов, новый сервис можно применять при озвучивании кинокартин, которые предназначены для слабовидящих.

Отметим, что сегодня одна из самых популярных и важных задач в области компьютерного зрения — это распознавание объектов.

Ранее МедиаПоток сообщал, что кинокритики назвали лучшие сериалы первого полугодия этого года.