22 января 2017
Американская киноактриса и режиссер Кристен Стюарт стала соавтором публикации, в которой описывается перенос художественного стиля с помощью нейросетей. Препринт доступен на arXiv.org, – передает N+1.
В последнее время нейросети активно используются в области обработки и распознавания изображений, в том числе уже и в коммерческих продуктах — например, приложение Prisma для смартфонов умеет перерисовывать заданное изображение в соответствии с выбранным стилем. Подробнее о том, как работает перенос стиля с помощью нейросетей, можно прочитать в материале N+1 "На выставке Ван Гога".
В самой публикации описывается обработка некоторых сцен фильма Come Swim, который сняла Кристен Стюарт. Для переноса стиля использовалась картина, которая изначально вдохновила режиссера на создание фильма о человеке под водой, который пробуждается от сна.

Несколько разных по "интенсивности стиля" вариантов обработки кадра
1/2 Изначально для обработки кадров авторы публикации рассматривали нейросети googlenet или VGG c 19 слоями, однако в первом случае их не устроил результат обработки, а во втором случае время обработки оказалось слишком долгим. В результате для получения нужного эффекта использовалась подготовленная сверточная нейросеть VGG с 16 слоями.
Все предварительные работы производились над превью низкого разрешения, а для обработки кадров в полном размере использовался сервис облачных вычислений Amazon EC2. После этого кадры дополнительно увеличили до итогового разрешения в 2048 пикселей и отфильтровали от шума — суммарно на весь процесс обработки одного кадра у авторов уходило около 40 минут.
Ранее нейросети уже применяли для обработки кадров видео — например, немецкие ученые перенесли художественный стиль Винсента Ван Гога, Эдварда Мунка и других художников на мультфильмы и кино. Кроме того, существуют программы, способные смешивать сразу несколько стилей для обработки изображений и видео.
Хочешь узнать больше - читай отзывы
← Вернуться на предыдущую страницу
Інноваційні рішення для сучасного життя від Базеус: пилосос для автомобіля Baseus A3 4 ноября 2025
У світі технологій та мобільних гаджетів бренд Базеус заслужено займає одне з провідних місць завдяки своїм високоякісним та доступним аксесуарам для смартфонів, ноутбуків і автомобілів
Роль брендированных пакетов в формировании доверия к компании 2 ноября 2025
Чтобы завоевать доверие и народную любовь, компании нужно иметь качественную айдентику и сделать бренд узнаваемым. Решить эти и многие другие задачи помогают пакеты с логотипом
Как выбрать оптимальный класс авто при аренде в Киеве: советы от 7Cars 31 октября 2025
Если у вас сломалась машина, вы можете не менять своих планов и образа жизни – в этом вам поможет сервис аренды авто 7Cars, который готов предоставить автомобиль любого класса для самых различных целей