Как Голливуд и киноиндустрия используют искусственный интеллект

В Голливуде продолжается забастовка актеров, и эта тема так или иначе фигурировала в рамках конференции, но не была ее основной темой. SIGGRAPH – это мероприятие, где объединяются творчество и технологии. Пока руководители студий вынашивают нереалистичные мечты о замене писателей, сценаристов и актеров искусственным интеллектом, нейросети успешно служат на благо художников.

Например, компания Pixar успешно применяет технологии машинного обучения и моделирования для своих картин. Персонажи последнего фильма студии «Элементарно» более абстрактные, они состоят из огня, воды, воздуха и других субстанций. Перед художниками стояла задача превратить эти вещества в одушевленное тело, которое выглядит реальным и способно выражать себя разными способами.

В основе процесса, который использовали художники Pixar, лежала процедурная генерация. С ее помощью моделировалось пламя, волны или пары, из которых состояли персонажи. Художественные процессы здесь оказались тесно переплетены с технологиями: для главной героини «Элементарно» огненной Эмбер недостаточно были создать имитацию пламени и настроить цвета. Огонь должен был выглядеть так, как этого хотел художник, а не так, как он выглядит в реальности. Для этого использовалась «объемная нейронная передача стиля» (NST) – это метод машинного обучения, который используется при изменении селфи в стиле картин Эдварда Мунка. Специалисты Pixar сгенерировали необработанное пламя и пропустили его через сеть передачи стилей, обученную выражать видение художника. В результате получились вокселы (объемные пиксели) с естественной симуляцией и правильным внешним видом.

В анимационной студии также рассказали, что искусственный интеллект помог команде мультфильма перекрашивать ландшафты, заполнять городские кварталы зданиями, созданными на основе нарисованных от руки эскизов. В целом современные технологии помогли ускорить рутинные процессы и добиться наилучшего соответствия единому стилю и желаемому виду.

В других проектах ИИ ускоряет диалог между командой проекта. Например, ранее на отрисовку, согласование и повторную отрисовку дизайна среды уходили недели, то теперь искусственный интеллект быстрее вносит правки и готовит несколько вариантов изображений. В компании DNEG, занимающейся визуальными эффектами и пост-продакшеном, нейросети помогают создавать сложные многоплановые истории – как, например, мультфильм «Нимона».

Компания Wonder Dynamics с помощью ИИ заменяет актеров 3D-моделями, во много раз ускоряя монотонный механический процесс. Казалось бы, это как раз то, из-за чего объявили забастовку многие голливудские актеры и писатели. Но с другой стороны, у VFX-сообщества схожие проблемы. Искусственный интеллект должен использоваться лишь как дополнение к существующим процессам для их ускорения или улучшения, но ни в коем случае как замена творчества. При этом некоторые руководители уже пытаются передать творческие процессы технологиям, и это пугает художников, актеров и писателей больше всего.