Как аниматоры и ИИ-исследователи создали «Дорогие соседи сверху»

Анимационный фильм «Дорогие соседи сверху» был впервые представлен на кинофестивале Sundance в рамках института Sundance Institute’s Story Forum, где акцент делается на инструментах и технологиях, поддерживающих визуальное повествование.

Сюжет рассказывает о молодой женщине по имени Ада, которая отчаянно пытается уснуть, но ей мешают шумные соседи. Пытаясь понять, что же создаёт столько шума, она погружается в мир фантазий, и начинается битва за покой и здравомыслие.

Совместная работа аниматоров и исследователей ИИ

Фильм стал результатом совместной работы анимационных ветеранов, включая режиссёра и выпускницу Pixar Конни Хе, и исследователей Google DeepMind. Они стремятся исследовать, как генерирующие инструменты могут интегрироваться в творческие процессы художников.

Конни Хе использовала свой личный опыт общения с шумными соседями для создания сюжета. В своих раскадровках она изобразила галлюцинации, которые становятся всё более безумными по мере приближения ночи.

Главная героиня Ада была разработана дизайнером-продюсером Инцун Сином, создававшим уникальные пропорции и угловатый стиль.

Комната Ады оформлена в спокойных тонах, передающих чувство уюта и скрытности, в то время как её галлюцинации выполнены в неоново-ярких цветах, отличающих их от «реальности». Это раз за разом выражает меняющиеся эмоции Ады благодаря цвету и текстуре.

Использование ИИ в анимации

S командой стояла задача помочь анимационным художникам извлечь пользу из возможностей генеративного ИИ, не уступая при этом художественный контроль его непредсказуемости. Конни создала раскадровки и привлекла дизайнера Инцун Сина для работы над концептом и дизайном персонажей, придерживаясь единого художественного видения на всех этапах производства.

Сложный визуальный стиль фильмa потребовал создания новых возможностей для кастомизации и контроля, чтобы соответствовать уникальным дизайнерским решениям.

Одной из первых задач было создание сцен, которые бы соответствовали стилю персонажа и общему художественному видению фильма. Исследователи разработали инструменты, позволявшие художникам настраивать модели Veo и Imagen, обучая их новым визуальным концепциям на основе всего нескольких образцов изображений.

При этом использовались традиционные методы анимации в сочетании с технологией видео-на-видео, что позволило преобразовать начальную анимацию в стиле, подходящем фильму.

Совершенствование и итог

Процесс создания каждой конечной сцены не был простым. Команда проводила регулярные ревю, чтобы каждый элемент был на своём месте. Это включало инструменты для локальной доработки, позволяя редактировать отдельные части видео с различной степенью контроля.

Таким образом были созданы сложные и выразительные сцены, в которых использовались как традиционные, так и современные методы. Объединение аниматоров с исследователями помогло преодолеть художественные и технологические барьеры, добавив новый уровень свободы и контроля при создании таких произведений.

Отзывы