Проекционный мэппинг

Определение

Проекционный мэппинг ( от англ. projection mapping) — это технология, при которой видео, анимированная графика или световые изображения проецируются на физический объект или поверхность и подгоняются под их форму.

В отличие от обычной проекции на прямоугольный экран, изображение в мэппинге привязывается к конкретным участкам носителя: фасаду здания, сценической декорации, скульптуре, макету, предмету или интерьеру. Для такой привязки используются маски, сетки, контрольные точки и другие способы геометрической коррекции.
‍
В сложных проектах подготовка может строиться на 3D-модели объекта. Она помогает заранее проверить ракурсы, перспективу и расположение проекторов. В более простых случаях достаточно фотографии, чертежа, точных замеров или двухмерной карты поверхности.
‍

Источник: YouTube

Зачем это нужно

Проекционный мэппинг позволяет визуально менять объект без постоянной физической перестройки. На одной поверхности можно последовательно показывать разные материалы, фактуры, состояния и сюжетные сцены.
‍
В моушн-графике объект становится частью композиции. Его архитектура, рельеф, границы и отдельные элементы могут определять движение графики, монтаж и драматургию ролика. Например, окна фасада могут превращаться в самостоятельные экраны, колонны — задавать вертикальный ритм, а выступы и углубления — участвовать в иллюзии разрушения или изменения формы.
‍
Мэппинг также помогает связать цифровой контент с реальным пространством. Это используется в мероприятиях, музейных экспозициях, сценографии и рекламе, когда изображение должно восприниматься не как отдельный экран, а как часть объекта или среды.
‍
В некоторых проектах технология позволяет сократить количество физических декораций или макетов. Однако экономическая эффективность зависит от масштаба: сложная система из нескольких проекторов, медиасерверов и технического оборудования сама может требовать значительного бюджета.

Области применения

Архитектура и городские мероприятия. Изображение проецируется на фасады зданий, монументы и другие крупные поверхности. Архитектурные элементы становятся основой для анимации и визуального повествования. Такой формат используется на городских фестивалях, памятных мероприятиях, открытиях объектов и световых шоу.

Источник: VK

Сцена, концерты и мероприятия. Мэппинг применяется для оформления театральных постановок, концертов, презентаций, модных показов и корпоративных событий.
Проекция может менять внешний вид сцены или декораций в течение выступления и синхронизироваться со звуком, светом и сценической механикой. Интерактивная реакция на движения артиста не является обязательным свойством мэппинга. Для неё дополнительно используются камеры, датчики, системы трекинга, управляющие сигналы или работа оператора.

Источник: Vimeo

Реклама и презентация продуктов. В объектном мэппинге изображение подгоняется под форму автомобиля, упаковки, устройства, макета или выставочного стенда. Это позволяет показывать разные варианты дизайна, внутреннее устройство продукта или принцип его работы без производства нескольких физических версий одного объекта. При этом для самой проекции всё равно требуется реальная поверхность, макет или предмет подходящей формы.

Источник: Vimeo

Музеи и иммерсивные выставки. В музейных и выставочных проектах мэппинг помогает связывать изображение с архитектурой помещения, экспонатами, рельефными макетами или специально созданными объектами. Технология может использоваться для реконструкции исторических событий, объяснения устройства предмета, визуализации невидимых процессов или создания пространственного художественного произведения.

Источник: Youtube

Образование и наука. Проекционный мэппинг применяется для визуализации информации на физических моделях: глобусах, анатомических макетах, рельефных картах, архитектурных моделях и научных установках. Благодаря привязке изображения к форме объекта данные воспринимаются в пространственном контексте. Например, на рельефной карте можно показать движение воздушных масс, изменение климата или распространение природного явления.

Источник: Youtube

Место в производственном процессе

Состав работ зависит от формы объекта, количества проекторов, условий площадки и способа показа. Небольшая инсталляция и архитектурное шоу могут иметь разный пайплайн.

Концепция и анализ объекта. До производства контента определяется задача проекта: что должно происходить с объектом, какую историю необходимо рассказать и с каких точек зрители будут видеть проекцию.

Одновременно анализируется сам носитель:

• форма и размеры;
• цвет и фактура;
• отражающая способность;
• наличие выступов и углублений;
• возможные тени;
• уровень внешней засветки;
• доступные места установки проекторов;
• основные зрительские ракурсы.

На этом этапе могут появляться концепция, сценарий, эскизы, раскадровка и предварительный технический план.

Создание карты объекта. Для простой плоской или составной поверхности может использоваться фотография, чертёж или двухмерный шаблон. На нём отмечаются зоны, на которые будет выводиться контент.
‍
Для сложной объёмной формы может потребоваться 3D-модель. Её создают по чертежам, замерам, фотографиям, результатам 3D-сканирования или фотограмметрии.

Источник: Cобственный материал авторов статьи

Фотограмметрия — это способ получения трёхмерной модели по серии фотографий объекта, снятых с разных сторон.

Подготовка UV-развёртки. UV-развёртка используется в тех проектах, где контент создаётся с опорой на 3D-модель. Она представляет собой двухмерную карту поверхности модели и показывает, как плоское изображение располагается на объёмной форме.
Этот этап не является обязательным для любого мэппинга. В двухмерных проектах контент может привязываться к объекту с помощью масок, сеток, слайсов и ручной геометрической коррекции.

Создание контента. Анимация разрабатывается с учётом формы носителя и предполагаемых зрительских ракурсов.

Контент может представлять собой:

• заранее отрендеренное видео;
• 2D- или 3D-анимацию;
• композицию из отдельных графических слоёв;
• генеративную графику;
• контент, реагирующий на данные, звук или действия зрителя;
• текстуры и материалы, подготовленные для 3D-модели.

Геометрия объекта влияет на композицию и движение. Значимые детали не должны попадать в зоны сильных искажений, теней или плохо просматриваемых стыков.

Предварительная визуализация. Перед монтажом результат может проверяться в 3D-сцене, программе для мэппинга или игровом движке.

Предварительная визуализация помогает оценить:

• расположение изображения на объекте;
• основные зрительские ракурсы;
• возможные искажения;
• зоны перекрытия проекторов;
• читаемость композиции;
• соответствие анимации форме поверхности.

Такая проверка снижает количество исправлений на площадке, но не заменяет финальную калибровку на реальном объекте.

Расчёт проекционной системы. Для проекта определяются количество и тип проекторов, их расположение, проекционные расстояния, объективы, разрешение и необходимый световой поток. Расчёт также учитывает внешнее освещение, цвет поверхности, возможные тени, питание, охлаждение, крепёж и доступ для обслуживания оборудования. В многопроекторной системе соседние изображения могут частично перекрываться. Для незаметного соединения таких зон применяется блендинг — настройка яркости и переходов между проекторами.

‍Монтаж и калибровка. После установки оборудования изображение подгоняется под реальный объект. Во время калибровки уточняются положение, масштаб, перспектива и границы отдельных участков проекции. Настраиваются зоны перекрытия, цвет и яркость проекторов. Для неподвижных объектов часто достаточно ручной или программной калибровки по контрольным точкам. Если поверхность перемещается, может применяться трекинг — система, которая отслеживает положение объекта и обновляет проекцию в реальном времени.
‍
Прогон и запуск. Перед показом проверяются тайминг, звук, свет, качество проекции и работа оборудования. В событийных проектах мэппинг может синхронизироваться с другими системами по временному коду или управляющим сигналам. Временной код позволяет нескольким устройствам воспроизводить контент в единой временной последовательности. Крупные проекты часто запускаются с медиасервера — компьютера или специализированной системы, которая воспроизводит контент, распределяет его между проекторами и управляет выводом. Для небольших инсталляций может использоваться обычная рабочая станция или отдельный видеоплеер.