Использование возможностей Unreal Engine при съемке фильмов
Концепция: выбор темы
Unreal Engine — игровой движок, разрабатываемый компанией Epic Games, который долгие годы доминирует на рынке видеоигр, отчасти из-за открытого доступа к использованию, а отчасти из-за огромного вклада разработчиков в его непрерывное развитие и улучшение. С каждым обновлением в UE появляются новые инструменты, со временем, они начали использоваться не только для создания видеоигр.
Первый видеоредактор в движке появился в 1998 году и, как и все инструменты, непрерывно улучшался. Сейчас разработчик, создавая проект, имеет возможность использовать шаблон не для игры, а для фильма. Этот режим имеет особый инструментарий, заточенный под работу с камерами.
Данный инструментарий из года в год использовался для съемок кат-сцен в играх. С ростом вычислительной мощности движка рос и уровень детализации объектов, которые могли быть в им обработаны. За десятилетия уровень графики вырос настолько, что за развитием Unreal Engine стала следить не только Кремниевая долина, но и Голливуд, а позже и применять его в фильмах.
Концепция: гипотеза
Я предполагаю, что Unreal Engine имеет влияние не только в индустрии видеоигр, но и вносит большой вклад в создании фильмов. Движок может использоваться на всех этапах создания: от раскадровок до финальных кадров. Потенциально он ускоряет, упрощает и удешевляет процесс производства фильмов. Более того, на его базе создаются прогрессивные технологии, за которым стоит будущее кино.
Концепция: принцип структурирования визуальной части
Визуальная часть структурируется в соответствии с инструментами, которые используются в кино. Последовательность инструментов в исследовании соответствует хронологическому порядку их появления и применения.
Sequencer
Демонстрация Sequencer в Unreal Engine
Sequencer — инструмент в Unreal Engine, который дает пользователям возможность создавать видеоролики с помощью специализированного многодорожечного редактора. Это первый инструмент, которому нашли применение в индустрии кино.
Мстители: Финал, превиз, сделанный на Unreal Engine, режиссеры — братья Руссо, супервайзер визуальных эффектов — Дэн Делив
Мстители: Финал, итоговый отрывок, режиссеры — братья Руссо, супервайзер визуальных эффектов — Дэн Делив
Мстители: Финал, фото экрана, режиссеры — братья Руссо, супервайзер визуальных эффектов — Дэн Делив
Мстители: Финал, превиз, сделанный на Unreal Engine, режиссеры — братья Руссо, супервайзер визуальных эффектов — Дэн Делив
Мстители: Финал, фото экрана, режиссеры — братья Руссо, супервайзер визуальных эффектов — Дэн Делив
Главным плюсом Sequencer является возможность сравнительно быстрого создания прототипов. Таким образом разработчики собирают черновик сцены в игровом движке, а потом снимают в реальности.
Игра престолов, сборка прототипа сцены в Unreal Engine, режиссер — Дэвид Бениофф, супервайзер визуальных эффектов — Джо Бауэр
Игра престолов, превиз в Unreal Engine, режиссер — Дэвид Бениофф, супервайзер визуальных эффектов — Джо Бауэр
Игра престолов, финальный кадр, режиссер — Дэвид Бениофф, супервайзер визуальных эффектов — Джо Бауэр
Игра престолов, превиз в Unreal Engine, режиссер — Дэвид Бениофф, супервайзер визуальных эффектов — Джо Бауэр
Этот инструмент активно применяется на этапе разработки, в качестве помощи в визуальном представлении. В финальную версию данные отрывки, разумеется, не попадают.
Игра престолов, превиз в Unreal Engine, режиссер — Дэвид Бениофф, супервайзер визуальных эффектов — Джо Бауэр
Игра престолов, сравнение превиза в Unreal Engine и финальной сцены, режиссер — Мигель Сапочник, супервайзер визуальных эффектов — Гленн Меленхорст
Гравитация, сравнение превиза и финальной сцены, режиссер — Альфонс Куарон, супервайзер визуальных эффектов — Тим Уэббер
Более того, разработчики активно пользуются возможностью переноса проектируемого пространства в VR. Это дает глубокое понимание того, какие ракурсы, расстояния, свет должны быть в финале.
Игра престолов, превиз в Unreal Engine, перенесенный в VR, режиссер — Дэвид Бениофф, супервайзер визуальных эффектов — Джо Бауэр
Джон Фавро с помощью дополненной реальности тестирует созданное в Unreal Engine окружение «Короля льва»
Практически весь «Король лев» Джона Фавро сперва был собран в движке, это заменило разработчикам раскадровку. Более того, в сценах уже были настроены черновой свет и цветокоррекция.
Изгой Один, сравнение финального кадра робота K-2SO и кадра со съемок, режиссер — Гарет Эдвардс, супервайзер визуальных эффектов — Джон Нолл
Изгой Один, процесс рендера робота K-2SO в Unreal Engine, режиссер — Гарет Эдвардс, супервайзер визуальных эффектов — Джон Нолл
Одними из первых, кто догадался использовать Unreal Engine в производстве фильмов, была студия LucasFilm. В «Изгой Один» робот K-2SO также сначала был перенесён в VR, для упрощения актеров работы с ним, а потом и рендерился в UE.
Изгой Один, фрагмент кода, написанного в Unreal Engine для рендера робота K-2SO, режиссер — Гарет Эдвардс, супервайзер визуальных эффектов — Джон Нолл
Несмотря на то, что Sequencer имел важное место в создании рассмотренных фильмов, разработчики хотели большего. Они рассчитывали использовать UE не только при создании превизов, но и финальной графики, не только в виртуальном мире, но и на съемочной площадке. Эта нужда и привела к созданию и внедрению в процесс съемок технологии Stagecraft.
Stagecraft
Мандалорец, применение Stagecraft на съемках, режиссер — Джон Фавро, супервайзер визуальных эффектов — Ричард Блафф
Stagecraft — это технология, которая создаёт и меняет реалистичное окружение прямо на съёмочной площадке. Таким образом зеленый фон заменяется на среду, разработанную в Unreal Engine.
Мандалорец, момент гиперпрыжка из сериала, режиссер — Джон Фавро, супервайзер визуальных эффектов — Ричард Блафф
Мандалорец, применение Stagecraft на съемках, режиссер — Джон Фавро, супервайзер визуальных эффектов — Ричард Блафф
Идея Stagecraft берет свои истоки из фильмов, снятых более века назад. Использование экрана с заранее снятым видео на заднем плане часто использовалось при снятии, например, сцен в машине.
Доктор Ноу, отрывок погони, режиссер — Теренс Янг
Объяснение идеи: процесс съемки и финальный отрывок
Сама идея не нова, но фоны на Unreal Engine не снимаются, их собирают уже в движке, что позволяет создавать что угодно, от земной дороги на заднем плане, до пейзажей незнакомых планет.
Более того, разработчики имеют возможность оперативно корректировать созданное ими пространство, что сильно ускоряет процесс правок.
Процесс редактирования сцены Unreal Engine во время съемок
Мандалорец, сравнение съемок и финального отрывка, режиссер — Джон Фавро, супервайзер визуальных эффектов — Ричард Блафф
Мандалорец, кадр из сериала, режиссер — Джон Фавро, супервайзер визуальных эффектов — Ричард Блафф
Мандалорец, применение Stagecraft на съемках, режиссер — Джон Фавро, супервайзер визуальных эффектов — Ричард Блафф
Мандалорец, кадр из сериала, режиссер — Джон Фавро, супервайзер визуальных эффектов — Ричард Блафф
Мандалорец, кадр со съемок, режиссер — Джон Фавро, супервайзер визуальных эффектов — Ричард Блафф
Часть корабля была цифровой, что позволило сэкономить бюджет на макете.
Мандалорец, кадр из сериала, режиссер — Джон Фавро, супервайзер визуальных эффектов — Ричард Блафф
Процесс создания LED экрана
Демонстрация работы Stagecraft
Технологию Stagecraft постоянно улучшают, теперь появилась возможность синхронизации между движением актера и происходящим на сцене UE. Например, с помощью движения актера на реальной сцене можно синхронно менять ракурс камеры на сцене движка, тем самым подстраивая пейзаж на экране.
Процесс синхронизации между движением актера и камеры в Unreal Engine, изменение пейзажа
Синхронизация между движком и снимающимися актерами позволяет создать к примеру, реалистичный свет. Актер держит указку, похожу на фонарик, которая посылает сигналы о движении в Unreal. В соответствии с этими движениями в сцене движка перемещается настроенный свет, который реалистично реагирует на все выставленные объекты.
Процесс синхронизации между движением актера и света в Unreal Engine, создание реалистичного освещения
Можно сказать, что Stagecraft хороший пример того, как идея применения UE на съемочной площадке была сначала разработана и внедрена, а теперь вытесняет собой старые технологи. Но сейчас разработчики активно реализуют новую идею — полный перенос актеров, вместе со съемочной площадкой, в Unreal Engine. Эта мысль может показаться безумной, но только до того, как впервые видишь технологию MetaHuman.
MetaHuman, будущее кино
Важной частью Unreal Engine является доступ разработчиков к программированию на Blueprints и C++. Именно это позволяет движку создавать на своей основе прогрессивные инструменты быстрее, чем на любом существующем софте. Такими инструментами являются Sequencer, Stagecraft, а также MetaHuman.
Blue Dot, кадр из короткометражного фильма
Blue Dot, сравнение процесса съемки и финального отрывка
MetaHuman — это платформа, которая дает любому возможность создавать, анимировать и использовать высоко реалистичных цифровых человеческих персонажей любым мыслимым способом.
Blue Dot, создание анимации лица в Unreal Engine с помощью MetaHuman
Blue Dot, создание анимации лица в Unreal Engine с помощью MetaHuman
Технология пытается сделать людей максимально реалистичными. Даже кожа, которая часто дает зрителю понять, был ли объект изначально сделан в 3D, здесь выглядит пугающе правдоподобно.
Blue Dot, отрывок короткометражного фильма
Blue Dot, кадр из короткометражного фильма
Blue Dot, кадр из короткометражного фильма
Демонстрация работы MetaHuman
В конце стоит отметить, что Unreal Engine сделал огромный вклад в создание фильмов-синематиков, а также кат-сцен в играх. Это нельзя назвать фильмом, в привычном понимании этого слова, так как полностью все делается в цифровом формате, который, на момент написания исследования, еще можно отличить от реальной съемки.
Mortal Kombat 12, кадр кат-сцены
Вывод:
В настоящее время мы наблюдаем, как все больше студий внедряют в процесс съемок Unreal Engine. Все началось с процесса прототипирования и разработки. Сейчас технологии, сделанные на базе UE, заменяют зеленый экран, делая процесс съемки дешевле, а также более гибким к правкам. Можно предположить, что Stagecraft в течении нескольких лет полностью вытеснит хромакей.
С помощью открытого доступа к коду разработчики оперативно создавают новые инструменты, подходящие для конкретных случаев, а также бесконечно их улучшают. Sequencer, Stagecraft, MetaHuman — лишь одни из многих инструментов, которые уже реализованы или еще будут реализованы на базе Unreal Engine.
Но даже не смотря на проделанный анализ, сказать о будущем применении EU в кинематографе сложно. MetaHuman, как технология, появилась совсем недавно, человечеству нужно время для осознания того, как это можно использовать и развивать. Также важную роль сыграют и зрители, понравится ли обществу смотреть на полностью цифровое кино, вопрос, ответ на который даст только время.
Behind the scenes on Blue Dot: MetaHuman Animator brings stunning fidelity to cinematics, Unreal Engine, [Электронный ресурс], URL: Behind the scenes on Blue Dot: MetaHuman Animator brings stunning fidelity to cinematics — Unreal Engine (Дата обращения: 22.11.2023).
The Future of Cinema: Epic Games Gave Us an In-Depth Tour of The Volume, IGN, [Электронный ресурс], URL: (2) The Future of Cinema: Epic Games Gave Us an In-Depth Tour of The Volume (Their Virtual Set Tech) — YouTube (Дата обращения: 22.11.2023).
Unreal Engine, Wikipedia, [Электронный ресурс], URL: Unreal Engine — Wikipedia (Дата обращения: 22.11.2023).
‘Game of Thrones’: Virtual Production, Unreal Engine, [Электронный ресурс], URL: (2) ‘Game of Thrones’: Virtual Production | Spotlight | Unreal Engine — YouTube (Дата обращения: 22.11.2023).
Как Unreal Engine используют в кино, XYZ, [Электронный ресурс], URL: Как Unreal Engine используют в кино (school-xyz.com) (Дата обращения: 22.11.2023).
Behind the Scenes on MetaHuman Animator Showcase ‘Blue Dot’, Unreal Engine, [Электронный ресурс], URL: (2) Behind the Scenes on MetaHuman Animator Showcase ‘Blue Dot’ | Spotlight | Unreal Engine — YouTube (Дата обращения: 22.11.2023).
Real Time Rendering for Feature Film: Rogue One, GDC, [Электронный ресурс], URL: (2) Real Time Rendering for Feature Film: Rogue One — YouTube (Дата обращения: 22.11.2023).
The Future of Cinema: Epic Games Gave Us an In-Depth Tour of The Volume, IGN, [Электронный ресурс], URL: (2) The Future of Cinema: Epic Games Gave Us an In-Depth Tour of The Volume (Their Virtual Set Tech) — YouTube (Дата обращения: 22.11.2023).
The Virtual Production of The Mandalorian Season One, Industrial Light & Magic, [Электронный ресурс], URL: (2) The Virtual Production of The Mandalorian Season One — YouTube (Дата обращения: 22.11.2023).
Why 'The Mandalorian' Uses Virtual Sets Over Green Screen | Movies Insider, Insider, [Электронный ресурс], URL: (2) Why 'The Mandalorian' Uses Virtual Sets Over Green Screen | Movies Insider — YouTube (Дата обращения: 22.11.2023).
‘Game of Thrones’: Virtual Production, Unreal Engine, [Электронный ресурс], URL: (2) ‘Game of Thrones’: Virtual Production | Spotlight | Unreal Engine — YouTube (Дата обращения: 22.11.2023).
