Лаборатория

Virtual production

Мы очень любим устраивать образовательные вечеринки PHYGITAL NIGHTS в нашем штабе, но пандемия наложила на них некоторых ограничения. Тоскуя по гостям и атмосфере праздника, мы решили провести вечеринку в онлайн-формате - и конечно, не без технологичных эффектов.

Мы собрали собственную систему Virtual Production, главной целью для нас был показ различных механик, которые могут быть применены в риалтайм.

Съемка

Для съемки мы использовали:
  • iPad Pro 2020 с lidar-камерой - для просчета глубины и наложения эффектов в реальном времени
  • две RGB-камеры Kinect для съемки с разных ракурсов

Визуальные эффекты

В основе мы использовали визуальные эффекты Keijiro RCam2, которые модифицирвоали под свои задачи.

Среди эффектов были:
  • Эффект окклюзии - сегментации тела человека

  • 360-видео

  • 3D модели

3D-модель Риты Оры, созданная с помощью нейронной сети PiFU

Результат


Запись с эфира

Прочитать подробнее про virtual production

Эксперименты