Лаборатория

PiFU HD (2D to 3D)

На основе нейросети PiFU мы создали веб-сервис, в котором по одной фотографии воссоздается 3D-модель человека, с возможностью просмотра в дополненной реальности. Такой подход значительно сокращает время, необходимое для создания 3D-контента, особенно с использованием человеческих образов.


Технические особенности

  • web-интерфейс - на JS
  • серверная часть - на Python
  • используемые модели машинного обучения - написанные на PyTorch

Пример получения 3D-модели:

Пример просмотра 3D-модели в AR:

Мы также провели эксперимент с анимацией полученной 3D-модели. В эксперименте использовался образ актера Уилла Смита - такого же техно-гика, как и мы!


Команда

  • Крючков Александр
  • Веселов Глеб
  • Кондаратцев Вадим
  • Косаткин Александр
Эксперименты