✔NVIDIA создала нейросеть, за секунды превращающую фото в 3D-модель - «Новости мира Интернет»

Команда разработчиков NVIDIA ​сообщила о запуске нейросети, которая способна в одно мгновение превратить любую группу двухмерных фото в трехмерную сцену.

NVIDIA использует метод инверсивного рендеринга, чтобы сложить несколько фото, сделанных под разными углами, и превратить их в полноценную 3D-сцену с корректно просчитанным освещением.

Компания доработала модель машинного обучения NeRF (Neural Radiance Field) и представила свою версию Instant NeRF на конференции для разработчиков GTC 2022. Нейросеть тратит всего несколько долей секунд, чтобы проанализировать группу статичных снимков и создать их объемное изображение. Посмотреть презентацию Instant NeRF можно в этом видеоролике. По словам компании, такое решение является сегодня самым быстрым среди аналогичных.

На презентации Instant NeRF инженеры NVIDIA также показали несколько сценариев применения новой технологии в жизни. Например, можно создавать трехмерные аватары для VR-приложений или проводить реконструкцию реальных объектов в 3D-формате. Также нейросеть можно задействовать для обучения роботов и автономных машин, чтобы те могли лучше распознавать размер реальных объектов по фотографиям и видеороликам.