Google воспроизводит памятники архитектуры в 3D и VR с помощью фото из сети

Компания воспроизводит памятники с помощью технологии нейронного излучения.

Данные с 2D изображений о том, где завершаются световые лучи, используются для определения глубины 3D.

Затем система исследует изображение, чтобы найти структуры и отделить особенности съемки и погодных условий.

После этого на основе статических элементов и текстур нейронная сеть создает 3D-модель памятника.

Поскольку объекты, воспроизведенные системой, можно рассматривать с разных сторон, NeRF in the Wild позволяет пользователям устройств виртуальной и дополненной реальности по-настоящему почувствовать архитектуру, даже с учетом погодных условий и времени суток.

Такая технология выходит за пределы предыдущей работы с 3D-моделями.

Например, исследователи Intel ведут разработки над цифровым воспроизведением настоящих локаций с использованием дешифратора - нейросети, которая воспроизводит не увлечен углы.