Появилась уникальная технология ИИ, позволяющая визуализировать трехмерные сцены из обычных картинок

Новая система машинного обучения может генерировать трехмерную сцену из изображения примерно в 15 000 раз быстрее, чем другие методы.

Хотя ученые добились успеха, используя нейронные сети для вывода представлений трехмерных сцен из изображений, эти методы машинного обучения недостаточно быстры, чтобы сделать их применимыми для многих реальных приложений.

Новый метод, продемонстрированный исследователями из Массачусетского технологического института, позволяет отображать трехмерные сцены из изображений примерно в 15 000 раз быстрее, чем некоторые существующие до этого способы визуализации.

Этот метод использует сцену в виде светового поля на 360 градусов, которое представляет собой функцию, описывающую все световые лучи в трехмерном пространстве, проходящие через каждую точку и во всех направлениях. Световое поле кодируется в нейронную сеть, что позволяет ускорить рендеринг базовой 3D-сцены из изображения.

Разработанные исследователями сети светового поля (LFN) могут реконструировать световое поле только после однократного наблюдения за изображением, что позволяет  визуализировать 3D-сцены с высокой частотой кадров в реальном времени.

Напомним, ранее Курсор писал о том, что в Арктике ускорилось разрушение вечной мерзлоты. Исследователи проанализировали спутниковые снимки, а также снимки с воздуха арктической Аляски, охватывающие семь последних десятилетий, чтобы рассчитать темпы формирования термокарстов.