Най-новата демонстрация на AI от Nvidia е доста впечатляваща: инструмент, който бързо превръща „няколко десетки“ 2D снимки в 3D изобразена сцена. Във видеото по-долу можете да видите метода в действие – модел, облечен като Анди Уорхол, държи старомодна фотокамера Polaroid.

Инструментът се нарича Instant NeRF, като името се отнася до „неврални полета на излъчване“ – техника, разработена от изследователи от UC Berkeley, Google Research и UC San Diego през 2020 г. Ако искате накратко обяснение на полетата на невронно излъчване, методът картографира цвета и интензитета на светлината на различни 2D снимки, след което генерира данни за свързване на тези изображения от различни гледни точки и изобразяване на завършена 3D сцена. Освен изображения системата изисква данни за позицията на камерата.

Изследователите подобряват този вид 2D към 3D модел от няколко години, добавяйки повече детайли към готовите рендери и увеличавайки скоростта на изобразяване. От Nvidia твърдят, че нейният нов модел Instant NeRF е един от най-бързите досега разработените и намалява времето за изобразяване от няколко минути до процес, който завършва „почти мигновено“.

„Незабавният NeRF може да се използва за създаване на аватари или сцени за виртуални светове, за заснемане на участници във видеоконференция и тяхната среда в 3D или за реконструкция на сцени за 3D цифрови карти“, пише Иша Салиан от Nvidia. „Технологията може да се използва за обучение на роботи и самоуправляващи се автомобили, за да разберат размера и формата на обектите в реалния свят чрез заснемане на 2D изображения или видеозаписи от тях. Може да се използва и в архитектурата и развлеченията за бързо генериране на цифрови представяния на реални среди, които създателите могат да променят и да надграждат.“

В документ, описващ работата, изследователите на Nvidia казаха, че са успели да експортират сцени с резолюция 1920 × 1080 пиксела „за десетки милисекунди“.

Снимка: Pikrepo

Виж още:Nvidia иска да ни представи на най-бързия AI суперкомпютър