Wystarczy kilka zdjęć, by Nvidia Nerf w mig stworzyło hiperralistyczną scenę 3D
Wielomiliardowe inwestycje Nvidii w rozwój sztucznej inteligencji wyraźnie się zwracają. Gracze od lat wybierają GeForce’y z uwagi na przełomowy algorytm DLSS. Ale przecież na tym nie koniec. Nvidia Nerf może okazać się przełomowym narzędziem dla twórców.
Nvidia Nerf to, w największym skrócie, technologia zamieniająca obraz 2D w scenę 3D. Wykorzystuje ona algorytmy sztucznej inteligencji do analizy obrazu zapewnionego jej w formie plików z obrazami. Następnie w kilka sekund przetwarza je na scenę 3D, którą następnie można wykorzystać do budowy sceny w grze wideo, wirtualnego studia w telewizji czy lokacji w filmie czy serialu.
Czytaj też:
Algorytm wykorzystuje przełomową technikę, określaną jako neuronowe pola promieniowania (neuron radiance fields, w skrócie NeRF). Tej wystarczy dosłownie kilka, kilkanaście fotografii z metadanymi dotyczącymi kątów, pod którymi były ustawione obiektywy. Algorytm jest nie tylko skuteczny, zapewniając wizualizację 3D bez artefaktów, ale jest też niezwykle szybki w działaniu.
Nvidia Nerf, czyli konwersja zdjęć w scenę 3D. Ta technologia może znacząco usprawnić pracę wielu twórców.
Nvidia Nerf analizuje to, w jaki sposób światło promieniuje z obiektów w scenie, co zdaniem inżynierów Nvidii jest kluczowym parametrem, dzięki któremu algorytm działa tak dobrze. Jak zdradza Nvidia, samo odtworzenie sceny ze zdjęć w 3D wbrew pozorom nie jest takie trudne. Największym problemem jest jednak czas przetwarzania danych.
W początkowych stadiach rozwoju Nvidia Nerf, przeszkolony przez wiele godzin przetwarzania danych na szybkim sprzęcie model sztucznej inteligencji, był w stanie przez kolejne minuty generować scenę 3D. Jednak za sprawą licznych dodatkowych technik opartych o uczenie maszynowe, udało się opracować szybko działający algorytm, któremu wystarczy typowy pojedynczy układ graficzny Nvidii z rdzeniami Tensor.
Prace nad Nvidia Nerf są nadal prowadzone. Nvidia nie chce bowiem poprzestawać na jednym rynku, jakim są modelarze grafiki 3D. Nerf, jak snuje Nvidia, może okazać się bezcenną technologią dla producentów robotów i autonomicznych pojazdów. Technologia ta może bowiem pomóc maszynom rozumieć otaczającą je fizyczną rzeczywistość za sprawą danych pochodzących z kamer wideo. Nie jest niestety jasne, kiedy Nerf trafi do pierwszych klientów.
