Polaroid van de toekomst: het nieuwe neurale netwerk van NVIDIA verandert 2D-beelden in 3D-modellen

NVIDIA-bedrijf geïntroduceerd zijn nieuwe neurale netwerk, Instant NeRF genaamd. Ze lijmt onmiddellijk een reeks 2D-foto's en maakt het beeld af tot een driedimensionaal tafereel. Hierdoor wordt een object uit een plat beeld driedimensionaal.

Dit neurale netwerk wordt de "Polaroid van de Toekomst" genoemd omdat het voltooide 3D-model binnen enkele seconden wordt verkregen. Als eerbetoon aan het merk Polaroid heeft NVIDIA Research de iconische foto van Andy Warhol in 3D nagemaakt.

Opmerking van de ontwikkelaars: Instant NeRF gebruikt omgekeerde weergave om het gedrag van licht in de echte wereld, waardoor een 3D-scène kan worden gereconstrueerd uit meerdere 2D-beelden die onder verschillende hoeken.

Het duurt maar een paar seconden voordat een model leert van tientallen stilstaande foto's. Ook neuraal netwerk moet rekening worden gehouden met de gegevens over de camerahoeken van waaruit de foto's zijn genomen.

De technologie werkt het beste met frames waar er een minimum aan beweging is en slechts één hoofdobject. Anders kan de 3D-scène die door kunstmatige intelligentie is gemaakt, wazig zijn.

Instant NeRF kan worden gebruikt om avatars of scènes voor virtuele werelden te creëren, deelnemers aan videoconferenties en hun omgeving in 3D vast te leggen en scènes te reconstrueren voor digitale 3D-kaarten. Hoewel het onmogelijk is om de technologie te testen, zou NVIDIA er in de toekomst wel eens toegang toe kunnen geven.