NVIDIA meddelade i slutet av mars kallas en ny teknik Neurala strålningsfälten NeRF. Detta lovar att omvandla en samling stillbilder, tydligt i två dimensioner, till en digital 3D (tredimensionell) scen på några sekunder. Allt var möjligt endast genom att förbättra och testa intelligens artificiell som han har tillgänglig. Låt oss se i detalj hur det fungerar och vad effekten är.
NVIDIA Research förvandlar 2D-foton till 3D-scener på ett ögonblick tack vare artificiell intelligens. Här visas hur i en video
Enligt företaget är resultatet en neural renderingsmodell som lär sig en högupplöst 3D-scen på några sekunder och kan återge bilder av den scenen på millisekunder, allt med artificiell intelligens (AI). Känd som omvänd rendering, använder NVIDIAs process artificiell intelligens för att approximera ljusets beteende i den verkliga världen, vilket gör det möjligt för utvecklare att rekonstruera en 3D-scen från en handfull 2D-bilder tagna från olika vinklar.
NVIDIAs forskargrupp har utvecklat ett tillvägagångssätt som utför denna uppgift nästan omedelbart, vilket gör den till en av de första modellerna i sitt slag som kombinerar blixtsnabb "träning" av neurala nätverk och en rendering veloce. Som hyllning till Polaroid-avbildningens tidiga dagar har NVIDIA Research återskapat ett ikoniskt foto av Andy Warhol som tog en ögonblicksbild och förvandlade den till en 3D-scen med hjälp av InstanT NeRF.
NVIDIAs Instant NeRF kan användas för skapa avatarer eller scener för metaversumet, ta med deltagare till videokonferenser eller rekonstruera scener för digitala 3D-kartor. David Luebke, vice vd för forskning på NVIDIA Graphics, säger:
Om traditionella 3D-representationer som polygonnät liknar vektorbilder, är NeRFs som bitmappsbilder: de fångar tätt hur ljus strålar ut från ett objekt eller en scen
Enligt NVIDIA är Instant NeRF den snabbaste NeRF-tekniken som utvecklats hittills. Modellen kan återge en 3D-scen på cirka tio millisekunder.
