NVIDIA annonsert i slutten av mars en ny teknologi kalt Nevrale strålingsfelten NeRF. Dette lover å forvandle en samling stillbilder, tydelig i to dimensjoner, til en digital 3D (tredimensjonal) scene på sekunder. Alt var mulig bare ved å forbedre og teste intelligens kunstig som han har tilgjengelig. La oss se i detalj hvordan det fungerer og hva som er effekten.
NVIDIA Research gjør 2D-bilder til 3D-scener på et øyeblikk med kunstig intelligens. Her vises som i en video
I følge selskapet er resultatet en nevral gjengivelsesmodell som lærer en høyoppløselig 3D-scene på sekunder og kan gjengi bildene av den scenen på millisekunder, alt med kunstig intelligens (AI). Kjent som omvendt gjengivelse, bruker NVIDIAs innstillingsprosess kunstig intelligens for tilnærme oppførselen til lys i den virkelige verden, slik at utviklere kan rekonstruere en 3D-scene fra en håndfull 2D-bilder tatt fra forskjellige vinkler.
NVIDIAs forskningsteam har utviklet en tilnærming som utfører denne oppgaven nesten umiddelbart, noe som gjør den til en av de første modellene i sitt slag som kombinerer lynrask nevrale nettverks-"trening" og gjengivelse Veloce. Som hyllest til begynnelsen av Polaroid-bildebehandling har NVIDIA Research gjenskapt et ikonisk bilde av Andy Warhol som tok et øyeblikksbilde og gjorde det om til en 3D-scene ved hjelp av InstanT NeRF.
NVIDIAs Instant NeRF kan brukes til lage avatarer eller scener for metaverse, skriv inn videokonferansedeltakere eller rekonstruer scener for 3D digitale kart. David Luebke, visepresident for forskning ved NVIDIA Graphics, sier:
Mens tradisjonelle 3D-representasjoner som polygonmasker ligner på vektorbilder, er NeRF-er som punktgrafikkbilder: de fanger tett hvordan lys stråler fra et objekt eller en scene
I følge NVIDIA er Instant NeRF raskeste NeRF-teknikk utviklet til dags dato. Modellen kan gjengi en 3D-scene på omtrent ti millisekunder.