Teknika e re NeRF e NVIDIA mund të ndihmojë në hyrjen në Metaverse

Përmbajtje:

Teknika e re NeRF e NVIDIA mund të ndihmojë në hyrjen në Metaverse
Teknika e re NeRF e NVIDIA mund të ndihmojë në hyrjen në Metaverse
Anonim

Folje kryesore

  • Nvidia së fundi tregoi një teknikë që i kthen fotografitë 2D në skena 3D në vetëm sekonda.
  • Metoda përdor fuqinë kompjuterike për të përafërt me mënyrën se si sillet drita në botën reale.
  • Metaverse është një zonë ku skenat 3D janë të dobishme sepse ato mund të shihen nga çdo këndvështrim i kamerës.
Image
Image

Teknologjia e re e inteligjencës artificiale (AI) nga Nvidia së shpejti mund t'i kthejë fotot 2D në skena 3D në vetëm disa sekonda, duke e bërë krijimin e hapësirave virtuale zhytëse si metaverset po aq të parëndësishme sa përpunimi i tekstit.

Nvidia së fundmi demonstroi metodën e fotografisë të quajtur Instant NeRF, e cila përdor fuqinë llogaritëse për të përafërt se si sillet drita në botën reale. Mund t'i transformojë fotot tuaja të vjetra në një skenë lojërash video, ose mund të përdoret për të trajnuar robotë dhe makina vetë-drejtuese për të kuptuar madhësinë dhe formën e objekteve të botës reale.

"Imazhi 3D sjell një botë të re transformimi," tha për Lifewire në një intervistë me email, Oren Debbi, CEO i Visionary.ai, një kompani e vizionit kompjuterik që ekzekuton algoritmet e saj 3D në platformën Nvidia. "Duke përdorur 3D, ju imitoni thellësinë e botës reale në skenë dhe e bëni imazhin të duket më i gjallë dhe realist. Përveç kamerave AR/VR dhe industriale, ku 3D është shumë e zakonshme, tani po e shohim duke u përdorur në pothuajse çdo smartphone pa përdoruesi edhe duke ditur."

Shtimi i dimensioneve

Fotografia e parë e menjëhershme, e realizuar 75 vjet më parë me një kamerë Polaroid, synonte të kapte me shpejtësi botën 3D në një imazh 2D. Tani, studiuesit e AI po punojnë për të kundërtën: duke e kthyer një koleksion imazhesh të palëvizshme në një skenë dixhitale 3D në sekonda.

I njohur si pasqyrim invers, procesi përdor AI për të përafërt se si sillet drita në botën reale, duke u mundësuar studiuesve të rindërtojnë një skenë 3D nga një pjesë e vogël e imazheve 2D të marra në kënde të ndryshme. Nvidia pretendon se ka zhvilluar një qasje që e përmbush këtë detyrë pothuajse menjëherë.

Nvidia e përdori këtë qasje me një teknologji të re të quajtur fushat e rrezatimit nervor, ose NeRF. Kompania thotë se rezultati, i quajtur Instant NeRF, është teknika më e shpejtë e NeRF deri më sot. Modelit i duhen vetëm sekonda për t'u stërvitur me disa dhjetëra foto të palëvizshme dhe më pas mund të përshkruajë skenën 3D që rezulton brenda dhjetëra milisekonda.

"Nëse përfaqësimet tradicionale 3D si rrjetat poligonale janë të ngjashme me imazhet vektoriale, NeRF-të janë si imazhet bitmap: ato kapin në mënyrë të dendur mënyrën se si drita rrezaton nga një objekt ose brenda një skene," David Luebke, nënkryetar për kërkimet grafike në Nvidia, tha në një njoftim për shtyp. "Në këtë kuptim, Instant NeRF mund të jetë po aq i rëndësishëm për 3D sa kamerat dixhitale dhe kompresimi JPEG kanë qenë për fotografinë 2D - duke rritur jashtëzakonisht shpejtësinë, lehtësinë dhe shtrirjen e kapjes dhe ndarjes 3D."

Mbledhja e të dhënave për të ushqyer një NeRF kërkon që rrjeti nervor të kapë disa dhjetëra imazhe të marra nga pozicione të shumta rreth skenës, si dhe pozicionin e kamerës së secilës prej atyre shkrepjeve.

NeRF trajnon një rrjet të vogël nervor për të rindërtuar skenën duke parashikuar ngjyrën e dritës që rrezaton në çdo drejtim, nga çdo pikë në hapësirën 3D.

Apeli i 3D

Metaverse është një zonë ku skenat 3D janë të dobishme sepse ato mund të shihen nga çdo këndvështrim i kamerës, tha Brad Quinton, themeluesi i Platformës Perceptus për realitetin e shtuar (AR), në një intervistë për Lifewire. Ashtu si ne mund të ecim nëpër një dhomë në jetën reale dhe të shohim përmbajtjen e saj nga shumë këndvështrime të ndryshme, me një skenë 3D të rindërtuar, ne mund të lëvizim virtualisht nëpër një hapësirë dhe ta shikojmë atë nga çdo këndvështrim.

Image
Image

"Kjo mund të jetë veçanërisht e dobishme për krijimin e mjediseve për përdorim në realitetin virtual," tha Quinton.

Programet si "Apple's Object Capture" përdorin një teknikë të quajtur fotogrammetri për të krijuar objekte virtuale 3D nga një seri imazhesh 2D. Modelet 3D do të përdoren gjerësisht në realitetin virtual dhe aplikacionet AR, parashikoi Quinton. Për shembull, disa AI, si ai në Platformën Perceptus AR, përdorin modele 3D për të krijuar një kuptim të botës reale, e cila lejon aplikime AR në kohë reale.

Përdorimi i imazheve 3D gjithashtu imiton thellësinë e botës reale në një skenë dhe e bën imazhin të duket më i gjallë dhe realist, tha Debbi. Për të krijuar një efekt Bokeh (aka modaliteti i portretit ose modaliteti kinematografik), është i nevojshëm hartëzimi i thellësisë 3D. Teknika përdoret pothuajse në çdo smartphone.

"Ky është tashmë standardi për videografët profesionistë që filmojnë filma dhe ky po bëhet standard për çdo konsumator," shtoi Debbi.

Recommended: