Recomandări cheie
- Nvidia a prezentat recent o tehnică care transformă fotografiile 2D în scene 3D în doar câteva secunde.
- Metoda folosește puterea computerului pentru a estima cum se comportă lumina în lumea reală.
- Metaversul este o zonă în care scenele 3D sunt utile, deoarece pot fi vizualizate din orice perspectivă a camerei.
Noua tehnologie de inteligență artificială (AI) de la Nvidia ar putea transforma în curând fotografiile 2D în scene 3D în doar câteva secunde, făcând crearea unor spații virtuale captivante, cum ar fi metaversul, la fel de banală precum procesarea de text.
Nvidia a demonstrat recent metoda foto numită Instant NeRF, care folosește puterea de calcul pentru a aproxima modul în care se comportă lumina în lumea reală. Ar putea transforma fotografiile tale vechi într-o scenă de joc video sau poate fi folosit pentru a antrena roboți și mașini autonome pentru a înțelege dimensiunea și forma obiectelor din lumea reală.
„Imaginile 3D aduce o nouă lume a transformării”, a declarat Oren Debbi, CEO-ul Visionary.ai, o companie de viziune computerizată care își administrează algoritmii 3D pe platforma Nvidia, a declarat pentru Lifewire într-un interviu prin e-mail. „Folosind 3D, imită profunzimea lumii reale în scenă și faci ca imaginea să pară mai vie și mai realistă. Pe lângă camerele AR/VR și industriale, unde 3D este foarte comun, acum vedem că este folosit pe aproape orice smartphone fără utilizator chiar știind."
Adăugarea dimensiunilor
Prima fotografie instantanee, făcută acum 75 de ani cu o cameră Polaroid, a avut ca scop să surprindă rapid lumea 3D într-o imagine 2D. Acum, cercetătorii AI lucrează la opusul: transformă o colecție de imagini statice într-o scenă digitală 3D în câteva secunde.
Cunoscut ca randare inversă, procesul folosește AI pentru a aproxima modul în care se comportă lumina în lumea reală, permițând cercetătorilor să reconstruiască o scenă 3D dintr-o mână de imagini 2D realizate în unghiuri diferite. Nvidia susține că a dezvoltat o abordare care realizează această sarcină aproape instantaneu.
Nvidia a folosit această abordare cu o nouă tehnologie numită câmpuri de radiație neurale sau NeRF. Compania spune că rezultatul, numit Instant NeRF, este cea mai rapidă tehnică NeRF de până acum. Modelul necesită doar câteva secunde pentru a se antrena pe câteva zeci de fotografii statice și poate apoi reda scena 3D rezultată în zeci de milisecunde.
„Dacă reprezentările 3D tradiționale, cum ar fi rețelele poligonale, sunt asemănătoare imaginilor vectoriale, NeRF-urile sunt ca imaginile bitmap: ele captează dens modul în care radiația luminii dintr-un obiect sau dintr-o scenă”, David Luebke, vicepreședinte pentru cercetare grafică la Nvidia, a declarat într-un comunicat de presă: „În acest sens, Instant NeRF ar putea fi la fel de important pentru 3D precum camerele digitale și compresia JPEG au fost pentru fotografia 2D - crescând considerabil viteza, ușurința și acoperirea captării și partajării 3D.„
Colectarea datelor pentru a alimenta un NeRF necesită ca rețeaua neuronală să capteze câteva zeci de imagini realizate din mai multe poziții în jurul scenei, precum și poziția camerei pentru fiecare dintre aceste fotografii.
NeRF antrenează o mică rețea neuronală pentru a reconstrui scena, prezicând culoarea luminii care radiază în orice direcție, din orice punct din spațiul 3D.
Atractia 3D
Metaverse este un domeniu în care scenele 3D sunt utile, deoarece pot fi vizualizate din orice perspectivă a camerei, a declarat Brad Quinton, fondatorul Platformei Perceptus pentru realitate augmentată (AR), pentru Lifewire într-un interviu prin e-mail. Așa cum putem să ne plimbăm printr-o cameră în viața reală și să-i vedem conținutul din mai multe unghiuri diferite, cu o scenă 3D reconstruită, ne putem deplasa virtual printr-un spațiu și să-l vedem din orice perspectivă.
„Acest lucru poate fi deosebit de util pentru crearea de medii pentru utilizare în realitate virtuală”, a spus Quinton.
Programe precum Object Capture de la Apple folosesc o tehnică numită fotogrammetrie pentru a crea obiecte 3D virtuale dintr-o serie de imagini 2D. Modelele 3D vor fi utilizate pe scară largă în aplicații de realitate virtuală și AR, a prezis Quinton. De exemplu, unele IA, cum ar fi cea din platforma Perceptus AR, folosesc modele 3D pentru a crea o înțelegere a lumii reale, ceea ce permite aplicații AR în timp real.
Folosirea imaginilor 3D imită, de asemenea, profunzimea reală a unei scene și face ca imaginea să pară mai vie și mai realistă, a spus Debbi. Pentru a crea un efect Bokeh (denumit modul portret sau modul cinematic), este necesară maparea adâncimii 3D. Tehnica este folosită pe aproape fiecare smartphone.
„Acesta este deja standardul pentru videografii profesioniști care filmează filme, iar acesta devine standardul pentru fiecare consumator”, a adăugat Debbi.
