Nvidia generează grafică 3D completă dintr-un număr mic de imagini folosind NeRF.
Dacă ați crezut că tehnologia de accelerare a ratei de cadre DLSS 3 de la Nvidia este impresionantă, nu ați văzut încă nimic. Odată cu introducerea GPU-urilor Nvidia din seria RTX 30, tehnologia de accelerare a ratei de cadre a fost dusă la un nivel superior.
NeRFs, sau Neural Radiance Fields, este o metodă accelerată de inteligență artificială pentru a genera scene 3D complete dintr-o mână de fotografii. NeRFs utilizează o combinație de învățare automată și trasare a razelor pentru a crea scene 3D fotorealiste din doar câteva imagini de intrare
Din punct de vedere conceptual, conceptul este simplu.
Creați mai multe imagini 2D din ceva.
Le aplicați niște algoritmi de inteligență artificială.
Redă obiectul sau obiectele în 3D complet, sau o întreagă scenă complexă.
Toate acestea se întâmplă în timp real.
Este comparabil cu scanarea fotografiilor pentru a genera scene 3D, la care se adaugă abilitățile AI.
Cel puțin, acesta este argumentul de vânzare.
NeRF-urile nu sunt unice pentru Nvidia.
Spre deosebire de cinematografie, însă, compania face câteva lucruri deosebit de interesante cu NeRF-urile care se aplică jocurilor pe calculator.
Acest videoclip detaliat de la Corridor Crew de la începutul acestui an demonstrează cât de incredibilă este tehnologia NeRF pentru crearea de videoclipuri fotorealiste din câteva fotografii.
Cu toate acestea, un cuvânt de precauție.
După vizionarea acestuia, vă veți întreba dacă tot ceea ce vedeți într-un videoclip sau film este real sau redat cu NeRF.
Este înspăimântător.
Modul în care sunt realizate jocurile se schimbă
De fapt, există aplicații bazate pe NeRF, cum ar fi Luma AI, disponibile pentru smartphone-urile Android și Apple, astfel încât să puteți încerca această tehnologie.
Pe lângă faptul că procesul este ciudat de inteligent, revenirea la PC oferă o serie de beneficii imediate și evidente.
Pentru a reda o scenă complexă, sunt necesare doar câteva fotografii sau imagini, spre deosebire de numeroasele texturi de bandă de înaltă rezoluție și modele 3D detaliate.
NeRF-urile “compacte” dezvoltate de Nvidia necesită de aproximativ 100 de ori mai puține date pentru a reda o scenă.
Beneficiile potențiale în ceea ce privește lățimea de bandă și stocarea sunt evidente.
Cu toate acestea, implementările anterioare ale tehnologiei NeRF au necesitat un timp considerabil pentru a antrena și procesa modelul de inteligență artificială.
În schimb, NeRF-urile “instantanee” ale Nvidia pot finaliza întregul proces în câteva secunde.
Toate acestea indică în mod clar o direcție seducătoare, și anume utilizarea NeRF-urilor pentru redarea în timp real a jocurilor.
Imaginați-vă lățimea de bandă și performanța potențială dacă toate datele de model, textură și iluminare pentru o scenă de joc ar fi înlocuite cu o mână de cadre.
În plus, rezultatele sunt mai realiste decât motoarele de jocuri și operele de artă convenționale.
Evoluția tehnologiei NeRF este incredibil de rapidă.
Conceptul există doar de doi ani, dar produce deja rezultate uimitoare.
Rămâne de văzut dacă acest lucru va revoluționa jocurile pe calculator.
În timp ce așteptăm, puteți explora aici cercetările ample ale Nvidia pe această temă.