Pagrindiniai pasiėmimai
- Nvidia neseniai pristatė techniką, kuri per kelias sekundes 2D nuotraukas paverčia 3D scenomis.
- Šis metodas naudoja kompiuterio galią, kad apytiksliai apskaičiuotų, kaip šviesa elgiasi realiame pasaulyje.
- Metaversa yra viena sritis, kurioje 3D scenos yra naudingos, nes jas galima žiūrėti iš bet kurios fotoaparato perspektyvos.
Nauja Nvidia dirbtinio intelekto (AI) technologija netrukus gali vos per kelias sekundes paversti 2D nuotraukas 3D scenomis, todėl įtraukiančių virtualių erdvių, tokių kaip metaversa, kūrimas bus toks pat trivialus, kaip ir tekstų apdorojimas.
Nvidia neseniai pademonstravo fotografavimo metodą, pavadintą Instant NeRF, kuris naudoja skaičiavimo galią, kad apytiksliai apskaičiuotų, kaip šviesa elgiasi realiame pasaulyje. Tai gali paversti jūsų senas nuotraukas vaizdo žaidimų scena arba gali būti naudojama mokant robotus ir savarankiškai važiuojančius automobilius, kad jie suprastų realaus pasaulio objektų dydį ir formą.
„3D vaizdavimas atneša naują transformacijos pasaulį“, – interviu el. paštu „Lifewire“sakė Orenas Debbi, „Visionary.ai“, kompiuterinės vizijos bendrovės, valdančios 3D algoritmus „Nvidia“platformoje, generalinis direktorius. "Naudodami 3D vaizdą imituojate realaus pasaulio gylį, todėl vaizdas atrodo gyvesnis ir tikroviškesnis. Be AR/VR ir pramoninių fotoaparatų, kuriuose 3D yra labai paplitęs, dabar matome, kad jis naudojamas beveik kiekviename išmaniajame telefone be vartotojas net žino."
Matmenų pridėjimas
Pirmoji momentinė nuotrauka, daryta prieš 75 metus su Polaroid fotoaparatu, skirta greitai užfiksuoti 3D pasaulį dvimačiu vaizdu. Dabar dirbtinio intelekto tyrinėtojai dirba priešingai: per kelias sekundes nejudančių vaizdų kolekciją paverčia skaitmenine 3D scena.
Žinomas kaip atvirkštinis atvaizdavimas, šis procesas naudoja AI, kad apytiksliai apskaičiuotų, kaip šviesa elgiasi realiame pasaulyje, todėl mokslininkai gali atkurti 3D sceną iš kelių 2D vaizdų, darytų skirtingais kampais. „Nvidia“teigia, kad sukūrė metodą, kuris šią užduotį atlieka beveik akimirksniu.
Nvidia naudojo šį metodą su nauja technologija, vadinama nervinio spinduliavimo laukais arba NeRF. Bendrovė teigia, kad rezultatas, pavadintas Instant NeRF, yra greičiausia NeRF technika iki šiol. Modelis užtrunka vos kelias sekundes, kad padarytų kelias dešimtis nejudančių nuotraukų, o tada gali atvaizduoti gautą 3D sceną per kelias dešimtis milisekundžių.
„Jei tradiciniai 3D atvaizdai, tokie kaip daugiakampiai tinkleliai, yra panašūs į vektorinius vaizdus, NeRF yra kaip bitmap vaizdai: jie tankiai fiksuoja šviesos spinduliavimą iš objekto ar scenos“, - David Luebke, grafikos tyrimų viceprezidentas. „Nvidia“pranešime spaudai sakė: „Šia prasme momentinis NeRF gali būti toks pat svarbus 3D, kaip skaitmeniniai fotoaparatai ir JPEG glaudinimas 2D fotografijai – tai žymiai padidina 3D fotografavimo ir bendrinimo greitį, lengvumą ir pasiekiamumą."
Renkant duomenis, kad būtų galima tiekti NeRF, neuroninis tinklas turi užfiksuoti kelias dešimtis vaizdų, nufotografuotų iš kelių scenos vietų, taip pat kiekvieno iš šių kadrų fotoaparato padėtį.
NeRF treniruoja nedidelį neuroninį tinklą, kad būtų galima atkurti sceną, numatant šviesos, sklindančios bet kuria kryptimi, iš bet kurio 3D erdvės taško, spalvą.
Apeliacija dėl 3D
Metaverse yra viena sritis, kurioje 3D scenos yra naudingos, nes jas galima žiūrėti iš bet kurios kameros perspektyvos, interviu el. paštu Lifewire sakė Bradas Quintonas, papildytos realybės platformos „Perceptus“įkūrėjas. Kaip ir realiame gyvenime galime vaikščioti per kambarį ir matyti jo turinį iš daugelio skirtingų kampų, naudodami rekonstruotą 3D sceną, galime virtualiai judėti erdvėje ir žiūrėti ją iš bet kokios perspektyvos.
„Tai gali būti ypač naudinga kuriant aplinkas, skirtas naudoti virtualioje realybėje“, – sakė Kvintonas.
Programos, tokios kaip „Apple Object Capture“, naudoja techniką, vadinamą fotogrammetrija, kad sukurtų virtualius 3D objektus iš 2D vaizdų serijos. Quintonas prognozavo, kad 3D modeliai bus plačiai naudojami virtualioje realybėje ir AR programose. Pavyzdžiui, kai kurios AI, pvz., Perceptus AR platformoje, naudoja 3D modelius, kad sukurtų supratimą apie realų pasaulį, o tai leidžia realaus laiko AR programas.
3D vaizdų naudojimas taip pat imituoja realų scenos gylį, todėl vaizdas atrodo gyvesnis ir tikroviškesnis, sakė Debbi. Norint sukurti Bokeh efektą (dar žinomą kaip portreto arba kino režimas), būtinas 3D gylio žemėlapis. Ši technika naudojama beveik kiekviename išmaniajame telefone.
"Tai jau yra standartas profesionaliems filmuotojams, filmuojantiems filmus, ir tai tampa standartu kiekvienam vartotojui", - pridūrė Debbi.
