„Nvidia“ rodo AI modelį, kuris kelias dešimtis kadrų paverčia 3D scena

Naujausias „Nvidia“ AI atvaizdavimas yra įspūdingas: įrankis, greitai paverčiantis „kelias dešimtis“ 2D momentinių vaizdų į 3D vaizdą. Žemiau esančiame vaizdo įraše galite pamatyti, kaip metodas veikia, su modeliu, apsirengusiu Andy Warholu ir laikančiu senamadišką „Polaroid“ fotoaparatą. (Nepergalvokite apie Warholo ryšį: tai tik maža PR kraštovaizdžio dalis.)

Įrankis vadinamas Instant NeRF, o tai reiškia „nervų spinduliuotės laukai– 2020 m. UC Berkeley, „Google Research“ ir UCSD mokslininkų sukurta technologija. Jei norite išsamaus neurospinduliacijos laukų paaiškinimo, galite perskaityti čia, bet trumpai tariant, šis metodas priskiria šviesos spalvą ir intensyvumą skirtingiems 2D kadrams, o tada generuoja duomenis, kad būtų galima susieti šiuos vaizdus iš skirtingų stebėjimo taškų ir pateikti galutinę 3D sceną. Be nuotraukų, sistema reikalauja duomenų apie kameros padėtį.

Tyrėjai patobulino šio tipo 2D modelį į 3D Jau keletą metų– Pridėkite daugiau informacijos prie galutinių pristatymų ir padidinkite pristatymo greitį. „Nvidia“ teigia, kad jos „NeRF“ momentinis modelis yra vienas greičiausiai iki šiol sukurtų ir sumažina atvaizdavimo laiką nuo kelių minučių iki proceso, kuris baigiasi „beveik akimirksniu“.

„Nvidia“ tinklaraščio įraše sakoma, kad technologija tampa greitesnė ir lengviau įgyvendinama, todėl ją galima naudoti atliekant visas užduotis. Darbo aprašymas.

„Momentinis NeRF gali būti naudojamas kuriant avatarus ar virtualių pasaulių scenas, užfiksuoti vaizdo konferencijos dalyvius ir jų 3D aplinką arba atkurti skaitmeninių 3D žemėlapių scenas“, – rašo „Nvidia“ atstovė Isha Salian. „Ši technologija gali būti naudojama apmokant robotus ir savarankiškai važiuojančius automobilius suprasti objektų dydį ir formą realiame pasaulyje, darant jų 2D vaizdus ar vaizdo įrašus. Taip pat ji gali būti naudojama architektūroje ir pramogose, siekiant greitai sukurti skaitmenines reprezentacijas. tikros aplinkos, kurią kūrėjai gali keisti ir kuria remtis. (Atrodo, kad metaversa kreipiasi.)

READ  70% Elden Ring žaidėjų užkariavo pirmąjį sunkų trenerį

Deja, „Nvidia“ nepaskelbė išsamios informacijos apie savo metodą, todėl tiksliai nežinome, kiek reikia 2D vaizdų ir kiek laiko užtruks, kol bus pateikta galutinė 3D scena (tai taip pat priklausys nuo kompiuterio, atliekančio šį veiksmą, galios). perteikimas). Tačiau atrodo, kad technologija sparčiai tobulėja ir ateinančiais metais gali pradėti daryti tikrą poveikį.

Parašykite komentarą

El. pašto adresas nebus skelbiamas. Būtini laukeliai pažymėti *