Rivelato il modello di intelligenza artificiale "GET3D" di NVIDIA per popolare i mondi virtuali |Rete del mondo dell'animazione

2022-10-22 20:11:54 By : Ms. Daisy Wang

Visita AWN su Twitter Visita AWN su Instagram Visita AWN su Google Plus Visita AWN su FlipBoard Iscriviti a AWNA coronamento dei suoi annunci GTC, il gigante della tecnologia svela un nuovo modello che, utilizzando solo immagini 2D, genera forme 3D - con trame ad alta fedeltà e dettagli geometrici complessi - per popolare facilmente mondi virtuali con una vasta gamma di edifici, veicoli e personaggi 3D, in i formati di app software più popolari.Dopo giorni di annunci vorticosi e rivelazioni sul futuro dell'Omniverso, strumenti estesi, versioni, aggiornamenti e nuove tecnologie che potrebbero plasmare il futuro del Multiverso, NVIDIA ha chiuso GTC - la conferenza sull'IA di più giorni - con la rivelazione di una nuova IA modello di NVIDIA Research.Il modello illustra come enormi mondi virtuali creati da un numero crescente di aziende e creatori possano essere popolati più facilmente con una vasta gamma di edifici, veicoli e personaggi 3D.Formato utilizzando solo immagini 2D, NVIDIA GET3D genera forme 3D con trame ad alta fedeltà e dettagli geometrici complessi.Questi oggetti 3D sono creati nello stesso formato utilizzato dalle popolari applicazioni software di grafica, consentendo agli utenti di importare immediatamente le loro forme in renderer 3D e motori di gioco per ulteriori modifiche.Gli oggetti generati possono essere utilizzati in rappresentazioni 3D di edifici, spazi esterni o intere città, progettati per i settori dei giochi, della robotica, dell'architettura e dei social media.GET3D può generare un numero virtualmente illimitato di forme 3D in base ai dati su cui è stato addestrato.Come un artista che trasforma un pezzo di argilla in una scultura dettagliata, il modello trasforma i numeri in complesse forme 3D.Ad esempio, utilizzando un set di dati di allenamento di immagini di auto 2D, GET3D crea una raccolta di berline, camion, auto da corsa e furgoni.Quando viene addestrato su immagini di animali, esce con creature come volpi, rinoceronti, cavalli e orsi.Date le sedie, il modello genera sedie girevoli assortite, sedie da pranzo e comode poltrone reclinabili.Guarda "NVIDIA GET3D: modello AI per popolare mondi virtuali con oggetti e personaggi 3D:""GET3D ci avvicina ulteriormente alla democratizzazione della creazione di contenuti 3D basata sull'intelligenza artificiale", ha affermato Sanja Fidler, vicepresidente della ricerca sull'intelligenza artificiale presso NVIDIA, che guida il laboratorio di intelligenza artificiale con sede a Toronto che ha creato lo strumento."La sua capacità di generare istantaneamente forme 3D strutturate potrebbe essere un punto di svolta per gli sviluppatori, aiutandoli a popolare rapidamente mondi virtuali con oggetti vari e interessanti".GET3D è uno degli oltre 20 documenti e workshop firmati da NVIDIA accettati alla conferenza NeurIPS AI, che si terrà a New Orleans e virtualmente dal 26 novembre al 4 dicembre.La modellazione manuale di un mondo virtuale 3D che riflette la varietà del mondo reale, come strade fiancheggiate da edifici unici, diversi veicoli che sfrecciano e folle diverse che passano, richiede molto tempo, rendendo difficile la compilazione di un ambiente digitale dettagliato.Come spiegato da NVIDIA Research, sebbene più veloci dei metodi manuali, i precedenti modelli di IA generativa 3D erano limitati nel livello di dettaglio che potevano produrre.Anche i recenti metodi di rendering inverso possono generare solo oggetti 3D basati su immagini 2D prese da varie angolazioni, richiedendo agli sviluppatori di costruire una forma 3D alla volta.GET3D può invece sfornare circa 20 forme al secondo quando esegue l'inferenza su una singola GPU NVIDIA, lavorando come una rete contraddittoria generativa per immagini 2D mentre genera oggetti 3D.Più ampio e diversificato è il set di dati di addestramento da cui viene appreso, più vario e dettagliato sarà l'output.I ricercatori NVIDIA hanno formato GET3D su dati sintetici costituiti da immagini 2D di forme 3D acquisite da diverse angolazioni della telecamera.Il team ha impiegato due giorni per addestrare il modello su circa 1 milione di immagini utilizzando GPU NVIDIA A100 Tensor Core.GET3D prende il nome dalla sua capacità di generare mesh 3D testurizzate esplicite, il che significa che le forme che crea hanno la forma di una mesh triangolare, come un modello di cartapesta, ricoperta da un materiale strutturato.Gli utenti possono quindi importare facilmente gli oggetti in motori di gioco, modellatori 3D e renderer di film e modificarli.Una volta che i creatori esportano le forme generate da GET3D in un'applicazione grafica, possono applicare effetti di luce realistici mentre l'oggetto si muove o ruota in una scena.Incorporando un altro strumento di intelligenza artificiale di NVIDIA Research, StyleGAN-NADA, gli sviluppatori possono utilizzare i messaggi di testo per aggiungere uno stile specifico a un'immagine, ad esempio modificare un'auto renderizzata in modo che diventi un'auto bruciata o un taxi o trasformare una normale casa in una infestata dai fantasmi .I ricercatori osservano che una versione futura di GET3D potrebbe utilizzare tecniche di stima della posa della telecamera per consentire agli sviluppatori di addestrare il modello su dati del mondo reale anziché su set di dati sintetici.Potrebbe anche essere migliorato per supportare la generazione universale, il che significa che gli sviluppatori potrebbero addestrare GET3D su tutti i tipi di forme 3D contemporaneamente, invece di doverlo addestrare su una categoria di oggetti alla volta.Per aggiornarti sulle ultime notizie dalla ricerca sull'intelligenza artificiale di NVIDIA, guarda il replay del discorso di apertura del fondatore e CEO di NVIDIA Jensen Huang al GTC:Debbie Diamond Sarto è redattore di notizie presso Animation World Network.Contattaci |Chi siamo |Termini di servizio |Informativa sulla privacy |Media kitAWNtv.com: AWN Television |Video |Canali |Categorie |playlist |Invia i tuoi film AIDB.com: Database dell'industria dell'animazione |Aziende di produzione |Case degli effetti visivi |Scuole© 2017 AWN, Inc. AWN.com - Parte di Animation World Network - 13300 Victory Blvd.Suite 365 Van Nuys, CA 91401