ChatGPT e Midjourney stanno ora facendo notizia non solo nei media tecnologici ma anche in altre aree. Questo potrebbe cambiare presto poiché la prossima grande tecnologia di intelligenza artificiale è in arrivo. NVIDIA ha mostrato una nuova tecnologia che potrebbe presto elevare le tue GIF a nuovi livelli.
Gizchina Novità della settimana
Usa la tecnologia Text-To-Video di NVIDIA per creare video
Non molto tempo fa, NVIDIA ha rilasciato un interessante prodotto chiamato VideoLDM. Questo è un modello AI per la conversione da testo a video. A proposito, NVIDIA ha creato questa tecnologia collaborando con i ricercatori della Cornell University. In termini semplici, questo modello di intelligenza artificiale può generare video con una risoluzione fino a 2048 x 1280 pixel, una frequenza fotogrammi di 24 fotogrammi al secondo e un tempo di esecuzione fino a 4,7 secondi in base al testo.
Il modello utilizza i progressi nella diffusione stabile reti neurali. La soluzione NVIDIA ha fino a 4,1 miliardi di parametri. Ma solo 2,7 miliardi sono stati addestrati usando il video. Anche se potresti pensare che si tratti di un numero enorme, è piccolo per gli standard IA odierni.
Inoltre, il modello può acquisire video con scene di guida. Possono durare fino a 5 minuti e hanno una risoluzione di 1024 x 512 pixel. Questo perché le sequenze di guida sono difficili da girare nella vita reale. Di conseguenza, quando si tratta di momenti del genere, questa tecnologia può aiutare i cineasti. Il modello può prevedere le possibilità di movimento multimodale creando un gran numero di possibili missioni da un’unica immagine sorgente.
Al momento, le tecnologie text-to-video come quella introdotta da NVIDIA sono utili per creazione di miniature e GIF. Ma sappiamo che NVIDIA sta crescendo rapidamente nel campo dell’IA. Quindi supponiamo che non ci vorrà molto prima che NVIDIA porti tecnologie più avanzate per la creazione di clip di testo in video più lunghe.
Questo studio sarà presentato alla Machine Vision and Pattern Recognition Conference, che sarà tenutasi a Vancouver dal 18 al 22 giugno.
Fonte/VIA: