Runway Gen-3 Alpha, ancora un balzo in avanti nella generazione video IA

Solo pochi giorni fa l’annuncio di Dream Machine di Luma AI ha creato a tutti l’effetto “wow” portando la creazione di video IA accessibile a tutti. Da poche ore Runway AI ha già reso obsoleto Dream Machine, con l’annuncio del suo nuovo modello video IA Runway Gen-3 Alpha. L’asticella della qualità video si è alzata ancora e di molto. Fortunatamente per Luma AI, Runway Gen-3 non è ancora accessibile a tutti, ma lo sarà a breve, questione di giorni.

Per chi non lo sapesse, sia Dream Machine che Runway Gen-3 sono degli strumenti per creare facilmente dei brevi video con possibilità di estenderli, partendo da un immagine o da un prompt testuale.

E’ la competizione IA. Quello che è una novità oggi diventa vecchio in breve tempo e surclassato dall’ultima innovazione. Lo abbiamo visto con le chat conversazionali nelle sfide tra ChatGPT, Gemini, Claude 3 ecc. E ora vediamo la stessa agguerrita corsa al primato del miglior prodotto, anche nel settore video IA.

Runway Gen-3 di Runway ML

Runway ML, una startup specializzata nella tecnologia video IA generativa, ha annunciato il rilascio del suo ultimo modello di base, Runway Gen-3 Alpha. Questo modello consente di generare brevi scene ultra-realistiche e di alta qualità con diversi movimenti di camera utilizzando solo prompt testuali, immagini fisse o video pre-registrati.

Runway Gen-3 rappresenta ancora un miglioramento rispetto ai modelli precedenti, Gen-1 e Gen-2; ma con un maggiore controllo sul movimento della camera e degli oggetti. L’obiettivo di Gen-3 Alpha è quello di gestire interazioni complesse e diversi stili di movimento della camera e interazione dei personaggi.

Innovazioni tecniche e caratteristiche

Runway Gen-3 utilizza una nuova infrastruttura di training e può creare video straordinariamente dettagliati con espressioni facciali precise e movimenti fluidi della camera. È stato addestrato su un ampio set di dati in uno sforzo collaborativo che ha coinvolto scienziati, ingegneri e artisti.

Questo modello migliorerà la suite di strumenti di Runway, tra cui le funzionalità Text to Video e Text to Image. Potenzierà anche le caratteristiche esistenti come Motion Brush, Advanced Camera Controls e Director Mode; oltre ad alimentare nuovi strumenti incentrati su composizione, stile e movimento.

Verso modelli generali del mondo

Gen-3 Alpha rappresenta un passo verso lo sviluppo di Modelli Generali del Mondo: sistemi AI in grado di rappresentare e simulare un’ampia gamma di scene e comportamenti del mondo reale. Runway non ha rivelato i set di dati specifici coinvolti nell’addestramento di questo modello, riflettendo una tendenza più ampia del settore video a mantenere riservati i dettagli del training.

Se ciò sarà realizzato presto, potrebbero esserci novità in vari settori; per esempio, la realizzazione di open world nel settore gaming.

L’azienda afferma di collaborare con importanti organizzazioni del settore dell’intrattenimento e dei media per creare versioni personalizzate di Gen-3 Alpha. Queste versioni offrono personaggi stilisticamente controllati e coerenti e si concentrano su specifici obiettivi artistici e narrativi. Sebbene non siano stati divulgati partner specifici, in passato l’azienda ha lavorato con registi su progetti di alto profilo come “Everything Everywhere All at Once” e “The People’s Joker”.

Dinamiche competitive del mercato e disponibilità

Il rilascio di Runway Gen-3 avviene in un contesto di crescente concorrenza da parte di altri modelli video AI, come Sora di OpenAI, Dream Machine di Luma AI, il cinese Kling e molti altri con risultati più o meno apprezzabili. Nonostante questa competizione, Runway rimane impegnata a mantenere la sua leadership nello spazio video AI generativo.

Runway Gen-3 sarà disponibile nel prodotto Runway nei prossimi giorni; inizialmente per gli utenti a pagamento e successivamente anche per quelli gratuiti con limite di utilizzo giornaliero. Runway vede Gen-3 Alpha come uno strumento che può essere utilizzato sia da registi professionisti che da creatori indipendenti.

La velocità di iterazione e la capacità di dare vita rapidamente alle idee sono i principali vantaggi dell’utilizzo di strumenti IA come Gen-3 Alpha. Runway ritiene che il futuro del cinema sarà una combinazione di tecniche tradizionali e modelli generativi.

Runway Gen-3: conclusioni

Il miglioramento di Runway Gen-3 è così evidente che i modelli Dream Machine Luma AI, Sora ed altri sono già sorpassati.

Runway Gen-3 di Runway ML offre un controllo migliorato sul movimento della camera e degli oggetti grazie all’aumento della potenza di calcolo. L’azienda mira a rimanere un leader nello spazio di generazione video AI concentrandosi su strumenti di narrazione controllabili per i creatori professionisti.

Guardando al futuro, Runway prevede che i modelli di generazione video foto-realistici diventeranno uno standard del settore. Ma il vero valore risiede nella creazione di una comunità attorno a questi modelli e nella creazione di ottime esperienze per gli utenti.