Adobe ha introdotto Firefly Video Model, un nuovo modello di IA generativa destinato a potenziare gli strumenti di produzione video dell’azienda, tra cui Premiere Pro e, potenzialmente, After Effects. Questa tecnologia consente di generare frame aggiuntivi in un video esistente, creare clip ex novo partendo da immagini di riferimento o prompt testuali e produrre effetti visivi come fuoco, fumo e polvere.

Firefly, lanciato nel 2023 come suite di strumenti di generative IA per immagini statiche, è già integrato in software come Photoshop e Substance 3D. Ora, con Firefly Video Model, Adobe espande le sue funzionalità ai contenuti video, posizionandosi come concorrente di soluzioni come Runway. Tra le caratteristiche principali spiccano:

  • Generative Extend: prolunga le clip generando nuovi frame o “room tone” audio
  • Image to Video: trasforma immagini statiche in sequenze animate
  • Text to Video: permette di creare filmati a partire da descrizioni testuali, con controlli avanzati su parametri come angolazione della camera e movimenti dell’inquadratura

Sebbene Firefly Video Model supporti la generazione di animazioni 2D e 3D, Adobe ne enfatizza l’uso per produrre contenuti realistici, in particolare paesaggi, flora e fauna. Attualmente, i video generati sono limitati a 5 secondi e risoluzione massima 1080p e, al momento, la principale applicazione pratica sembra essere la creazione di materiale supplementare come B-roll o riprese di raccordo, piuttosto che sequenze complete.

L’interfaccia della web app Firefly offre controlli su aspect ratio (16:9 o 9:16), dimensione del piano (da primissimo piano a campo lunghissimo), angolazione (incluse riprese aeree) e movimenti di camera (es. camera a mano). Premiere Pro, nella sua versione beta, include già la funzione Generative Extend, mentre After Effects potrebbe ricevere in futuro funzionalità simili.

Adobe assicura che il modello Firefly Video è “commercialmente sicuro” e addestrato esclusivamente su contenuti autorizzati, escludendo materiali degli utenti (salvo quelli caricati su Adobe Stock). Il servizio adotta inoltre un sistema di crediti: il piano Firefly Standard ($9.99/mese) offre 2.000 crediti video, mentre il Firefly Pro ($29.99/mese) ne include 7.000. Il costo iniziale è di 20 crediti per secondo di video generato, destinato a salire a 100 crediti. I crediti sono inclusi anche negli abbonamenti Creative Cloud.

Firefly Video Model è attualmente disponibile in beta pubblica sulla web app Firefly, con le funzionalità Text to Video e Image to Video ancora in fase di test.