Con il lancio di Firefly Video in versione Beta, Adobe sta compiendo un nuovo passo verso l’integrazione dell’intelligenza artificiale generativa in tutti i suoi prodotti. La JDN ha incontrato Ely Greenfield, CTO di Adobe Digital Media, per discutere i piani dell’editore.
JDN. Adobe ha recentemente arricchito Creative Cloud con un centinaio di nuove funzionalità e presentato nuove integrazioni del suo modello Firefly. In che modo l’intelligenza artificiale cambierà le pratiche dei creativi?
Ely Greenfield. Da quando abbiamo lanciato il nostro primo modello Adobe Firefly per la generazione di immagini un anno e mezzo fa, abbiamo sempre cercato di integrare l’intelligenza artificiale direttamente nei flussi di lavoro creativi. Negli ultimi sei mesi abbiamo aggiunto funzionalità come la possibilità di generare immagini in stili specifici tramite immagini di riferimento o anche modelli personalizzati, consentendo ad esempio agli utenti di addestrare l’IA con più immagini per ottenere un modello di stile molto specifico. Il nostro obiettivo è fornire il pieno controllo in modo che i nostri clienti possano utilizzare l’intelligenza artificiale in modo sicuro, con risultati estetici e professionali. La nostra famiglia Firefly di modelli di intelligenza artificiale generativa è stata progettata per l’uso in un ambiente commerciale
Adobe ha appena esteso la sua famiglia di modelli di intelligenza artificiale generativa ai video, con Firefly Video attualmente disponibile in versione beta. Quanto tempo è stato necessario e quali tipi di dati sono stati utilizzati per lo sviluppo di questo modello ?
I nostri team hanno lavorato su diversi modelli di intelligenza artificiale per i video per oltre un anno, ma aspettavamo che la tecnologia fosse matura per lanciarla in versione beta. Anche Firefly Video, in sviluppo da quest’estate, ha beneficiato dei nove mesi di esperienza accumulati con il nostro modello dedicato all’immagine. Per quanto riguarda i dati, non utilizziamo mai i dati dei nostri clienti. I nostri modelli vengono addestrati solo su contenuti concessi in licenza, dati su cui possediamo i diritti o risorse di pubblico dominio.
Quali saranno i termini di prezzo per l’utilizzo di Firefly Video? ?
Non lo abbiamo ancora annunciato. Lo abbiamo lanciato in versione beta in modo che i nostri utenti possano già provarlo. Probabilmente avrà un prezzo più alto rispetto al nostro modello di generazione di immagini, ma presto condivideremo i dettagli.
Cosa aspettarsi dalle prossime versioni di Firefly per immagini e video ? Prevede grandi progressi nel breve termine? ?
Continuiamo a investire nel miglioramento della qualità dei risultati con Firefly Video. In termini di miglioramenti futuri, quindi, aspettatevi clip più lunghi, risoluzioni più elevate e maggiore fedeltà alle istruzioni. Ad esempio, abbiamo introdotto la funzione “immagine in video”, che consente agli utenti di ottenere video con un migliore livello di controllo partendo da una semplice immagine. Quando si tratta di movimento e azioni nei video, lavoreremo di più per migliorare il controllo sui dettagli, come gli angoli di ripresa e le transizioni. Per quanto riguarda le immagini, Firefly Image 3 ora consente di generare immagini quattro volte più velocemente. In totale, Firefly ha già generato più di 13 miliardi di immagini. Per il futuro, stiamo anche lavorando per offrire una maggiore coerenza tra elementi e personaggi per consentire la creazione di serie di immagini in ambientazioni diverse.
Quali sono le nuove funzionalità AI dedicate all’audio? Sarà presto possibile generare video con suoni o dialoghi?
Di recente abbiamo integrato Generative Extend in Premiere Pro, che ti consente di estendere una clip audio o video di pochi secondi utilizzando l’intelligenza artificiale. Durante la nostra sessione Sneaks presso Adobe MAX, abbiamo dimostrato le tecnologie in grado di generare elementi audio sincronizzati, come passi o suoni di urti, per accompagnare le scene video. Ci stiamo avvicinando a un’intelligenza artificiale in grado di generare audio e video separatamente e quindi combinare le tracce. Sebbene esistano progressi, dovremo ancora attendere soluzioni che siano pienamente utilizzabili e controllabili dai nostri utenti.
Adobe ha recentemente introdotto diverse funzionalità che semplificano la progettazione 3D con l’intelligenza artificiale. Questa competenza diventerà più accessibile grazie a Firefly? ?
SÌ. Recentemente abbiamo lanciato la versione beta di Project Neo, un’applicazione web per creare e modificare facilmente progetti 3D, rendendo la progettazione 3D più accessibile. L’integrazione Firefly dovrebbe semplificare ulteriormente questo processo, consentendo, ad esempio, di utilizzare un’immagine di riferimento 2D per generare un rendering 3D con semplici istruzioni. Stiamo lavorando su tecnologie che presenteremo prossimamente e che dovrebbero agevolare molto la progettazione 3D grazie all’AI. Abbiamo anche introdotto una nuova versione di Substance 3D Viewer in versione beta, che ti consente di visualizzare e modificare oggetti 3D mentre lavori in Photoshop, semplificando le transizioni tra 2D e 3D.
Pensi che Firefly, attualmente integrato nelle soluzioni Adobe e disponibile tramite interfaccia web, potrebbe finalmente diventare un prodotto autonomo? ?
La nostra strategia AI si basa su tre pilastri. Il primo è offrire una tecnologia controllabile adattata alle esigenze di creativi e professionisti, per garantire risultati precisi e sfruttabili commercialmente. Il secondo pilastro è l’integrazione nativa dell’intelligenza artificiale in tutti i nostri prodotti, in modo che si adatti naturalmente ai flussi di lavoro esistenti dei creatori. Infine, sviluppiamo anche strumenti autonomi basati sull’intelligenza artificiale per avviare nuovi approcci creativi. Project Concept, ad esempio, è uno strumento autonomo progettato per l’ideazione e la concettualizzazione, che illustra come l’intelligenza artificiale può essere posta al centro del processo creativo. Questa nuova piattaforma di sviluppo creativo e collaborativo consente di remixare le immagini in tempo reale in modo che i professionisti creativi possano progettare concetti dal vivo su un’unica superficie di lavoro.
Adobe ha annunciato di essere aperta all’integrazione di modelli AI di terze parti nei suoi strumenti. Quando pensi di integrare questi modelli e come immagini la loro coesistenza insieme a Firefly ?
Non abbiamo ancora una data da annunciare, ma stiamo effettivamente parlando con diversi attori. La nostra priorità è soddisfare le esigenze dei nostri clienti, senza imporre loro i nostri modelli se esistono già alternative efficaci. Siamo quindi aperti all’idea di offrire altri modelli all’interno dei nostri strumenti. Ad esempio, potrebbero essere interessanti modelli di terze parti per flussi di lavoro come “testo in immagine” o “testo in video”. Tuttavia, alcune integrazioni più tecniche, come il riempimento generativo in Photoshop, richiedono tempo e aggiustamenti.
Adobe è dietro Content Credentials, una tecnologia open Source per identificare l’origine dei contenuti. Pensi che potrebbe diventare uno standard nell’era dell’intelligenza artificiale generativa, proprio come lo è diventato il PDF? ?
Credo che Content Credentials sia sulla buona strada per diventare uno standard e stiamo lavorando per la sua adozione da parte dell’ISO. Lanciata nel 2019 sotto l’egida della Content Authenticity Initiative (CAI), questa tecnologia open Source è stata progettata per garantire l’autenticità dei contenuti. Oggi riunisce più di 3.700 partner, tra cui social network, media, produttori di hardware come Canon e creativi. Le credenziali del contenuto aiutano a proteggere l’origine e l’integrità del contenuto tramite firme crittografiche. Questa tecnologia può essere utilizzata per identificare i contenuti generati dall’intelligenza artificiale, ma anche e soprattutto per autenticare opere create dall’uomo. Ad esempio, un dispositivo Canon può ora firmare crittograficamente una foto per certificarne la paternità e attestare che l’immagine non è stata modificata.
Lo strumento Adobe Express, il diretto concorrente di Canva, ha la possibilità di diventare la tua soluzione più popolare, mentre il design e la progettazione grafica sembrano essere diventati più popolari negli ultimi anni?
Parliamo spesso dei creativi come se fossero un unico gruppo, anche se questa comunità comprende molte discipline diverse. Adobe Express è progettato per soddisfare esigenze specifiche ed è quindi uno strumento prezioso per determinati casi d’uso. Sebbene Express sia destinato a diventare uno dei nostri prodotti di punta, il suo obiettivo non è quello di sostituire soluzioni avanzate come Photoshop o Illustrator per utenti esperti. D’altra parte, i designer professionisti, esperti di Illustrator o Photoshop, possono utilizzare Express per importare i propri contenuti e creare rapidamente semplici animazioni. Express punta ad essere accessibile ed efficiente, il che lo rende uno strumento apprezzato da molti clienti professionali, in particolare per l’utilizzo mobile quotidiano.
Ely Greenfield è il CTO della divisione Digital Media di Adobe. Lavora a stretto contatto con i team Creative Cloud e Document Cloud per integrare tecnologie innovative e supportare l’innovazione del gruppo. Più recentemente, ha supervisionato lo sviluppo di Adobe Firefly, il primo modello di intelligenza artificiale generativa dell’azienda. Supervisiona inoltre Adobe Research, la divisione focalizzata sull’innovazione dell’intelligenza artificiale e sugli strumenti creativi. Prima di Adobe, è stato CTO di AppDynamics. Ely Greenfield ha una laurea in informatica presso la Brown University.
