Adobe dévoile ses nouveaux outils génératifs

Firefly promet de transformer les images et les mots en séquences animées.

Adobe, le géant du logiciel, vient de dévoiler un aperçu alléchant de ses futurs outils de vidéo générative basés sur l'intelligence artificielle. Cette annonce marque une étape importante dans l'évolution de la création vidéo, promettant de transformer radicalement la manière dont nous concevons et produisons du contenu visuel.

Au cœur de cette révolution se trouve une fonctionnalité impressionnante: la capacité de produire des clips vidéo à partir de simples images fixes. Cette prouesse technologique s'appuie sur le modèle vidéo Firefly, actuellement en développement, qui avait déjà fait sensation lors de sa première démonstration en avril dernier. Ce dernier est destiné à alimenter une multitude de fonctionnalités d'édition vidéo et audio basées sur l'IA à travers toute la suite Creative Cloud d'Adobe. La bande-annonce promotionnelle récemment publiée met en lumière les capacités de Firefly en matière de conversion texte-vidéo. Cette fonctionnalité jamais démontrée jusqu'à présent, vous permettra de générer des clips vidéo à partir de simples descriptions textuelles. Plus palpitant encore, les créateurs pourront affiner leurs résultats grâce à une variété de contrôles de caméra simulant différents angles, mouvements et distances de prise de vue.

Mais ce n'est pas tout. Adobe a également présenté une fonction de conversion image-vidéo capable de générer des clips à partir d'images de référence spécifiques. Cette innovation ouvre des possibilités fascinantes pour la production, permettant par exemple de créer facilement des séquences B-roll supplémentaires ou de combler les lacunes dans les calendriers de production. Autre aspect intrigant, il vous sera possible de choisir parmi une sélection de styles de tournage préétablis à émuler, en plus de décrire le type de séquence que vous souhaitez obtenir. Cette approche promet de démocratiser la création de contenu vidéo de qualité professionnelle, en mettant à la portée de tous des techniques de réalisation autrefois réservées aux experts.

Si l'on en croit les exemples présentés, la qualité des vidéos générées semble rivaliser avec ce que nous avons pu voir jusqu'à présent du modèle Sora d'OpenAI. Il est d'ailleurs intéressant de noter qu'Adobe explore également la possibilité d’intégrer ce dernier en tant que fonctionnalité tierce dans son logiciel de montage vidéo Premiere Pro. Il existe malgré tout une limitation notable, selon Alexandru Costin, vice-président de l'IA générative de l’entreprise, les vidéos produites par les fonctions texte-vidéo et image-vidéo auront une durée maximale de cinq secondes. Un avantage potentiel de son modèle par rapport à Sora réside dans sa promesse d'être "commercialement sûr". En effet, Firefly est entraîné exclusivement sur du contenu sous licence ouverte, du domaine public et provenant d'Adobe Stock. Cette approche pourrait considérablement réduire les préoccupations liées aux violations de droits d'auteur, un enjeu majeur dans l'ère du contenu généré par l'IA.

Les fonctionnalités texte-vidéo et image-vidéo seront disponibles en version bêta dans une application Firefly autonome, dont le lancement est prévu pour la fin de l’année. À terme, Adobe prévoit d'intégrer le nouveau modèle dans ses applications Creative Cloud, Experience Cloud et Adobe Express, promettant ainsi une révolution à grande échelle dans l'écosystème créatif de la marque. Mais les surprises ne s'arrêtent pas là. elle a également présenté des aperçus de la future fonctionnalité "Generative Extend" pour Premiere Pro. Elle permettra d'étendre la durée des séquences vidéo existantes, à l'instar de l'outil Generative Expand de Photoshop pour les arrière-plans d'images. Bien que la date de lancement précise reste à confirmer, l’entreprise américaine assure que cela arrivera aussi fin 2024.

L'arrivée de ces outils d'IA générative dans le domaine de la vidéo marque un tournant décisif dans l'industrie créative. Elle promet non seulement de simplifier et d'accélérer les processus de production, mais aussi d'ouvrir de nouvelles possibilités jusqu'alors inimaginables. Des créateurs indépendants aux grandes maisons de production, tous pourraient bénéficier de ces avancées technologiques pour repousser les limites de leur créativité. Comme toute innovation majeure, ces nouveautés interrogent également sur l'avenir. Comment influenceront-elles les compétences traditionnelles en matière de réalisation et de montage ? Quelles seront les implications éthiques et légales de la génération de contenu vidéo par l'IA ? Et comment l'industrie s'adaptera-t-elle à cette nouvelle réalité où la frontière entre le réel et le généré s'estompe de plus en plus ? La réponse à ces questions arriveront d’ici les prochains mois.