Le voir en action dans Premiere est incroyable

Bien que les vidéos générées par l’IA aient encore du chemin à parcourir, ce n’était qu’une question de temps avant que cette technologie ne fasse son chemin vers le montage vidéo. Il est vrai qu'il y a déjà de l'IA dans certains outils d'édition, comme CapCut, qui servent à améliorer l'image ou à réduire le bruit, mais ce qu'Adobe vient d'annoncer va encore plus loin. Et cela parce que, essentiellement, il a apporté à Premiere la technologie Adobe Firefly que nous avons vue dans Photoshop.

Le résultat est impressionnant.

IA générative pour la vidéo. Comme l'explique Adobe, ils lanceront à la fin de cette année « de nouvelles fonctions d'IA générative dans Premiere Pro ». L'idée n'est pas tant de créer des vidéos à partir de zéro, comme nous le verrons également maintenant, mais de l'utiliser pour réduire le temps nécessaire pour faire des choses incroyablement fastidieuses, comme supprimer un objet indésirable ou modifier un élément.

En fait, la vision d'Adobe est de permettre aux utilisateurs de « tirer parti des modèles de génération vidéo OpenAI et Runway, intégrés à Premiere Pro, pour générer des B-Rolls pour éditer leurs projets » ou d'utiliser les outils Pika Labs « pour ajouter quelques secondes à la fin du projet ». tir. Autrement dit, l'approche d'Adobe repose sur deux piliers : l'IA générative avec Adobe Firefly et les modèles tiers.

Extension générative. C'est la première des fonctions et, comme son nom l'indique, elle permet d'ajouter des images à un clip pour l'allonger. Ceci est important pour un meilleur montage et un meilleur rythme, car parfois nous n'avons besoin que de quelques images supplémentaires pour réaliser un L-cut ou ajouter une transition. De la même manière, cette technologie peut être utilisée pour étendre les parties silencieuses de l’audio et créer une sorte de son ambiant qui adoucit les coupures audio.

Ajouter des objets. Une autre chose que nous pouvons faire est d'ajouter ou de modifier des objets dans la vidéo. Ce n’est pas qu’il soit impossible de le faire à la main, loin de là, mais c’est une tâche longue, fastidieuse et pas à la portée de tous. Avec Firefly, nous pouvons sélectionner une partie de la vidéo et ajouter quelque chose (comme des diamants à la vidéo) ou remplacer un objet par un autre. Pensons, par exemple, à remplacer une poubelle qui s'est glissée en arrière-plan de la vidéo par une boîte aux lettres, ou à ajouter un vase de fleurs sur une table.

Supprimer des objets. Et de la même manière que nous pouvons ajouter, l'IA de Premiere nous permettra également de supprimer des objets. Ici, il est très simple d’imaginer un cas d’usage. Au niveau domestique ou semi-professionnel, on peut penser à une tache sur un vêtement ou à une vitre sale que l'on a oublié dans le montage. Au niveau professionnel, un micro qui s'est glissé dans le plan, un logo qui ne devrait pas apparaître ou encore une plaque d'immatriculation.

Texte en vidéo. Adobe a également annoncé que le B-Roll pouvait être généré à la volée avec uniquement du texte, ce qui a été vu venir. De la même manière que nous pouvons générer des images aujourd'hui, il sera bientôt possible de demander à Adobe (qui sera intégré à d'autres modèles d'IA générative) de générer un extrait de quelque chose que nous souhaitons illustrer. Il existe certes des banques de vidéos, gratuites ou payantes, mais il est parfois difficile, voire impossible, de trouver la vidéo dont on a besoin pour illustrer quelque chose. Grâce à l'IA, il suffira de pouvoir bien l'expliquer avec du texte.

Informations de l'utilisateur. Ce sont toutes des « premières explorations » pour l’avenir, selon Adobe. L'entreprise assure que l'utilisateur pourra choisir le modèle qui « convient à ses cas d'utilisation », mais la vérité est qu'il reste encore à finaliser la manière dont se déroulera le déploiement de cette technologie. Quoi qu'il en soit, Adobe assure que l'intégration de ces modèles tiers sera « cohérente » avec les normes de sécurité de l'entreprise » et qu'elle s'engage à « associer les identifiants de contenu » au contenu produit avec l'IA. Avec cela, Adobe est fait référence à la Content Authenticity Initiative, le « filigrane » pour le contenu généré avec l'IA.

Images | Adobe

À Simseo | De quoi on parle quand on parle d’intelligence artificielle dans les appareils électroménagers. Pas (encore) de ChatGPT