L'outil IA d'Adobe convertit des sons simples en effets audio réalistes
Adobe déploie de nouvelles fonctionnalités d'IA générative pour les cinéastes, offrant des moyens créatifs de produire des effets sonores et de diriger des vidéos générées par l'IA. Au-delà des invites textuelles standard utilisées pour diriger les modèles d'IA Firefly d'Adobe, les créateurs peuvent désormais utiliser des effets sonores vocalisés, tels que les sons « boom » ou « whoosh », pour générer des fichiers audio personnalisés, et utiliser des clips de référence pour influencer le mouvement dans les vidéos créées par Firefly.
La version bêta de l'outil Generate Sound Effects (Générer des effets sonores) de l'application Firefly fonctionne à la fois avec des séquences enregistrées et générées par l'IA, offrant aux utilisateurs un contrôle audio plus précis que des options telles que Veo de Google. Son interface imite la timeline d'un éditeur vidéo, permettant aux utilisateurs de synchroniser les sons nouvellement créés avec leur vidéo téléchargée. Par exemple, en regardant un clip montrant un cheval qui marche, un utilisateur pourrait dire « clip-clop » en rythme avec ses pas et ajouter la description textuelle « sabots sur le béton ». L'outil produit alors quatre options d'effets sonores différentes parmi lesquelles choisir.
Cette fonctionnalité est une extension de la démo Project Super Sonic présentée par Adobe en octobre dernier. Elle n'est pas conçue pour la parole, mais elle peut créer des sons d'impact, tels que des brindilles qui se cassent, des bruits de pas ou des bruits de fermeture éclair, ainsi que des fonds ambiants comme des scènes de nature ou le brouhaha de la ville.
Adobe introduit également des commandes avancées pour son générateur Firefly Text-to-Video. Avec Composition Reference, les utilisateurs peuvent télécharger une vidéo avec leur texte pour reproduire le cadrage et les angles de caméra de ce clip dans le résultat généré par l'IA, ce qui permet d'obtenir plus facilement le résultat souhaité sans avoir à modifier à plusieurs reprises les descriptions textuelles. Le recadrage des images clés permet aux utilisateurs de recadrer et de télécharger des images pour les images de début et de fin, que Firefly utilise pour générer la vidéo entre les deux. De nouveaux préréglages de style offrent une gamme d'esthétiques visuelles à appliquer rapidement, notamment des animations, des illustrations vectorielles, des animations en pâte à modeler, etc.

Exemples de préréglages de style conçus pour guider la sortie de la génération vidéo par IA d'Adobe. Image : AdobeCes préréglages de style ne fonctionnent actuellement qu'avec le modèle d'IA vidéo Firefly d'Adobe. D'après une démonstration en direct, les résultats ne sont pas parfaits : par exemple, le préréglage « animation en pâte à modeler » ressemblait à une animation 3D du début des années 2000. Cependant, Adobe continue d'intégrer la prise en charge des modèles d'IA concurrents dans ses outils. Alexandru Costin, responsable de l'IA générative chez Adobe, a déclaré à The Verge que des commandes et des préréglages similaires pourraient être disponibles pour les modèles d'IA tiers à l'avenir. Cette initiative témoigne des efforts déployés par Adobe pour conserver sa position de leader dans le domaine des logiciels créatifs à mesure que les outils d'IA gagnent en popularité, même si ses propres modèles génératifs ne sont pas toujours à la hauteur de ceux de leaders tels qu'OpenAI ou Google.
Article connexe
Google teste l'agent IA Remy pour Gemini à mesure que l'accent se déplace vers le contrôle utilisateur
Selon Business Insider, Google teste Remy, un nouvel agent personnel d’IA pour Gemini. Cet outil vise à exécuter des tâches au nom des utilisateurs, rationalisant ainsi les flux de travail professionnels et les routines quotidiennes.Actuellement, Re
Ollie mise sur la protection de la vie privée pour remporter la course aux assistants IA
Pour être véritablement utile, un assistant IA doit comprendre en profondeur son utilisateur. Ollie, un assistant personnel conçu pour la vie quotidienne, part du principe que cela ne nécessite pas de
Comment « AI LIVE : Londres » abordera les thèmes de l'IA et de l'automatisation industrielle
Ce sommet réunira des dirigeants de haut niveau venus du monde entier afin d'aborder les défis urgents auxquels sont confrontés les secteurs d'activité à l'échelle mondiale, allant des bouleversements
Recommandations de sujets spéciaux liés
commentaires (1)
Sound design is the unsung hero of filmmaking! This tool allowing us to sketch audio with simple vocalizations is a game-changer. It lowers the barrier for indie creators who might not have a huge sound library 🎙️. But I do wonder, as these models get better, will we start losing the art of foley and the unique 'imperfect' textures created by real-world objects?
Adobe déploie de nouvelles fonctionnalités d'IA générative pour les cinéastes, offrant des moyens créatifs de produire des effets sonores et de diriger des vidéos générées par l'IA. Au-delà des invites textuelles standard utilisées pour diriger les modèles d'IA Firefly d'Adobe, les créateurs peuvent désormais utiliser des effets sonores vocalisés, tels que les sons « boom » ou « whoosh », pour générer des fichiers audio personnalisés, et utiliser des clips de référence pour influencer le mouvement dans les vidéos créées par Firefly.
La version bêta de l'outil Generate Sound Effects (Générer des effets sonores) de l'application Firefly fonctionne à la fois avec des séquences enregistrées et générées par l'IA, offrant aux utilisateurs un contrôle audio plus précis que des options telles que Veo de Google. Son interface imite la timeline d'un éditeur vidéo, permettant aux utilisateurs de synchroniser les sons nouvellement créés avec leur vidéo téléchargée. Par exemple, en regardant un clip montrant un cheval qui marche, un utilisateur pourrait dire « clip-clop » en rythme avec ses pas et ajouter la description textuelle « sabots sur le béton ». L'outil produit alors quatre options d'effets sonores différentes parmi lesquelles choisir.
Cette fonctionnalité est une extension de la démo Project Super Sonic présentée par Adobe en octobre dernier. Elle n'est pas conçue pour la parole, mais elle peut créer des sons d'impact, tels que des brindilles qui se cassent, des bruits de pas ou des bruits de fermeture éclair, ainsi que des fonds ambiants comme des scènes de nature ou le brouhaha de la ville.
Adobe introduit également des commandes avancées pour son générateur Firefly Text-to-Video. Avec Composition Reference, les utilisateurs peuvent télécharger une vidéo avec leur texte pour reproduire le cadrage et les angles de caméra de ce clip dans le résultat généré par l'IA, ce qui permet d'obtenir plus facilement le résultat souhaité sans avoir à modifier à plusieurs reprises les descriptions textuelles. Le recadrage des images clés permet aux utilisateurs de recadrer et de télécharger des images pour les images de début et de fin, que Firefly utilise pour générer la vidéo entre les deux. De nouveaux préréglages de style offrent une gamme d'esthétiques visuelles à appliquer rapidement, notamment des animations, des illustrations vectorielles, des animations en pâte à modeler, etc.

Ces préréglages de style ne fonctionnent actuellement qu'avec le modèle d'IA vidéo Firefly d'Adobe. D'après une démonstration en direct, les résultats ne sont pas parfaits : par exemple, le préréglage « animation en pâte à modeler » ressemblait à une animation 3D du début des années 2000. Cependant, Adobe continue d'intégrer la prise en charge des modèles d'IA concurrents dans ses outils. Alexandru Costin, responsable de l'IA générative chez Adobe, a déclaré à The Verge que des commandes et des préréglages similaires pourraient être disponibles pour les modèles d'IA tiers à l'avenir. Cette initiative témoigne des efforts déployés par Adobe pour conserver sa position de leader dans le domaine des logiciels créatifs à mesure que les outils d'IA gagnent en popularité, même si ses propres modèles génératifs ne sont pas toujours à la hauteur de ceux de leaders tels qu'OpenAI ou Google.
Ollie mise sur la protection de la vie privée pour remporter la course aux assistants IA
Pour être véritablement utile, un assistant IA doit comprendre en profondeur son utilisateur. Ollie, un assistant personnel conçu pour la vie quotidienne, part du principe que cela ne nécessite pas de
Comment « AI LIVE : Londres » abordera les thèmes de l'IA et de l'automatisation industrielle
Ce sommet réunira des dirigeants de haut niveau venus du monde entier afin d'aborder les défis urgents auxquels sont confrontés les secteurs d'activité à l'échelle mondiale, allant des bouleversements
Sound design is the unsung hero of filmmaking! This tool allowing us to sketch audio with simple vocalizations is a game-changer. It lowers the barrier for indie creators who might not have a huge sound library 🎙️. But I do wonder, as these models get better, will we start losing the art of foley and the unique 'imperfect' textures created by real-world objects?





Maison






