ElevenLabs est un leader dans le domaine de l’audio et de l’IA. Ses outils proposent le clonage de voix par l’IA. Ils sont reconnus dans le monde entier. La société propose un nouveau produit, AI Sound Effects pour créer les effets sonores parfaits pour vos projets.

Annoncé initialement en février, l’outil vous permet de générer des effets sonores, des voix de personnages personnalisée, et des extraits musicaux à partir de textes. Vous pouvez écouter les effets sonores créés par l’outil pour la vidéo de démonstration Sora d’OpenAI ci-dessous :

Nous avons été époustouflés par l’annonce de Sora, mais nous avons pensé qu’il manquait quelque chose…

Et si vous pouviez décrire un son et le générer avec l’IA ? pic.twitter.com/HcUxQ7Wndg

ElevenLabs (@elevenlabsio) 18 février 2024

Association avec Shutterstock pour affiner le modèle

ElevenLabs explique que ces outils sont destinés à aider les créateurs de contenu, le personnel des studios de cinéma et de télévision et les développeurs de jeux vidéo à générer les sons dont ils ont besoin pour donner vie à leurs projets. Et ce « à un prix abordable et à grande échelle ».

« Nous avons révolutionné AI Voices en produisant la première plateforme de synthèse vocale véritablement émotive et humaine », a déclaré Mati Staniszewski, cofondateur et PDG d’ElevenLabs, dans un communiqué. « Avec le lancement des effets texte-son, nous marquons une autre étape majeure, qui équipera les créateurs avec plus d’outils audio pour les aider à produire du contenu de haute qualité. »

Pour rendre les effets d’IA possibles, ElevenLabs s’est associé à Shutterstock pour affiner son modèle. Il utilisé le contenu de l’audiothèque Shutterstock. De quoi sécuriser légalement l’utilisation de son modèle d’IA génératif.

Un prompt et 5 résultats différents

L’outil AI Sound Effects est disponible sur le site d’ElevenLabs. Vous pouvez essayer l’outil gratuitement, bien qu’il soit comptabilisé dans votre limite mensuelle de 10 000 caractères.

En tant qu’amateur de montage vidéo dans le cadre de mon travail, j’ai été enthousiasmé par la possibilité de trouver plus facilement des effets sonores. J’ai essayé l’outil pour voir comment il fonctionnait.

Pour commencer, visitez le site web d’ElevenLabs, cliquez sur « effets sonores » dans le panneau de droite et tapez ce que vous voulez entendre. Le premier prompt que j’ai saisi était « petit chien qui aboie ». L’outil a généré cinq versions différentes, comme on peut le voir ci-dessous :

Capture d’écran par Sabrina Ortiz/ZDNET

L’outil AI Sound Effects peut également générer de la musique

En tant que fier propriétaire d’un Yorkie, je peux attester que les effets sonores générés étaient proches de la réalité. L’outil est intuitif et le processus est le même que pour la plupart des générateurs d’images ou de musique AI.

Lorsque j’ai utilisé un prompt plus complexe, « femmes qui applaudissent », le générateur a mis plus de temps à produire un résultat. Et la qualité n’était pas aussi précise que lors du premier test. En revanche, lorsque j’ai utilisé des prompts plus simples, telles que « la sonnerie d’alarme de la cuisine », j’ai obtenu d’excellents résultats. Les cinq résultats ressemblaient au prompt mais avec des variantes, offrant différentes options.

L’outil AI Sound Effects peut également générer de la musique. Lorsqu’il m’a été demandé de créer un « rythme lo-fi avec un groove jazzy », l’outil a produit cinq possibilités de haute qualité.

En définitive, j’ai été impressionné par cet outil et je vous encourage à le tester. AI Sound Effects est une expérience amusante et gratuite.

Cela dit, je vous recommande de ne pas demander à l’outil de produire des sons humains. Si vous souhaitez générer de la parole, consultez plutôt l’outil de synthèse vocale d’ElevenLab.