AudioCraft, l'outil d'IA open source de Meta pour créer de la musique/audio, permet aux utilisateurs d'y parvenir via des invites textuelles

Selon les informations de l'heure de l'Est des États-Unis du 2 août, Meta Company a ouvert le 2 août un outil d'IA générative appelé AudioCraft, qui peut aider les utilisateurs à créer de la musique et de l'audio via des invites textuelles

Selon l'introduction officielle de Meta, AudioCraft contient trois composants principaux :

• MusicGen : formé avec de la musique appartenant à Meta/spécialement sous licence pour générer de la musique basée sur des invites textuelles.
• AudioGen : utilisez des effets sonores publics pour l'entraînement afin de générer de l'audio ou d'étendre l'audio existant. Plus tard, vous pouvez également générer des effets sonores environnementaux (tels que des aboiements de chien, des klaxons de voiture, des pas sur le parquet).
• EnCodec (version améliorée) : codec de compression audio basé sur un réseau neuronal qui génère une musique de meilleure qualité avec moins d'artefacts ou une compression sans perte de fichiers audio.

Une fois l'outil open source, les chercheurs et praticiens concernés peuvent utiliser leurs propres ensembles de données pour former des modèles. L'affirmation officielle est que les modèles de la série AudioCraft peuvent produire un son de haute qualité de manière stable sur le long terme et sont faciles à utiliser, fournissant de l'inspiration aux musiciens et aux concepteurs sonores, les aidant à réfléchir rapidement à des idées et à « réitérer leur travail de nouvelles manières » .

Selon des rapports précédents d'IT House, En juin de cette année, Meta a open source le modèle de langage d'IA MusicGen, qui est basé sur le modèle Transformer lancé par Google en 2017. Comme le nom du modèle l'indique, MusicGen est principalement utilisé pour la génération de musique. Il peut convertir du texte et des mélodies existantes en morceaux de musique complets.

Démonstration vidéo :

Adresse du projet AudioCraft : Cliquez ici pour y aller

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!