Meta har släppt AudioCrafts AI-ljud- och sånggenerator och öppnat dess källkod

Av: Bohdan Kaminskyi | 03.08.2023, 12:59
Meta har släppt AudioCrafts AI-ljud- och sånggenerator och öppnat dess källkod

Meta har släppt AudioCraft, ett AI-verktyg med öppen källkod som genererar musik och ljud från textuella ledtrådar.

Här är vad vi vet

AudioCraft består av tre AI-modeller som var och en löser olika ljudgenereringsproblem:

  • MusicGen skapar musik. Den har tränats på 20 000 timmar musik som ägs av Meta eller licensierats specifikt för detta ändamål;
  • AudioGen genererar ljud genom att imitera skällande hundar eller fotsteg. Modellen har tränats på inspelningar som samlats in på offentliga platser;
  • EnCodec-avkodaren gör det möjligt att skapa ljud med färre artefakter.

Meta tror att AudioCraft har potential att skapa en ny våg av låtar, på samma sätt som syntarna en gång förändrade musiken. Företaget har också öppnat upp källkoden för verktyget för att diversifiera de data som används för att träna det.

Du kan lyssna på exempel på musik och ljud som skapats av AudioCraft på projektets webbplats. Verktygets källkod finns tillgänglig på GitHub.

Källa: Meta AI: Meta AI