Fugatto: NVIDIA presenterar kraftfullt generativt videoverktyg

NVIDIA har introducerat Fugatto (Foundational Generative Audio Transformer Opus 1), en universell generativ AI-modell som kan skapa och omvandla musik, röster och ljud baserat på text- eller ljudförfrågningar. Företaget kallade utvecklingen för en "schweizisk armékniv för ljud".

Här är vad vi vet

Fugatto är unik genom att den kombinerar funktioner som tidigare utfördes av separata modeller. Den kan utföra komplexa uppgifter som:

• Generera musik från text: Modellen kan till exempel skapa en "melankolisk pianokomposition med en lätt jazzrytm".
• Ljudtransformation: Du kan byta instrument i en låt, t.ex. göra om en gitarr till en cello eller lägga till trummor i en befintlig melodi.
• Röstmodifiering: Modellen kan justera den känslomässiga tonen i din röst eller till och med ändra dess accenter.
• En speciell egenskap hos Fugatto är förmågan att syntetisera ljud som ännu inte har existerat. Den kan t.ex. skapa ett unikt ljud som passar till en viss film eller ett visst spel.

Varför det är viktigt

NVIDIAs utveckling sätter nya standarder för generativ AI inom ljud. Med Fugatto får kreativa yrkesutövare ett verktyg som inte bara automatiserar rutinmässiga processer, utan också ger oändliga möjligheter till kreativitet. Fugattos förmåga att anpassa sig till många olika scenarier innebär att modellen i framtiden kan komma att användas inom områden där ljud är avgörande, från reklam till utbildningsprogram.

Den här tekniken bekräftar

Den här tekniken bekräftar också trenden med AI-modeller som rör sig mot multitasking. Tidigare krävdes separata modeller för olika uppgifter, men nu visar Fugatto att multifunktionella lösningar inte bara är möjliga utan också effektiva.

Vad ligger bakom ordet Fugatto?

Uppenbarligen kommer det från ordet "fuga". En fuga är en musikalisk form och kompositionsteknik som kännetecknas av en polyfonisk struktur, där ett eller flera teman (melodier) upprepas och utvecklas i olika röster. Termen härstammar från det latinska ordet fuga, som betyder "springa" eller "fly", vilket återspeglar idén om att ett tema "springer" från en röst till en annan. Fugan blev en central genre i barockmusiken, särskilt tack vare kompositörer som Johann Sebastian Bach, som anses vara en av de största mästarna i denna genre.

Ordet "fugatto" (italienska: fugato) betyder en polyfon musikalisk form som är relaterad till fugan. Fugatto har sitt ursprung i verk med strikt stil och omfattar en imitationsteknik där ett eller flera teman upprepas och utvecklas i olika stämmor.

Källa: blogs.nvidia.com