ElevenLabs har skapat en AI-tjänst för röstkloning och dubbning av video på 20 språk

Jacek Dylag/Unsplash

Startup-företaget ElevenLabs har utvecklat en tjänst baserad på artificiell intelligens som kan dubba videor på 20 språk samtidigt som skådespelarnas röster bevaras.

Det här är vad vi vet

ElevenLabs är en startup som erbjuder en röstkloningstjänst med hjälp av artificiell intelligens baserat på ljudprover som laddats upp till den. Den nya dupliceringsfunktionen gör i princip samma sak: den analyserar talet från skådespelarna i en video och klonar deras röster. AI genererar sedan ett nytt ljudspår på det valda språket i samma stil.

Verktyget stöder mer än 20 språk, inklusive hindi, portugisiska, spanska, japanska, ukrainska, polska och arabiska.

Enligt företaget är verktyget utformat för medieföretag, utbildare och innehållsskapare. De måste dock ha tillstånd från upphovsrättsinnehavare för att skapa dubbning.

ElevenLabs hävdar att systemet inte bara kommer att kunna översätta innehåll, utan också generera ny dialog på målspråket med hjälp av skådespelarens egen röst. Systemet kan också lagra känslor och intonationer.

Källa: ElevenLabs