OpenAI presenterade Sora, en AI-modell för konvertering av text till video
OpenAI
OpenAI har tillkännagivit en ny videogenereringsmodell kallad Sora, som kan skapa realistiska och fantasifulla videor som är upp till en minut långa utifrån en textbeskrivning.
Det här är vad vi vet
Enligt OpenAI skapar Sora komplexa scener med flera figurer genom att exakt placera objekt och karaktärer i bild. Modellen kan också generera olika typer av rörelser.
Vi presenterar Sora, vår text-till-videomodell.
- OpenAI (@OpenAI) 15 februari 2024
Sora kan skapa videor på upp till 60 sekunder med mycket detaljerade scener, komplexa kamerarörelser och flera karaktärer med livfulla känslor. https://t.co/7j2JN27M3W
Frågeställning: "Vacker, snöig... pic.twitter.com/ruTEWn87vf
Utvecklarna noterade AI:ns förmåga att beskriva bakgrunder, enskilda objekt och karaktärer i detalj. Dessutom kan den generera karaktärsansikten med färgstarka och varierande känslor.
Uppmaning: "En filmtrailer med äventyren för den 30 år gamla rymdmannen som bär en röd yllestickad motorcykelhjälm, blå himmel, saltöken, filmisk stil, filmad på 35 mm film, livfulla färger." pic.twitter.com/0JzpwPUGPB
- OpenAI (@OpenAI) 15 februari 2024
Frågeställning: "Flera gigantiska ulliga mammutar kommer gående på en snöig äng, deras långa ulliga päls blåser lätt i vinden när de går, snötäckta träd och dramatiska snöklädda berg i fjärran, eftermiddagsljus med svepande moln och en sol högt i fjärran... pic.twitter.com/Um5CWI18nS
- OpenAI (@OpenAI) 15 februari 2024
OpenAI hävdar att deras modell har en viss "förståelse" för de fysiska lagarna i den verkliga världen. Ibland finns det dock svårigheter med att skapa komplexa scener och orsak-verkan-relationer.
Förutom att syntetisera videor från grunden kan Sora förfina och utöka befintliga videor. Den kan fylla i bildrutor som saknas i en bildsekvens.
Sora är för närvarande endast tillgänglig för "red teamers" som utvärderar modellen för potentiella skador och risker. OpenAI har också öppnat upp för vissa bildkonstnärer, designers och filmskapare för att få feedback.
Källa: OpenAI: OpenAI
