Adobe presenterade ett imponerande AI-assisterat projekt för videoskalning

Adobe-forskare har utvecklat en ny generativ artificiell intelligensmodell, VideoGigaGAN, som kan skala suddig video upp till åtta gånger den ursprungliga upplösningen.

Det här är vad vi vet

Adobe hävdar att VideoGigaGAN överträffar andra uppskalningsmetoder för Video Super Resolution (VSR) och ger mer detaljerade resultat utan oönskade AI-inducerade artefakter.

Traditionellt sett är generativa adversariala nätverk (GAN) effektiva för att skala stillbilder till hög upplösning. De har dock problem med video, där de skapar flimmer och andra defekter. Alternativa metoder undviker detta, men ger inte samma höga kvalitet.

VideoGigaGAN syftar till att kombinera de bästa aspekterna - högkvalitativa GAN-resultat med minimala problem med artefakter i de utgående bildrutorna. Adobe har tagit fram flera exempel som visar hur tekniken fungerar.

Dopis vid @luokai

Återbesök av trådar

Vissa fina detaljer i demovideon, t.ex. hudtextur och veck, verkar vara helt genererade, men överlag ser resultaten naturliga ut. Det är svårt att säga om upplösningen har förbättrats med generativ AI, vilket väcker frågor om foto- och videoinnehållets natur.

För närvarande är VideoGigaGAN fortfarande ett forskningsprojekt, och det är okänt om Adobe kommer att införliva tekniken i sina produkter som Premiere Pro. Tidigare tillkännagav företaget ett annat diffusionsbaserat experiment för upplösningsförbättring, Project Res-Up.

Källa: Adobe The Verge